]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Use a function for the timestamp stuff
[dak.git] / ChangeLog
1 2008-05-06  Joerg Jaspert  <joerg@debian.org>
2
3         * config/debian/cron.dinstall: Put the timestamp stuff into an own
4         function, call that from everywhere. Also change the timestamp
5         format to not be local dependent.
6
7 2008-05-05  Joerg Jaspert  <joerg@debian.org>
8
9         * daklib/dak_exceptions.py (dakerrors): add TransitionsError
10         * dak/transitions.py: Use it, instead of the own definition
11
12 2008-05-05  Mark Hymers  <mhy@debian.org>
13
14         * daklib/dak_exceptions.py: Add a default message and tidy up our string
15         representation
16
17 2008-05-05  Joerg Jaspert  <joerg@debian.org>
18
19         * daklib/dak_exceptions.py: New file, central place for all those
20         own exceptions dak may raise.
21
22         * daklib/utils.py: Use dak_exceptions and delete all those string
23         exception raising stuff, which is depcreated.
24         During that delete the unknown_hostname_exc, as it wasnt used.
25
26         * dak/import_archive.py: use the new Exception class
27         * dak/rm.py: dito
28         * dak/generate_releases.py: dito
29         * dak/queue_report.py: dito
30         * daklib/queue.py: dito
31
32 2008-05-04  Joerg Jaspert  <joerg@debian.org>
33
34         * daklib/queue.py: Various pychecker cleanups
35
36         * dak/import_keyring.py: Remove unused daklib.logging and Logger
37         and add the actually used daklib/utils
38
39         * dak/examine_package.py: remove daklib.queue import, never used
40
41         * dak/check_proposed_updates.py: Import stuff from daklib as
42         "import daklib.foo as foo"
43         * dak/clean_proposed_updates.py: likewise
44         * dak/clean_queues.py: likewise
45         * dak/clean_suites.py: likewise
46         * dak/compare_suites.py: likewise
47         * dak/cruft_report.py: likewise
48         (get_suite_binaries): Seperated in own function, out of main. More
49         of main should be splitted. (Or well, cruft_report redesigned a
50         little, so its easier to run on multiple suites with differing tests)
51
52         * dak/examine_package.py: likewise
53         * dak/find_null_maintainers.py: likewise
54         * dak/generate_index_diffs.py: likewise
55         * dak/generate_releases.py: likewise
56         * dak/import_archive.py: likewise
57         * dak/import_ldap_fingerprints.py: likewise
58         * dak/import_users_from_passwd.py: likewise
59         * dak/init_db.py: likewise
60         * dak/init_dirs.py: likewise
61         * dak/ls.py: likewise
62         * dak/make_maintainers.py: likewise
63         * dak/make_overrides.py: likewise
64         * dak/make_suite_file_list.py: likewise
65         * dak/new_security_install.py: likewise
66         * dak/override.py: likewise
67         * dak/process_accepted.py: likewise
68         * dak/process_new.py: likewise
69         * dak/process_unchecked.py: likewise
70         * dak/rm.py: likewise
71         * dak/show_new.py: likewise
72         * dak/split_done.py: likewise
73         * dak/stats.py: likewise
74         * dak/transitions.py: likewise
75
76         * dak/check_archive.py (check_files_not_symlinks): Remove
77         long-time unused and commented code. Import stuff from daklib as
78         "import daklib.foo as foo"
79
80 2008-05-04  Thomas Viehmann  <tv@beamnet.de>
81
82         * dak/process_unchecked.py (check_signed_by_key): cater for uid_email
83         None in sponsor notification
84
85 2008-05-03  Joerg Jaspert  <joerg@debian.org>
86
87         * dak/examine_package.py: clean up pychecker warnings (merged with
88         Thomas changes to the NEW display)
89
90 2008-05-03  Mark Hymers <mhy@debian.org>
91
92         * dak/check_archive.py: clean up pychecker warnings
93         * dak/check_overrides.py: likewise
94         * dak/check_proposed_updates.py: likewise
95         * dak/clean_proposed_updates.py: likewise
96         * dak/clean_queues.py: likewise
97         * dak/control_overrides.py: likewise
98         * dak/control_suite.py: likewise
99         * dak/decode_dot_dak.py: likewise
100         * dak/examine_package.py: likewise
101         * dak/process_new.py: likewise
102         * dak/process_unchecked.py: likewise
103         * dak/queue_report.py: likewise
104         * dak/reject_proposed_updates.py: likewise
105         * dak/security_install.py: likewise
106         * dak/show_new.py: likewise
107         * dak/stats.py: likewise
108         * dak/symlink_dists.py: likewise
109         * dak/transitions.py: likewise
110
111 2008-05-03  Joerg Jaspert  <joerg@debian.org>
112
113         * config/debian/cron.daily: Rename to
114         * config/debian/cron.dinstall: this, as its not really something run
115         daily for some time now. And while dinstall is an OLD name, its
116         recognized pretty well within Debian
117         Also add some more timing information
118         Do not allow automated [o-]p-u-new processing to break dinstall
119
120 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
121
122         * web/,web/style.css: add web dir and current style.css
123
124         * dak/examine_package.py, dak/show_new.py: improve NEW html pages,
125         based on mock-up by M. Ferrari.
126         remove Checksums-* from examine-package output
127
128 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
129
130         * dak/process_unchecked.py (check_hashes): Reject on error while
131         parsing Checksums-*.
132
133 2008-05-02  Joerg Jaspert  <joerg@debian.org>
134
135         * config/debian/pseudo-packages*: Removed listarchives, closes #468667
136         added wiki.debian.org (currently pointing to debian-www), closes #194206
137         added security-tracker, closes #436152
138         added release.debian.org, closes #451005
139
140         * config/debian/cron.buildd: Cleanup unreachable code. (If someone
141         still wants it - its in revision control...)
142
143         * config/debian/cron.daily: Modify call to update-ftpstats to only
144         use files log/2*, instead of log/*, so it ignores the new cron/
145         subdir. Makes sure it can't get confused, and is also safe for
146         nearly thousand years. If this code is really in use in year 3000,
147         im sure people can adjust it! :)
148
149         * config/debian/vars: Add logdir as a place for cronjob log output
150
151         * config/debian/cron.daily: Use a logfile and be more verbose of
152         whats going on.
153           Also moved the commented VACUUM ; VACUUM ANALYZE calls over to
154         cron.weekly, ...
155         * config/debian/cron.weekly: likewise,
156           ... and activate those calls again. Once a week, as an
157         additional safety bet to be sure the stuff does get run is ok,
158         even if we have autovacuum by default.
159
160 2008-05-02  Thomas Viehmann  <tv@beamnet.de>
161
162         * dak/process_unchecked.py (check_hashes): fix typo in
163           checksum reject message.
164
165 2008-05-02  Joerg Jaspert  <joerg@debian.org>
166
167         * config/debian/extensions.py: used reindent.py from the python
168         2.x source examples to get all dak code use the same indentation
169         style, no longer a mix of 4 spaces / 1 tab.
170         * dak/check_archive.py: likewise
171         * dak/check_overrides.py: likewise
172         * dak/check_proposed_updates.py: likewise
173         * dak/clean_proposed_updates.py: likewise
174         * dak/clean_queues.py: likewise
175         * dak/clean_suites.py: likewise
176         * dak/compare_suites.py: likewise
177         * dak/control_overrides.py: likewise
178         * dak/control_suite.py: likewise
179         * dak/cruft_report.py: likewise
180         * dak/dak.py: likewise
181         * dak/decode_dot_dak.py: likewise
182         * dak/examine_package.py: likewise
183         * dak/find_null_maintainers.py: likewise
184         * dak/generate_index_diffs.py: likewise
185         * dak/generate_releases.py: likewise
186         * dak/import_archive.py: likewise
187         * dak/import_keyring.py: likewise
188         * dak/import_ldap_fingerprints.py: likewise
189         * dak/import_users_from_passwd.py: likewise
190         * dak/init_db.py: likewise
191         * dak/init_dirs.py: likewise
192         * dak/ls.py: likewise
193         * dak/make_maintainers.py: likewise
194         * dak/make_overrides.py: likewise
195         * dak/make_suite_file_list.py: likewise
196         * dak/mirror_split.py: likewise
197         * dak/new_security_install.py: likewise
198         * dak/override.py: likewise
199         * dak/poolize.py: likewise
200         * dak/process_accepted.py: likewise
201         * dak/process_new.py: likewise
202         * dak/process_unchecked.py: likewise
203         * dak/queue_report.py: likewise
204         * dak/reject_proposed_updates.py: likewise
205         * dak/rm.py: likewise
206         * dak/security_install.py: likewise
207         * dak/show_new.py: likewise
208         * dak/split_done.py: likewise
209         * dak/stats.py: likewise
210         * dak/symlink_dists.py: likewise
211         * dak/test/001/test.py: likewise
212         * dak/test/002/test.py: likewise
213         * dak/transitions.py: likewise
214         * daklib/extensions.py: likewise
215         * daklib/logging.py: likewise
216         * daklib/queue.py: likewise
217         * daklib/utils.py: likewise
218         * scripts/debian/insert_missing_changedby.py: likewise
219
220         * dak/process_new.py (recheck): Make the path check more robust,
221         so we no longer have to keep process_new seperate trees between
222         security and normal archive.
223
224 2008-04-27  Joerg Jaspert  <joerg@debian.org>
225
226         * dak/process_accepted.py (Urgency_Log.__init__): Warn if the
227         configured path does not exist or is not writeable by us. Use a
228         tmp path if so, so we do not lose the urgencies in such cases.
229
230         * config/debian/dak.conf: Changed path for UrgencyLog
231         Same for the ReleaseTransitions file
232
233         * config/debian/cron.daily: Notify qa user on merkel of dinstall
234         start, Remove the britney call
235
236 2008-04-26  Joerg Jaspert  <joerg@debian.org>
237
238         * dak/process_new.py: Call end() whenever we try to leave by
239         pressing Q
240
241         * config/debian/cron.daily: Also report NBS in experimental
242
243 2008-04-25  Joerg Jaspert  <joerg@debian.org>
244
245         * dak/cruft_report.py (main): Make it possible to look at
246         experimental too, especially NBS
247
248         * dak/split_done.py (main): Only move files into their subdirs if
249         they are older than 30 days. That enables us to run this script as
250         part of a cronjob.
251
252         * config/debian/cron.weekly: Run dak split-done
253
254 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
255
256         * dak/process_unchecked.py: add changes["sponsoremail"]
257           for sponsored uploads if desired
258         * daklib/queue.py: add changes["sponsoremail"] to
259           Subst["__MAINTAINER_TO__"] if present
260         * daklib/utils.py: add functions
261           is_email_alias to check which accounts allow email forwarding,
262           which_alias_file to find the alias file, and
263           gpg_get_key_addresses to find uid addresses for a given
264             fingerprint
265
266 2008-04-22  Joerg Jaspert  <joerg@debian.org>
267
268         * setup/init_pool.sql: added a function/aggregate for the release
269         team to base some script on it.
270
271         * config/debian/cron.daily: push katie@merkel to immediately start
272         the sync of projectb there.
273
274 2008-04-21  Joerg Jaspert  <joerg@debian.org>
275
276         * scripts/debian/expire_dumps: New script, expires old database
277         dumps, using a scheme to keep more of the recent dumps.
278
279         * config/debian/cron.daily: Use the new script. Also - compress
280         all files older than 7 days, instead of 30.
281
282         * dak/process_accepted.py (install): Do not break if a
283         source/maintainer combination is already in src_uploaders, "just"
284         warn us.
285
286 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
287
288         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
289         Format lines (ie. those having extra text appended).
290
291 2008-04-19  Joerg Jaspert  <joerg@debian.org>
292
293         * dak/process_unchecked.py (check_files): Sanity check the
294         provides field, which closes #472783
295
296 2008-04-18  Joerg Jaspert  <joerg@debian.org>
297
298         * config/debian/dak.conf: Add mapping stable-proposed-updates
299           -> proposed-updates.
300
301         * dak/transitions.py (load_transitions): Additionally check for
302         invalid package list indentation
303
304 2008-04-17  Joerg Jaspert  <joerg@debian.org>
305
306         * config/debian/dak.conf: Add TempPath statement for the Release
307         Transitions script
308
309         * dak/transitions.py (temp_transitions_file): Use the TempPath
310         (write_transitions_from_file): Check if the file we should get our
311         transitions from is in our TempPath, error out if it isnt
312         (main): Check for TempPath existance
313
314 2008-04-12  James Troup  <troup@debian.org>
315
316         * dak/clean_proposed_updates.py: add support for -s/--suite and
317         -n/--no-action.
318
319 2008-04-11  Anthony Towns  <ajt@debian.org>
320
321         * dak/utils.py: build_file_list() extra parameters so it can
322         build a file list for checksums-foo fields. Don't use float() to
323         compare formats, because Format: 1.10 should compare greater than
324         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
325
326         * dak/process_unchecked.py: check_md5sum becomes check_hashes
327         and check_hash. If changes format is 1.8 or later, also check
328         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
329         and reject on presence/absence of un/expected checksums-* fields.
330
331 2008-04-07  Joerg Jaspert  <joerg@debian.org>
332
333         * daklib/utils.py (build_file_list): Check for dpkg .changes
334         adjusted to reject newer (and right now broken) 1.8 version, until
335         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
336
337 2008-03-22  Joerg Jaspert  <joerg@debian.org>
338
339         * dak/transitions.py (load_transitions): Check if all our keys are
340         defined, if there are only keys defined we want and also the types
341         of the various keys.
342
343 2008-03-22  Anthony Towns  <ajt@debian.org>
344
345         * dak/edit_transitions.py: Add --import option.
346         Add --use-sudo option. Use fcntl locking for writing.
347         Move writing into a function (write_transitions).
348         Reinvoke self using sudo and --import if necessary.
349         Move temporary file creation into a function, use mkstemp.
350         Rename to "dak transitions".
351
352 2008-03-21  Joerg Jaspert  <joerg@debian.org>
353
354         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
355         edited file back in place
356         (check_transitions): Use proper locking and also use sudo to copy
357         the new file in place
358
359 2008-03-21  Anthony Towns <ajt@debian.org>
360
361         * config/debian/extensions.py: Add infrastructure for replacing
362         functions in dak modules; add upload blocking for dpkg.
363
364 2008-03-12  Joerg Jaspert  <joerg@debian.org>
365
366         * dak/edit_transitions.py: Done a number of cleanups to make code
367         working. Also changed the way prompting/answering goes, to not
368         have to import daklib/queue.
369         (edit_transitions): When done with a successful edit - also print
370         a final overview about defined transitions
371
372 2008-03-11  Joerg Jaspert  <joerg@debian.org>
373
374         * dak/process_unchecked.py: Import syck module directly, not "from
375         syck import *"
376         (check_transition): Do the check for sourceful upload in here
377         Also adjust the syck loading commands, rename new_vers to
378         expected, curvers to current, to make it more clear what they mean.
379
380         * daklib/database.py (get_suite_version): Renamed from
381         get_testing_version. Also changed the cache variables name
382
383         * The above changes are based on modifications from Anthony.
384
385         * dak/dak.py (init): Renamed check -> edit transitions
386
387         * dak/edit_transitions.py: Renamed from check_transitions.py
388         (main): Also rename new_vers/curvers to expected/current
389         Basically a nice rewrite, so it now does checks and edit,
390         depending on how you call it. Check also removes old transitions,
391         if user wants it.
392
393 2008-03-02  Joerg Jaspert  <joerg@debian.org>
394
395         * debian/control (Suggests): Add python-syck to Depends:
396
397         * dak/dak.py (init): Tell it about check_transitions
398
399         * dak/check_transitions.py (usage): Added, checks the transitions
400         file (if any)
401
402         * daklib/database.py (get_testing_version): Added. Returns the
403         version for the source in testing, if any
404
405         * dak/process_unchecked.py (check_transition): Added. Checks if a
406         release team member defined a transition, and rejects based on
407         that data.
408         (process_it): Use it.
409         (check_transition): Warn on broken transitions file and return,
410         not doing anything.
411         (check_transition): Moved out of here, into daklib/queue
412         (process_it): Call check_transitions only if
413         changes[architecture] has source included.
414         (check_transition): Now call the database.get_testing_version
415
416 2008-02-09  Christoph Berg <myon@debian.org>
417
418         * daklib/queue.py (get_type): fubar does not exist in global
419         namespace.
420
421         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
422         to source table, and move src_uploaders after source so the REFERNCES
423         clause works.
424         * dak/process_accepted.py (install): Fill the changedby column from
425         the information found in the .changes. This will allow to identify
426         NMUs and sponsored uploads more precisely in tools querying projectb.
427         * scripts/debian/insert_missing_changedby.py: Script to import yet
428         missing fields from filippo's uploads-history DB.
429
430 2008-02-06  Joerg Jaspert  <joerg@debian.org>
431
432         * daklib/utils.py (check_signature): Make variable key available,
433         so we can access it.
434
435 2008-01-07  Joerg Jaspert  <joerg@debian.org>
436
437         * dak/examine_package.py (check_deb): Remove linda call. It
438         provides no added benefit to lintian anymore.
439
440 2008-01-07  Joerg Jaspert  <joerg@debian.org>
441
442         * dak/examine_package.py (check_deb): Remove linda call. It
443         provides no added benefit to lintian anymore.
444
445 2008-01-06  Joerg Jaspert  <joerg@debian.org>
446
447         * dak/examine_package.py (do_lintian): lintian now supports html
448         coloring, so use it.
449         (do_command): Dont escape html chars if param escaped = 1
450
451 2008-01-06  Joerg Jaspert  <joerg@debian.org>
452
453         * dak/examine_package.py (do_lintian): lintian now supports html
454         coloring, so use it.
455         (do_command): Dont escape html chars if param escaped = 1
456
457 2007-12-31  Anthony Towns  <ajt@debian.org>
458
459         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
460         when processing result of check_dsc_against_db so we don't promote
461         warnings to rejections.
462
463 2007-12-31  Anthony Towns  <ajt@debian.org>
464
465         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
466         when processing result of check_dsc_against_db so we don't promote
467         warnings to rejections.
468
469 2007-12-30  Joerg Jaspert  <joerg@debian.org>
470
471         * dak/dak.py (init): add show-new. This is based on a patch
472         submitted by Thomas Viehmann in Bug #408318, but large parts of
473         handling it are rewritten and show-new is done by me.
474
475         * dak/queue_report.py (table_row): Add link to generated html page
476         for NEW package.
477
478         * dak/show_new.py: new file, generates html overview for NEW
479         packages, similar to what we see with examine-package.
480
481         * config/debian/cron.hourly: Add show-new call
482
483         * config/debian/dak.conf: Add HTMLPath for Show-New
484
485         * dak/examine_package.py (print_copyright): ignore stderr when
486         finding copyright file.
487         (main): add html option
488         (html_escape): new function
489         (escape_if_needed): ditto
490         (headline): ditto
491         (colour_output): ditto
492         (print_escaped_text): ditto
493         (print_formatted_text): ditto
494         - use those functions everywhere where we generate output, as they
495         easily know if we want html or not and just DTRT
496         (do_lintian): new function
497         (check_deb): use it
498         (output_deb_info): Use print_escaped_text, not print_formatted_text.
499         Also import daklib.queue, determine_new now lives there
500
501         Also add a variable to see if we want html output. Default is
502         disabled, show_new enables it for its use.
503         Most of html, besides header/footer are in examine_package instead
504         of show_new, as it makes it a whole lot easier to deal with it at
505         the point the info is generated.
506
507
508         * dak/process_new.py (determine_new): Moved out of here.
509         (check_valid): Moved out of here.
510         (get_type): Moved out of here.
511
512         * daklib/queue.py (determine_new): Moved here.
513         (check_valid): Moved here.
514         (get_type): Moved here.
515
516         * dak/init_db.py (do_section): Remove non-US code
517
518         * dak/make_overrides.py (main): ditto
519
520         * dak/process_new.py (determine_new): ditto
521
522         * daklib/queue.py (Upload.in_override_p),
523         (Upload.check_override): ditto
524
525         * daklib/utils.py (extract_component_from_section):,
526         (poolify): ditto
527
528         * dak/import_archive.py (update_section): ditto
529
530         * dak/symlink_dists.py (fix_component_section): ditto
531
532         * scripts/debian/mkmaintainers: ditto
533
534         * scripts/debian/update-mirrorlists (masterlist): ditto
535
536         * config/debian-non-US/*: Remove subdir
537
538         * scripts/debian/update-readmenonus: Removed.
539
540
541 2007-12-30  Joerg Jaspert  <joerg@debian.org>
542
543         * dak/dak.py (init): add show-new. This is based on a patch
544         submitted by Thomas Viehmann in Bug #408318, but large parts of
545         handling it are rewritten and show-new is done by me.
546
547         * dak/queue_report.py (table_row): Add link to generated html page
548         for NEW package.
549
550         * dak/show_new.py: new file, generates html overview for NEW
551         packages, similar to what we see with examine-package.
552
553         * config/debian/cron.hourly: Add show-new call
554
555         * config/debian/dak.conf: Add HTMLPath for Show-New
556
557         * dak/examine_package.py (print_copyright): ignore stderr when
558         finding copyright file.
559         (main): add html option
560         (html_escape): new function
561         (escape_if_needed): ditto
562         (headline): ditto
563         (colour_output): ditto
564         (print_escaped_text): ditto
565         (print_formatted_text): ditto
566         - use those functions everywhere where we generate output, as they
567         easily know if we want html or not and just DTRT
568         (do_lintian): new function
569         (check_deb): use it
570         (output_deb_info): Use print_escaped_text, not print_formatted_text.
571         Also import daklib.queue, determine_new now lives there
572
573         Also add a variable to see if we want html output. Default is
574         disabled, show_new enables it for its use.
575         Most of html, besides header/footer are in examine_package instead
576         of show_new, as it makes it a whole lot easier to deal with it at
577         the point the info is generated.
578
579
580         * dak/process_new.py (determine_new): Moved out of here.
581         (check_valid): Moved out of here.
582         (get_type): Moved out of here.
583
584         * daklib/queue.py (determine_new): Moved here.
585         (check_valid): Moved here.
586         (get_type): Moved here.
587
588         * dak/init_db.py (do_section): Remove non-US code
589
590         * dak/make_overrides.py (main): ditto
591
592         * dak/process_new.py (determine_new): ditto
593
594         * daklib/queue.py (Upload.in_override_p),
595         (Upload.check_override): ditto
596
597         * daklib/utils.py (extract_component_from_section):,
598         (poolify): ditto
599
600         * dak/import_archive.py (update_section): ditto
601
602         * dak/symlink_dists.py (fix_component_section): ditto
603
604         * scripts/debian/mkmaintainers: ditto
605
606         * scripts/debian/update-mirrorlists (masterlist): ditto
607
608         * config/debian-non-US/*: Remove subdir
609
610         * scripts/debian/update-readmenonus: Removed.
611
612
613 2007-12-28  Anthony Towns  <ajt@debian.org>
614
615         * daklib/utils.py (check_signature): add NOTATION_DATA and
616         NOTATION_NAME to known keywords.
617
618         * daklib/queue.py (Upload.check_source_against_db):
619
620         * dak/make_suite_file_list.py: add -f/--force option.
621
622         * dak/generate_releases.py: add -a/--apt-conf=FILE and
623         -f/--force-touch options.  Pull version info from the database.
624         Make suite description optional.
625
626         * config/debian/dak.conf: update
627         Reject-Proposed-Updates::MoreInfoURL.  Comment out
628         Suite::Stable::Version and ::Description.
629
630         * config/debian/apt.conf: Add hurd-i386 to unstable
631         debian-installer stanza.
632
633 2007-12-28  Joerg Jaspert  <joerg@debian.org>
634
635         * KEYEXPIRED is actually a known keyword. We do check it earlier
636         on and reject in case the sig is bad (or unknown)
637
638 2007-12-28  Anthony Towns  <ajt@debian.org>
639
640         * daklib/utils.py (check_signature): add NOTATION_DATA and
641         NOTATION_NAME to known keywords.
642
643         * daklib/queue.py (Upload.check_source_against_db):
644
645         * dak/make_suite_file_list.py: add -f/--force option.
646
647         * dak/generate_releases.py: add -a/--apt-conf=FILE and
648         -f/--force-touch options.  Pull version info from the database.
649         Make suite description optional.
650
651         * config/debian/dak.conf: update
652         Reject-Proposed-Updates::MoreInfoURL.  Comment out
653         Suite::Stable::Version and ::Description.
654
655         * config/debian/apt.conf: Add hurd-i386 to unstable
656         debian-installer stanza.
657
658 2007-12-28  Joerg Jaspert  <joerg@debian.org>
659
660         * KEYEXPIRED is actually a known keyword. We do check it earlier
661         on and reject in case the sig is bad (or unknown)
662
663 2007-12-24  Joerg Jaspert  <joerg@debian.org>
664
665         * Also run lintian on the .dsc file to check the source itself.
666
667         * Fix the direct usage of ar | tar etc to get the copyright file
668         and use dpkg-deb, which is made for this and makes us able to
669         process data.tar.bz2 (or whatever format it will be in the
670         future).
671
672 2007-12-24  Joerg Jaspert  <joerg@debian.org>
673
674         * Also run lintian on the .dsc file to check the source itself.
675
676         * Fix the direct usage of ar | tar etc to get the copyright file
677         and use dpkg-deb, which is made for this and makes us able to
678         process data.tar.bz2 (or whatever format it will be in the
679         future).
680
681 2007-12-21  Joerg Jaspert  <joerg@debian.org>
682
683         * Remove the (now useless) check for a pre-depends on dpkg for
684           binaries that contain bzip2 compressed data tarballs.
685
686 2007-12-21  Joerg Jaspert  <joerg@debian.org>
687
688         * Remove the (now useless) check for a pre-depends on dpkg for
689           binaries that contain bzip2 compressed data tarballs.
690
691 2007-08-28  Anthony Towns  <ajt@debian.org>
692
693         * process_unchecked.py: Add support for automatic BYHAND
694         processing.
695         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
696         processing of tag-overrides.
697         * examine_package.py: Summarise duplicate copyright file entries
698         (same md5sum) with a reference to the previous instance, rather
699         than repeating them.
700         * process_new.py: When rejecting from the p-u-new or o-p-u-new
701         holding queues, don't worry if dak has its own reasons for
702         rejecting the package as well as the SRMs.
703
704 2007-08-28  Anthony Towns  <ajt@debian.org>
705
706         * process_unchecked.py: Add support for automatic BYHAND
707         processing.
708         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
709         processing of tag-overrides.
710         * examine_package.py: Summarise duplicate copyright file entries
711         (same md5sum) with a reference to the previous instance, rather
712         than repeating them.
713         * process_new.py: When rejecting from the p-u-new or o-p-u-new
714         holding queues, don't worry if dak has its own reasons for
715         rejecting the package as well as the SRMs.
716
717 2007-06-19  Anthony Towns  <ajt@debian.org>
718
719         * Add nm.debian.org pseudopackage
720
721 2007-06-19  Anthony Towns  <ajt@debian.org>
722
723         * Add nm.debian.org pseudopackage
724
725 2007-06-18  Anthony Towns  <ajt@debian.org>
726
727         * daklib/logging.py: Set umask to not exclude group-writability
728         so we don't get reminded at the start of each month. Thanks to
729         Random J.
730         * dak/override.py: More changes from Herr von Wifflepuck: warn
731         if section of source is different to binary section; restore
732         functionality on source-only overrides; croak if trying to set
733         priority of a source override; never set priority of source
734         overrides; correct typo in logging (s/priority/section/ at
735         one place)
736
737         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
738         * config/debian/cron.daily: auotmatically accept/reject
739         oldstable-proposed-updates based on COMMENTS directory
740
741 2007-06-18  Anthony Towns  <ajt@debian.org>
742
743         * config/debian/apt.conf, config/debian/apt.conf.stable,
744         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
745         (sarge), support for oldstable-proposed-updates, dropping m68k
746         from etch, creating etch-m68k suite, creating lenny.
747
748         * config/debian/vars: update for lenny
749
750         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
751         drop upload limitations, add release postgres user
752
753         * dak/process_new.py: support for automatically accepting and rejecting
754         packages from proposed-updates holding queues via COMMENTS directory
755         * cron.daily: automatically process COMMENTS-based approvals
756         and rejections for proposed-updates holding queues
757
758         * dak/process_unchecked.py: add support for oldproposedupdates
759         holding queue
760
761         * dak/control_suite.py: allow control-suite to work with etch-m68k
762
763         * dak/generate_releases.py: unlink old Release files before updating
764         them if nlinks > 1 (ie, if two files used to be the same, maybe they
765         shouldn't be when generate-releases is run)
766
767         * dak/generate_releases.py: add a couple of commented lines to make
768         it easier to deal with point releases
769
770         * dak/make_overrides.py: generate overrides for !contrib udebs
771
772         * docs/README.stable-point-release: update docs for doing a
773         point release
774
775 2007-06-18  Anthony Towns  <ajt@debian.org>
776
777         * daklib/logging.py: Set umask to not exclude group-writability
778         so we don't get reminded at the start of each month. Thanks to
779         Random J.
780         * dak/override.py: More changes from Herr von Wifflepuck: warn
781         if section of source is different to binary section; restore
782         functionality on source-only overrides; croak if trying to set
783         priority of a source override; never set priority of source
784         overrides; correct typo in logging (s/priority/section/ at
785         one place)
786
787         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
788         * config/debian/cron.daily: auotmatically accept/reject
789         oldstable-proposed-updates based on COMMENTS directory
790
791 2007-06-18  Anthony Towns  <ajt@debian.org>
792
793         * config/debian/apt.conf, config/debian/apt.conf.stable,
794         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
795         (sarge), support for oldstable-proposed-updates, dropping m68k
796         from etch, creating etch-m68k suite, creating lenny.
797
798         * config/debian/vars: update for lenny
799
800         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
801         drop upload limitations, add release postgres user
802
803         * dak/process_new.py: support for automatically accepting and rejecting
804         packages from proposed-updates holding queues via COMMENTS directory
805         * cron.daily: automatically process COMMENTS-based approvals
806         and rejections for proposed-updates holding queues
807
808         * dak/process_unchecked.py: add support for oldproposedupdates
809         holding queue
810
811         * dak/control_suite.py: allow control-suite to work with etch-m68k
812
813         * dak/generate_releases.py: unlink old Release files before updating
814         them if nlinks > 1 (ie, if two files used to be the same, maybe they
815         shouldn't be when generate-releases is run)
816
817         * dak/generate_releases.py: add a couple of commented lines to make
818         it easier to deal with point releases
819
820         * dak/make_overrides.py: generate overrides for !contrib udebs
821
822         * docs/README.stable-point-release: update docs for doing a
823         point release
824
825 2007-03-05  Anthony Towns  <ajt@debian.org>
826
827         * config/debian/dak.conf: update for 3.1r5.
828         * scripts/debian/ssh-move: add ssh-move script from debbugs
829         * config/debian/cron.unchecked: push version info to debbugs using
830         ssh-move.
831
832 2007-03-05  Anthony Towns  <ajt@debian.org>
833
834         * config/debian/dak.conf: update for 3.1r5.
835         * scripts/debian/ssh-move: add ssh-move script from debbugs
836         * config/debian/cron.unchecked: push version info to debbugs using
837         ssh-move.
838
839 2007-02-14  James Troup  <troup@ries.debian.org>
840
841         * docs/README.config: remove Dinstall::GroupOverrideFilename.
842         * config/debian/dak.conf: likewise.
843         * config/debian-non-US/dak.conf: likewise.
844         * config/debian-security/dak.conf: likewise.
845
846         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
847         experimental differently, just close the bugs and let version
848         tracking sort it out.
849          (nmu_p): remove entire class - now unused.
850          (Upload.__init__): don't use nmu_p.
851
852 2007-02-14  James Troup  <troup@ries.debian.org>
853
854         * docs/README.config: remove Dinstall::GroupOverrideFilename.
855         * config/debian/dak.conf: likewise.
856         * config/debian-non-US/dak.conf: likewise.
857         * config/debian-security/dak.conf: likewise.
858
859         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
860         experimental differently, just close the bugs and let version
861         tracking sort it out.
862          (nmu_p): remove entire class - now unused.
863          (Upload.__init__): don't use nmu_p.
864
865 2007-02-08  Anthony Towns  <ajt@debian.org>
866
867         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
868         signing key.  Drop maximum index diffs down to 14.
869
870         * config/debian/apt.conf: add udeb support for non-free (testing,
871         unstable) and experimental.
872         * config/debian/dak.conf: likewise.
873
874         * dak/generate_releases.py (main): handle udebs in any component.
875
876         * daklib/queue.py (Upload.build_summaries): handle files without a
877         'type' gracefully.
878
879         * dak/generate_releases.py (print_sha256_files): new function.
880         (main): use it.
881
882         * dak/process_accepted.py (stable_install): fix name of template
883         mail.
884
885         * dak/process_unchecked.py (is_stableupdate): fix invocation of
886         database.get_suite_id().
887
888         * templates/process-new.bxa_notification: Update on request
889         of/after discussion with BIS staff.
890
891         * scripts/debian/mkfilesindices: also handle proposed-updates.
892
893 2007-02-08  Ryan Murray  <rmurray@debian.org>
894
895         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
896         group name for chgrp of mail archives.
897
898         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
899         orig.tar.gz's by picking the first one by file id.
900
901         * dak/override.py (main): limit to binary overrides only for now.
902         (usage): update to match.
903
904         * config/debian/cron.daily: track when we have the accepted lock
905         and clean it up on exit if we have it.  Take/check the
906         cron.unchecked lock just before traping to cleanup on exit.
907         Remove potato override handling.  Remove any dangling symlinks in
908         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
909
910         * config/debian/apt.conf: change default compression scheme for
911         both Sources and Packages to gzip and bzip2 rather than
912         uncompressed and gzip (Packages) and gzip (Sources).  Use old
913         defaults for proposed-updates.
914
915         * dak/control_overrides.py (main): refuse to operate on
916         untouchable suites.
917
918         * config/debian/pseudo-packages.maintainers: drop install,
919         installation, boot-floppy, slink-cd, potato-cd and
920         nonus.debian.org.  Update base.
921         * config/debian/pseudo-packages.description: likewise.
922
923         * daklib/utils.py (re_srchasver): new regex.
924         (parse_changes): use regex to split 'Source (Version)' style
925         Source fields into 'source' and 'source-version'.
926
927         * config/debian/cron.daily: use $base instead of hardcoding path
928         name.
929
930         * scripts/debian/mkfilesindices: source 'vars' file and use it's
931         variables instead of hardcoding path names.
932
933         * config/debian/apt.conf: switch from /org to /srv.
934         * config/debian/apt.conf.buildd: likewise.
935         * config/debian/apt.conf.stable: likewise.
936         * config/debian/cron.daily: likewise.
937         * config/debian/cron.hourly: likewise.
938         * config/debian/cron.monthly: likewise.
939         * config/debian/cron.unchecked: likewise.
940         * config/debian/cron.weekly: likewise.
941         * config/debian/dak.conf: likewise.
942         * config/debian/vars: likewise.
943         * scripts/debian/mkfilesindices: likewise.
944
945 2007-02-08  James Troup  <james@nocrew.org>
946
947         * dak/process_unchecked.py (check_signed_by_key): new function to
948         ensure .changes files are signed by an authorized uploader.
949         (process_it): use it.
950
951         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
952         to configure per suite/component/architecture binary upload
953         restrictions.
954
955 2007-02-08  Anthony Towns  <ajt@debian.org>
956
957         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
958         signing key.  Drop maximum index diffs down to 14.
959
960         * config/debian/apt.conf: add udeb support for non-free (testing,
961         unstable) and experimental.
962         * config/debian/dak.conf: likewise.
963
964         * dak/generate_releases.py (main): handle udebs in any component.
965
966         * daklib/queue.py (Upload.build_summaries): handle files without a
967         'type' gracefully.
968
969         * dak/generate_releases.py (print_sha256_files): new function.
970         (main): use it.
971
972         * dak/process_accepted.py (stable_install): fix name of template
973         mail.
974
975         * dak/process_unchecked.py (is_stableupdate): fix invocation of
976         database.get_suite_id().
977
978         * templates/process-new.bxa_notification: Update on request
979         of/after discussion with BIS staff.
980
981         * scripts/debian/mkfilesindices: also handle proposed-updates.
982
983 2007-02-08  Ryan Murray  <rmurray@debian.org>
984
985         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
986         group name for chgrp of mail archives.
987
988         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
989         orig.tar.gz's by picking the first one by file id.
990
991         * dak/override.py (main): limit to binary overrides only for now.
992         (usage): update to match.
993
994         * config/debian/cron.daily: track when we have the accepted lock
995         and clean it up on exit if we have it.  Take/check the
996         cron.unchecked lock just before traping to cleanup on exit.
997         Remove potato override handling.  Remove any dangling symlinks in
998         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
999
1000         * config/debian/apt.conf: change default compression scheme for
1001         both Sources and Packages to gzip and bzip2 rather than
1002         uncompressed and gzip (Packages) and gzip (Sources).  Use old
1003         defaults for proposed-updates.
1004
1005         * dak/control_overrides.py (main): refuse to operate on
1006         untouchable suites.
1007
1008         * config/debian/pseudo-packages.maintainers: drop install,
1009         installation, boot-floppy, slink-cd, potato-cd and
1010         nonus.debian.org.  Update base.
1011         * config/debian/pseudo-packages.description: likewise.
1012
1013         * daklib/utils.py (re_srchasver): new regex.
1014         (parse_changes): use regex to split 'Source (Version)' style
1015         Source fields into 'source' and 'source-version'.
1016
1017         * config/debian/cron.daily: use $base instead of hardcoding path
1018         name.
1019
1020         * scripts/debian/mkfilesindices: source 'vars' file and use it's
1021         variables instead of hardcoding path names.
1022
1023         * config/debian/apt.conf: switch from /org to /srv.
1024         * config/debian/apt.conf.buildd: likewise.
1025         * config/debian/apt.conf.stable: likewise.
1026         * config/debian/cron.daily: likewise.
1027         * config/debian/cron.hourly: likewise.
1028         * config/debian/cron.monthly: likewise.
1029         * config/debian/cron.unchecked: likewise.
1030         * config/debian/cron.weekly: likewise.
1031         * config/debian/dak.conf: likewise.
1032         * config/debian/vars: likewise.
1033         * scripts/debian/mkfilesindices: likewise.
1034
1035 2007-02-08  James Troup  <james@nocrew.org>
1036
1037         * dak/process_unchecked.py (check_signed_by_key): new function to
1038         ensure .changes files are signed by an authorized uploader.
1039         (process_it): use it.
1040
1041         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
1042         to configure per suite/component/architecture binary upload
1043         restrictions.
1044
1045 2006-10-09  James Troup  <james.troup@canonical.com>
1046
1047         * dak/process_unchecked.py (check_timestamps): change match to
1048         search as recent versions of python-apt prefix the string with 'E: '.
1049
1050 2006-10-09  James Troup  <james.troup@canonical.com>
1051
1052         * dak/process_unchecked.py (check_timestamps): change match to
1053         search as recent versions of python-apt prefix the string with 'E: '.
1054
1055 2006-06-26  Ryan Murray  <rmurray@debian.org>
1056
1057         * dak/process_unchecked.py (check_files): strip optional source version
1058         from Source: field in changes file, and ensure what is left is a valid
1059         package name.
1060
1061 2006-06-26  Ryan Murray  <rmurray@debian.org>
1062
1063         * dak/process_unchecked.py (check_files): strip optional source version
1064         from Source: field in changes file, and ensure what is left is a valid
1065         package name.
1066
1067 2006-06-23  Ryan Murray  <rmurray@debian.org>
1068
1069         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1070         queue for source.
1071
1072 2006-06-23  Ryan Murray  <rmurray@debian.org>
1073
1074         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1075         queue for source.
1076
1077 2006-06-18  Ryan Murray  <rmurray@debian.org>
1078
1079         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1080         the log, too.
1081
1082         * dak/process_unchecked.py (check_files): only check embargoed and
1083         unembargoed queues if the keys are set.
1084
1085         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1086         and bzip2 for etch.
1087
1088 2006-06-18  Ryan Murray  <rmurray@debian.org>
1089
1090         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1091         the log, too.
1092
1093         * dak/process_unchecked.py (check_files): only check embargoed and
1094         unembargoed queues if the keys are set.
1095
1096         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1097         and bzip2 for etch.
1098
1099 2006-06-16  James Troup  <james@nocrew.org>
1100
1101         * dak/dak.py (init): add new-security-install.
1102
1103         * dak/new_security_install.py: cleanups and adapt for new naming
1104         scheme and other changes.
1105
1106 2006-06-16  Anthony Towns  <ajt@debian.org>
1107
1108         * dak/new_security_install.py: initial version imported from
1109         klecker.
1110
1111 2006-06-16  James Troup  <james@nocrew.org>
1112
1113         [Merged changes from klecker - original author unknown.]
1114
1115         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
1116
1117         * dak/security_install.py (do_upload): fix check for oldstable and
1118         upload file list handling.
1119
1120         * dak/process_unchecked.py (check_files): update "check for
1121         source" code to also look in Embargoed and Unembargoed queues.
1122         (is_unembargo): fix handling of Dir::Queue::Disembargo.
1123
1124         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
1125
1126         * config/debian-security/vars (disembargo): add.
1127
1128         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
1129         update.
1130         (Process-Unchecked::AcceptedLockFile): add.
1131         (Suite::Testing): clean up Version and Description.
1132         (SuiteMappings): add silent map from etch-secure to testing.
1133
1134         * config/debian-security/cron.unchecked: add support for
1135         disembargoed queues.
1136
1137         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
1138         files too.
1139
1140         * config/debian-security/apt.conf: add amd64 to architectures for
1141         testing-security.
1142
1143 2006-06-11  James Troup  <troup@spohr.debian.org>
1144
1145         * config/debian/cron.daily: invoke process-accepted not
1146         process-unchecked.
1147
1148         * config/debian/vars (scriptsdir): new variable.
1149         * config/debian/cron.daily: use it.
1150
1151         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
1152         $base/misc/ instead of versioned $masterdir.  Correct 'dak
1153         make-maintainers' invocation to look in $configdir for
1154         pseudo-packages.maintainers.
1155
1156         * daklib/queue.py (Upload.do_reject): use correct name for
1157         rejection template.
1158
1159 2006-06-11  James Troup  <james@nocrew.org>
1160
1161         * dak/override.py (main): temporarily add content of old X-Katie
1162         header back as the PTS apparently filters on it.
1163         * dak/process_accepted.py (main): likewise.
1164         * dak/process_new.py (main): likewise.
1165         * dak/process_unchecked.py (main): likewise.
1166         * dak/reject_proposed_updates.py (main): likewise.
1167         * dak/rm.py (main): likewise.
1168         * daklib/queue.py (Upload.do_reject): likewise.
1169
1170         * config/debian/cron.unchecked: set -u to error out on undefined
1171         variables.  Preset LOCKDAILY to "" accordingly.
1172         * config/debian/cron.hourly: likewise.
1173         * config/debian/cron.monthly: likewise.
1174         * config/debian/cron.weekly: likewise.
1175
1176         * config/debian/vars (configdir): add new variable pointing to
1177         this directory.
1178
1179         * config/debian/cron.daily: use $configdir inplace of $masterdir
1180         when that's what we mean, and don't cd into $masterdir just to run
1181         dak scripts as we don't need to do that anymore.
1182         * config/debian/cron.hourly: likewise.
1183         * config/debian/cron.unchecked: likewise.
1184         * config/debian/cron.weekly: likewise.
1185
1186         * config/debian/dak.conf
1187         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
1188         user back to list of known users as it's non-trivial to entirely
1189         change the owner of a database with postgresql 7.4.
1190
1191         * daklib/queue.py (Upload.source_exists): use string object
1192         methods rather than string module.
1193         (Upload.get_anyversion): likewise.
1194
1195         * daklib/utils.py (validate_changes_file_arg): update filename
1196         slicing to cope with new .dak filenames.
1197
1198         * dak/ls.py (main): add back 'heidi' as a valid argument for
1199         -f/--format as people are using it in scripts and breaking that
1200         without warning seems rude.
1201
1202 2006-05-21  James Troup  <james@nocrew.org>
1203
1204         * dak/rm.py (main): use string .isdigit() rather than
1205         utils.str_isnum().
1206         * dak/process_new.py (edit_overrides): likewise.
1207
1208         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
1209         string import.
1210
1211 2006-05-21  James Troup  <james@nocrew.org>
1212
1213         * dak/check_archive.py (check_indices_files_exist): use list
1214         comprehension instead of map().  No longer need to import
1215         deprecated string module as a side-effect.
1216         * dak/check_overrides.py (process): likewise.
1217         (main): likewise.
1218         * dak/cruft_report.py (do_obsolete_source): likewise.
1219         (main): likewise.
1220         * dak/ls.py (main): likewise.
1221         * dak/make_suite_file_list.py (write_filelists): likewise.
1222         * dak/process_accepted.py (stable_install): likewise.
1223         * dak/rm.py (main): likewise.
1224         * dak/stats.py (number_of_packages): likewise.
1225         * daklib/logging.py (Logger.log): likewise.
1226         * daklib/queue.py (Upload.source_exists): likewise.
1227         (Upload.cross_suite_version_check): likewise.
1228         * daklib/utils.py (parse_args): likewise.
1229
1230 2006-05-21  James Troup  <james@nocrew.org>
1231
1232         * daklib/utils.py (process_gpgv_output): new function, split out
1233         of check_signature().
1234         (check_signature): adapt accordingly.
1235         (retrieve_key): new function that will try to retrieve the key
1236         that signed a given file from a keyserver.
1237         (check_signature): add 'autofetch' argument that if not set
1238         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
1239         If 'autofetch' is true, invoke retrieve_key().
1240
1241         * docs/README.config: document Dinstall::KeyAutoFetch and
1242         Dinstall:KeyServer.
1243
1244 2006-05-20  James Troup  <james@nocrew.org>
1245
1246         * dak/find_null_maintainers.py (main):
1247         s/createtimestamp/createTimestamp/ to make things work with modern
1248         slapd.
1249
1250         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
1251         Stable::Version and Stable::Description for 3.1r2.
1252
1253         * config/debian-non-US/dak.conf: sync with klecker - update
1254         version number of 3.0 and MoreInfoURL.
1255
1256         * docs/README.stable-point-release: Add notes about updating
1257         dak.conf and Reject-Proposed-Updates section in particular.
1258         s/woody/stable/.  Also need to update README.html.
1259
1260         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
1261
1262         * config/debian/apt.conf: Add udeb tree for proposed-updates.
1263
1264 2006-05-20  Ryan Murray  <rmurray@debian.org>
1265
1266         * scripts/debian/update-ftpstats: new script to update daily
1267         architecture size graph data.
1268
1269         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
1270         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
1271         there.
1272
1273         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
1274         before we finish.  Don't push to merkel.
1275
1276         * dak/process_unchecked.py (check_changes): Also look in
1277         ProposedUpdates queue dir.
1278         (check_files): likewise.
1279
1280 2006-05-20  Anthony Towns  <ajt@debian.org>
1281
1282         * scripts/debian/mkfilesindices: new script to generate file
1283         indices used for partial mirroring.
1284
1285         * config/debian/cron.daily: add progress timestamps.
1286
1287         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
1288         amd64 to testing, unstable and experimental.  Drop sh from
1289         experimental.  Move Experimental to dists/experimental.  Add
1290         Dir::ProposedUpdates.  Add Architectures::amd64.
1291
1292         * config/debian/apt.conf: add amd64 to testing, unstable and
1293         experimental.  Drop uncompressed Packages files from testing. Drop
1294         sh from experimental.  Move experimental to dists/experimental/.
1295
1296         * config/debian/vars (archs): add amd64.
1297
1298         * dak/process_unchecked.py (action): Add support for
1299         proposed-updates approval queue.
1300         (is_stableupdate): new function - checks if the upload is targeted
1301         at proposed-updates.
1302         (do_stableupdate): likewise - moves upload to proposed-updates
1303         holding area.
1304
1305         * dak/process_new.py (do_new): warn if original or new target
1306         suite are invalid.
1307
1308         * dak/generate_releases.py (print_md5sha_files): less whitespace
1309         between the hash and size.
1310
1311         * dak/generate_index_diffs.py (genchanges): don't say we're not
1312         doing anything.  Better formatting of other messages.
1313         (main): don't skip experimental and remove some 'doing stuff'
1314         prints.
1315
1316 2006-05-18  James Troup  <james@nocrew.org>
1317
1318         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
1319         query.
1320
1321         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
1322         docstrings, untabify, don't shadow builtins, lowercase non-global
1323         variable names, spaces after commas.  Also bail if given any
1324         arguments since we don't accept any.
1325         * dak/init_db.py: likewise.  Also split large main() into
1326         subfunctions and rename get() to sql_get().
1327
1328         * dak/init_db.py (main): check returned value from
1329         database.get_archive_id().
1330
1331         * dak/dak.py: renamed from shell.py.  Update to support new source
1332         layout.  Created init() and usage() functions.  Various
1333         pylint-inspired cleanups.  Use daklib utils.warn() and
1334         utils.fubar().  Change 'functionality' variable to only have
1335         (command, description) and always invoke main() when running the
1336         module.  Also support -h.
1337
1338 2006-05-17  James Troup  <james@nocrew.org>
1339
1340         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
1341         imports of and calls to daklib modules.  Change script name
1342         everywhere, i.e. in output, mails, comments and configuration tree
1343         + filenames.  Also update references to other renamed scripts,
1344         classes and templates.  Use '.dak' instead of '.katie' for the
1345         queue info storage files.
1346         (Renamed from tea)
1347         * dak/check_overrides.py: likewise.  (Renamed from cindy)
1348         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
1349         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
1350         * dak/clean_queues.py: likewise.  (Renamed from shania)
1351         * dak/clean_suites.py: likewise.  (Renamed from rhona)
1352         * dak/compare_suites.py: likewise.  (Renamed from andrea)
1353         * dak/control_overrides.py: likewise.  (Renamed from natalie)
1354         * dak/control_suite.py: likewise.  (Renamed from heidi)
1355         * dak/cruft_report.py: likewise.  (Renamed from rene)
1356         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
1357         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
1358         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
1359         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
1360         * dak/import_archive.py: likewise.  (Renamed from neve)
1361         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
1362         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
1363         * dak/init_db.py: likewise. (Renamed from alyson)
1364         * dak/init_dirs.py: likewise. (Renamed from rose)
1365         * dak/ls.py: likewise. (Renamed from madison)
1366         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
1367         * dak/make_overrides.py: likewise.  (Renamed from denise)
1368         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
1369         * dak/mirror_split.py: likewise.  (Renamed from billie)
1370         * dak/override.py: likewise.  (Renamed from alicia)
1371         * dak/poolize.py: likewise.  (Renamed from catherine)
1372         * dak/process_accepted.py: likewise.  (Renamed from kelly)
1373         * dak/process_new.py: likewise.  (Renamed from lisa)
1374         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
1375         * dak/queue_report.py: likewise.  (Renamed from helena)
1376         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
1377         * dak/rm.py: likewise.  (Renamed from melanie)
1378         * dak/security_install.py: likewise.  (Renamed from amber)
1379         * dak/split_done.py: likewise.  (Renamed from nina)
1380         * dak/stats.py: likewise.  (Renamed from saffron)
1381         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
1382         * daklib/database.py: likewise.  (Renamed from db_access)
1383         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
1384         * daklib/utils.py: likewise.
1385
1386         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
1387         doesn't need to notify anyone" string.
1388         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
1389
1390         * dak/process_accepted.py (init): drop -V/--version argument.
1391         * dak/process_new.py (init): likewise.
1392         * dak/process_unchecked.py (init): likewise.
1393         * dak/reject_proposed_updates.py (init): likewise
1394
1395         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
1396
1397         * dak/stats.py: in usage() output change STAT to MODE.
1398
1399 2006-05-15  James Troup  <james@nocrew.org>
1400
1401         * dak/queue_report.py: remove unused encodings imports.
1402
1403         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
1404         imports.  Initalize 'Cnf' as a global.
1405         (BillieDB._internal_recurse): fix 'util.' typo.
1406
1407         * dak/import_ldap_fingerprints.py (main): drop unused time import and
1408         commented out time check for LDAP search.
1409
1410 2005-12-16  Ryan Murray  <rmurray@debian.org>
1411
1412         * halle: add support for udebs
1413         * kelly: stable_install: add support for binNMU versions
1414
1415 2005-12-05  Anthony Towns  <aj@erisian.com.au>
1416
1417         * katie.py: Move accept() autobuilding support into separate function 
1418         (queue_build), and generalise to build different queues
1419
1420         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
1421
1422         * jennifer: Initial support for enabling embargo handling with the
1423         Dinstall::SecurityQueueHandling option.
1424         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
1425         functions.
1426
1427         * katie.conf-security: Include embargo options
1428         * katie.conf-security: Add Lock dir
1429         * init_pool.sql-security: Create disembargo table
1430         * init_pool.sql-security: Add constraints for disembargo table
1431
1432 2005-11-26  Anthony Towns  <aj@erisian.com.au>
1433
1434         * Merge of changes from klecker, by various people
1435
1436         * amber: special casing for not passing on amd64 and oldstable updates
1437         * amber: security mirror triggering
1438         * templates/amber.advisory: updated advisory structure
1439         * apt.conf.buildd-security: update for sarge's release
1440         * apt.conf-security: update for sarge's release
1441         * cron.buildd-security: generalise suite support, update for sarge's release
1442         * cron.daily-security: update for sarge's release, add udeb support
1443         * vars-security: update for sarge's release
1444         * katie.conf-security: update for sarge's release, add amd64 support,
1445         update signing key
1446
1447         * docs/README.names, docs/README.quotes: include the additions
1448
1449 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1450
1451         * Changed accepted_autobuild to queue_build everywhere.
1452         * Add a queue table.
1453         * Add a "queue" field in the queue_build table (currently always 0)
1454
1455         * jennifer: Restructure to make it easier to support special
1456         purpose queues between unchecked and accepted.
1457
1458 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1459
1460         * Finishing merge of changes from spohr, by various people still
1461
1462         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
1463         works
1464         * jennifer: Re-enable .deb ar format checking
1465         * katie.py: Convert to +bX binNMU special casing
1466         * rhona: Add some debug output when deleting binaries
1467         * cron.daily: Add emilie
1468         * cron.unchecked: Add lock files
1469
1470 2005-11-15  Anthony Towns  <aj@erisian.com.au>
1471
1472         * Merge of changes from spohr, by various people.
1473
1474         * tiffani: new script to do patches to Packages, Sources and Contents
1475         files for quicker downloads.
1476         * ziyi: update to authenticate tiffani generated files
1477
1478         * dak: new script to provide a single binary with less arbitrary names
1479         for access to dak functionality.
1480
1481         * cindy: script implemented
1482
1483         * saffron: cope with suites that don't have a Priority specified
1484         * heidi: use get_suite_id()
1485         * denise: don't hardcode stable and unstable, or limit udebs to unstable
1486         * denise: remove override munging for testing (now done by cindy)
1487         * helena: expanded help, added new, sort and age options, and fancy headers
1488         * jennifer: require description, add a reject for missing dsc file
1489         * jennifer: change lock file
1490         * kelly: propogation support
1491         * lisa: honour accepted lock, use mtime not ctime, add override type_id
1492         * madison: don't say "dep-retry"
1493         * melanie: bug fix in output (missing %)
1494         * natalie: cope with maintainer_override == None; add type_id for overrides
1495         * nina: use mtime, not ctime
1496
1497         * katie.py: propogation bug fixes
1498         * logging.py: add debugging support, use | as the logfile separator
1499
1500         * katie.conf: updated signing key (4F368D5D)
1501         * katie.conf: changed lockfile to dinstall.lock
1502         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
1503         * katie.conf: added tiffani, cindy support
1504         * katie.conf: updated to match 3.0r6 release
1505         * katie.conf: updated to match sarge's release
1506
1507         * apt.conf: update for sarge's release
1508         * apt.conf.stable: update for sarge's release
1509         * apt.conf: bump daily max Contents change to 25MB from 12MB
1510
1511         * cron.daily: add accepted lock and invoke cindy
1512         * cron.daily: add daily.lock
1513         * cron.daily: invoke tiffani
1514         * cron.daily: rebuild accepted buildd stuff
1515         * cron.daily: save rene-daily output on the web site
1516         * cron.daily: disable billie
1517         * cron.daily: add stats pr0n
1518
1519         * cron.hourly: invoke helena
1520
1521         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
1522         * vars: add lockdir, add etch to copyoverrides
1523         * Makefile: add -Ipostgresql/server to CXXFLAGS
1524
1525         * docs/: added README.quotes
1526         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
1527         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
1528
1529         * TODO: correct spelling of "conflicts"
1530
1531 2005-05-28  James Troup  <james@nocrew.org>
1532
1533         * helena (process_changes_files): use MTIME rather than CTIME (the
1534         C's not for 'creation', stupid).
1535         * lisa (sort_changes): likewise.
1536
1537         * jennifer (check_distributions): use has_key rather than an 'in'
1538         test which doesn't work with python2.1.  [Probably by AJ]
1539
1540 2005-03-19  James Troup  <james@nocrew.org>
1541
1542         * rene (main): use Suite::<suite>::UdebComponents to determine
1543         what components have udebs rather than assuming only 'main' does.
1544
1545 2005-03-18  James Troup  <james@nocrew.org>
1546
1547         * utils.py (rfc2047_encode): use codecs.lookup() rather than
1548         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
1549         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
1550         <andrew@ubuntu.com>.
1551
1552 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
1553
1554         * helena: add -n/--new HTML output option and improved sorting
1555         options.
1556
1557 2005-03-06  Ryan Murray  <rmurray@debian.org>
1558
1559         * shania(main): use Cnf::Dir::Reject instead of REJECT
1560
1561 2005-02-08  James Troup  <james@nocrew.org>
1562
1563         * rene (main): add partial NBS support by checking that binary
1564         packages are built by their real parent and not some random
1565         stranger.
1566         (do_partial_nbs): likewise.
1567
1568 2005-01-18  James Troup  <james@nocrew.org>
1569
1570         * katie.py (Katie.build_summaries): avoid leaking file handle when
1571         extracting package description.
1572         (Katie.force_reject): remember and close each file descriptor we
1573         use.
1574         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
1575         s/reason_file/reason_fd/ because it's a file descriptor.
1576         (Katie.check_dsc_against_db): avoid leaking file handle whenever
1577         invoking apt_pkg.md5sum().
1578
1579         * jennifer (check_deb_ar): new function: sanity check the ar
1580         contents of a .deb.
1581         (check_files): use it.
1582         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
1583         found.
1584         (check_files): accept 'raw-installer' as an alias for 'byhand'.
1585
1586 2005-01-14  Anthony Towns  <ajt@debian.org>
1587
1588         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
1589
1590         * propup stuff (thanks to Andreas Barth)
1591         * katie.conf: add stable MustBeOlderThan testing, add -security
1592           propup
1593         * jennifer: set distribution-version in .katie if propup may be needed
1594         * katie.py: add propogation to cross_suite_version_check
1595
1596 2004-11-27  James Troup  <james@nocrew.org>
1597
1598         * nina: new script to split monolithic queue/done into date-based
1599         hierarchy.
1600
1601         * rene (usage): document -s/--suite.
1602         (add_nbs): use .setdefault().
1603         (do_anais): likewise.
1604         (do_nbs): don't set a string to "" and then += it.
1605         (do_obsolete_source): new function - looks for obsolete source
1606         packages (i.e source packages whose binary packages are ALL a)
1607         claimed by someone else and b) newer when built from the other
1608         source package).
1609         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
1610         and 'full' check modes.  Check for obsolete source packages.
1611         linux-wlan-ng has been fixed - remove hideous bodge.
1612
1613         * jennifer (check_distributions): support 'reject' suite map type.
1614
1615         * utils.py (validate_changes_file_arg): s/file/filename/.
1616         s/fatal/require_changes/.  If require_changes is -1, ignore errors
1617         and return the .changes filename regardless.
1618         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1619         (re_no_revision): don't escape '-', it's not a special character.
1620         s/\*/+/ as there must be at least one non-dash character after the
1621         dash in a revision.  Thanks to Christian Reis for noticing both of
1622         these.
1623
1624         * ashley (main): pass require_changes=-1 to
1625         utils.validate_changes_file_arg().
1626
1627         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1628         Team <debian-kernel@lists.debian.org>'.
1629
1630         * katie.py (Katie.in_override_p): fix .startswith() usage.
1631
1632         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1633         (Lauren::MoreInfoURL): update to 3.0r3.
1634         (Suite::Stable::Version): likewise.
1635         (Suite::Stable::Description): likewise.
1636
1637         * cron.daily: disable automatic task override generation.
1638
1639         * cindy (process): restrict "find all packages" queries by
1640         component.  Respect Options["No-Action"].
1641         (main): add -n/--no-action support.  Only run on unstable.  Rename
1642         type to otype (pychecker).
1643
1644 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1645
1646         * katie.conf (Billie::BasicTrees): add all architectures.
1647         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1648         'everything'.
1649
1650         * cron.daily: Update a 'current' symlink when creating the
1651         post-daily-cron-job database backup to aid mirroring to merkel.
1652         Run billie.
1653
1654         * billie (BillieTarget.poolish_match): handle .udeb too.
1655
1656 2004-10-13  Ryan Murray  <rmurray@debian.org>
1657
1658         * amber (do_upload): Sort changes files in "katie" order so that
1659           source always arrives before binary-only rebuilds
1660
1661 2004-10-05  James Troup  <james@nocrew.org>
1662
1663         * jennifer (check_dsc): correct reject message on invalid
1664         Maintainer field.
1665
1666 2004-09-20  James Troup  <james@nocrew.org>
1667
1668         * alicia: remove unused 'pwd' import.
1669
1670         * tea (check_override): underline suite name in output properly.
1671
1672         * rene (main): read a compressed Packages file.
1673         * tea (validate_packages): likewise.
1674
1675         * katie.py (re_fdnic): add 'r' prefix.
1676         (re_bin_only_nmu_of_mu): likewise.
1677         (re_bin_only_nmu_of_nmu): likewise.
1678
1679         * madison (main): retrieve component information too and display
1680         it if it's not 'main'.
1681         * melanie (reverse_depends_check): likewise.
1682
1683         * utils.py (pp_dep): renamed...
1684         (pp_deps): ... to this.
1685         * jeri (check_dep): update calls to utils.pp_deps().
1686         * melanie (reverse_depends_check): likewise.
1687
1688         * jennifer (check_changes): move initalization of email variables
1689         from here...
1690         (process_it): ...to here as we no longer always run
1691         check_changes().  Don't bother to initialize
1692         changes["architecture"].
1693
1694         * denise (list): renamed to...
1695         (do_list): ...this to avoid name clash with builtin 'list'.
1696         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1697         for dictionaries.
1698         (main): Likewise for name clash avoidance and also
1699         s/override_type/suffix/.  Adjust call to do_list().
1700
1701 2004-09-01  Ryan Murray  <rmurray@debian.org>
1702
1703         * tea (check_files): check the pool/ directory instead of dists/
1704
1705 2004-08-04  James Troup  <james@nocrew.org>
1706
1707         * jenna (cleanup): use .setdefault() for dictionaries.
1708         (write_filelists): likewise.
1709
1710         (write_filelists): Use utils.split_args() not split() to split
1711         command line arguments.
1712         (stable_dislocation_p): likewise.
1713
1714         (write_filelists): Add support for mapping side of suite-based
1715         "Arch: all mapping".
1716         (do_da_do_da): ensure that if we're not doing all suites that we
1717         process enough to be able correct map arch: all packages.
1718
1719         * utils.py (cant_open_exc): correct exception string,
1720         s/read/open/, s/.$//.
1721
1722         * templates/amber.advisory: update to match reality a little
1723         better.
1724
1725         * melanie (reverse_depends_check): read Packages.gz rather than
1726         Packages.
1727
1728         * jennifer (check_files): check for unknown component before
1729         checking for NEWness.
1730
1731         * katie.py (Katie.in_override_p): use .startswith in favour of a
1732         slice.
1733
1734         * docs/melanie.1.sgml: document -R/--rdep-check.
1735
1736 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1737
1738         * billie (main): Make the verbatim lists include all the README
1739           elements.
1740         * docs/README.names: Add billie in (correcting oversight)
1741
1742 2004-07-01  James Troup  <james@nocrew.org>
1743
1744         * emilie (main): handle woody's case-sensitive python-ldap,
1745         s/keyfingerprint/keyFingerPrint/.
1746
1747 2004-06-25  James Troup  <james@nocrew.org>
1748
1749         * debian/control (Depends): add dpkg-dev since jennifer uses
1750         dpkg-source.
1751
1752 2004-06-24  James Troup  <james@nocrew.org>
1753
1754         * melanie (main): s/file/temp_file/ and close file handle before
1755         removing the temporary file.
1756         (main): don't warn about needing a --carbon-copy if in no-action
1757         mode.
1758
1759         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1760         (main): likewise.
1761
1762         * test/006/test.py (main): check bracketed email-only form.
1763
1764         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1765         email-only, strip the brackets so we don't end up with
1766         <<james@nocrew.org>>.
1767
1768 2004-06-20  James Troup  <james@nocrew.org>
1769
1770         * jennifer (process_it): only run check_changes() if
1771         check_signature() returns something.  (Likewise)
1772
1773         * utils.py (changes_compare): if there's no changes["version"] use
1774         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1775
1776 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1777
1778         * jeri (pp_dep): moved from here to ...
1779         * utils.py (pp_dep): here.
1780
1781         * melanie (main): add reverse dependency checking.
1782
1783 2004-06-17  James Troup  <james@nocrew.org>
1784
1785         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1786         * tea (check_dscs): likewise.
1787
1788         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1789         change from boolean to a variable with 3 possible values, 0 and 1
1790         as before, -1 means don't require a signature.  Makes
1791         parse_changes() useful for parsing arbitary RFC822-style files,
1792         e.g. 'Release' files.
1793         (check_signature): add support for detached signatures by passing
1794         the files the signature is for as an optional third argument.
1795         s/filename/sig_filename/g.  Add a fourth optional argument to
1796         choose the keyring(s) to use.  Don't os.path.basename() the
1797         sig_filename before checking it for taint.
1798         (re_taint_free): allow '/'.
1799
1800 2004-06-11  James Troup  <james@nocrew.org>
1801
1802         * tea (check_files): make override.unreadable optional.
1803         (validate_sources): close the Sources file handle.
1804
1805         * docs/README.first: clarify that 'alyson' and running
1806         add_constraints.sql by hand is something you only want to do if
1807         you're not running 'neve'.
1808
1809         * docs/README.config (Location::$LOCATION::Suites): document.
1810
1811         * db_access.py (do_query): also print out the result of the query.
1812
1813 2004-06-10  James Troup  <james@nocrew.org>
1814
1815         * katie.py (Katie.cross_suite_version_check): post-woody versions
1816         of python-apt's apt_pkg.VersionCompare() function apparently
1817         returns variable integers for less than or greater than results -
1818         update our result checking to match.
1819         * jenna (resolve_arch_all_vs_any): likewise.
1820         * charisma (main): likewise.
1821
1822 2004-06-09  James Troup  <james@nocrew.org>
1823
1824         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1825         valid_dsc_p and don't run check_source() if check_dsc() failed.
1826         (check_dsc): on fatal failures return 0 so check_source() isn't
1827         run (since it makes fatal assumptions about the presence of
1828         mandatory .dsc fields).
1829         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1830
1831 2004-05-07  James Troup  <james@nocrew.org>
1832
1833         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1834         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1835
1836         * katie.conf (Dir::Override): remove duplicate definition.
1837
1838         * neve (get_or_set_files_id): add an always-NULL last_used column
1839         to output.
1840
1841 2004-04-27  James Troup  <james@nocrew.org>
1842
1843         * apt.conf-security (tree "dists/stable/updates"): add
1844         ExtraOverride - noticed by Joey Hess (#246050).
1845         (tree "dists/testing/updates"): likewise.
1846
1847 2004-04-20  James Troup  <james@nocrew.org>
1848
1849         * jennifer (check_files): check for existing .changes or .katie
1850         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1851         directories.
1852
1853 2004-04-19  James Troup  <james@nocrew.org>
1854
1855         * jennifer (check_source): handle failure to remove the temporary
1856          directory (used for source tree extraction) better, specifically:
1857          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1858          and try again and if that works, REJECT the package.
1859
1860 2004-04-17  James Troup  <james@nocrew.org>
1861
1862         * docs/madison.1.sgml: document -b/--binary-type,
1863         -g/--greaterorequal and -G/--greaterthan.
1864
1865         * madison (usage): -b/--binary-type only takes a single argument.
1866         Document -g/--greaterorequal and -G/--greaterthan.
1867         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1868
1869 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1870
1871         * billie: Cleaned up a load of comments, added /README.non-US to
1872           the verbatim matches list.
1873
1874 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1875
1876         * utils.py (size_type): Make it use real binary megabytes and
1877           kilobytes, instead of the marketing terms used before.
1878
1879 2004-04-07  James Troup  <james@nocrew.org>
1880
1881         * katie.py (Katie.check_dsc_against_db): in the case we're
1882         ignoring an identical-to-existing orig.tar.gz remember the path to
1883         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1884         location.path too to be able to do so.
1885
1886 2004-04-03  James Troup  <james@nocrew.org>
1887
1888         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1889         needed for new utils.rfc2047_encode() function.
1890
1891         * utils.py (re_parse_maintainer): allow whitespace inside the
1892         email address.
1893         (Error): new exception base class.
1894         (ParseMaintError): new exception class.
1895         (force_to_utf8): new function.
1896         (rfc2047_encode): likewise.
1897         (fix_maintainer): rework.  use force_to_utf8() to force name and
1898         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1899         return an rfc2047 value.  Validate the address to catch missing
1900         email addresses and (some) broken ones.
1901
1902         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1903         by adopting foo2047 return value.
1904         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1905         mandatory changes fields.  Promote changes and maintainer822 to
1906         mandatory fields.
1907         (Katie.update_subst): default maintainer2047 rather than
1908         maintainer822.  User foo2047 rather than foo822 when setting
1909         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1910
1911         * jennifer (check_changes): set default changes["maintainer2047"]
1912         and changes["changedby2047"] values rather than their 822
1913         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1914         to new utils.fix_maintainer() - reject on exception and adopt
1915         foo2047 return value.
1916         (check_dsc): if a mandatory field is missing don't do any further
1917         checks and as a result reduce paranoia about dsc[var] existence.
1918         Validate the maintainer field by calling new
1919         utils.fix_maintainer().
1920
1921         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1922         changes fields.  Promote maintainer822 to a mandatory changes
1923         field.  add "pool name" to files fields.
1924
1925         * test/006/test.py: new file - tests for new
1926         utils.fix_maintainer().
1927
1928 2004-04-01  James Troup  <james@nocrew.org>
1929
1930         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1931
1932         * jennifer (get_changelog_versions): create a symlink mirror of
1933         the source files in the temporary directory.
1934         (check_source): if check_dsc_against_db() couldn't find the
1935         orig.tar.gz bail out.
1936
1937         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1938         part of the upload store the path to it in pkg.orig_tar_gz and if
1939         it can't be found set pkg.orig_tar_gz to -1.
1940
1941         Explicitly return the second value as None in the (usual) case
1942         where we don't have to reprocess.  Remove obsolete diagnostic
1943         logs.
1944
1945         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1946
1947         * utils.py (temp_filename): new helper function that wraps around
1948         tempfile.mktemp().
1949
1950         * katie.py (Katie.do_reject): use it and don't import tempfile.
1951         * lisa (prod_maintainer): likewise.
1952         (edit_note): likewise.
1953         (edit_new): likewise.
1954         * lauren (reject): likewise.
1955         * melanie (main): likewise.
1956         * neve (do_sources): likewise.
1957         * rene (main): likewise.
1958         * tea (validate_sources): likewise.
1959
1960 2004-03-31  James Troup  <james@nocrew.org>
1961
1962         * tea (validate_sources): remove unused 's' temporary variable.
1963
1964 2004-03-15  James Troup  <james@nocrew.org>
1965
1966         * jennifer (check_dsc): check changes["architecture"] for
1967         source before we do anything else.
1968
1969 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1970
1971         * billie: Added
1972         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1973
1974 2004-03-12  James Troup  <james@nocrew.org>
1975
1976         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1977
1978         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1979
1980         * katie.py (Katie.accept): add support for DebBugs Version
1981         Tracking by writing out .versions (generated in jennifer's
1982         get_changelog_versions()) and .debinfo (mapping of binary ->
1983         source) files.
1984
1985         * ashley (main): add dsc["bts changelog"].
1986
1987         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1988
1989         * jennifer (check_diff): obsoleted by check_source(), removed.
1990         (check_source): new function: create a temporary directory and
1991         move into it and call get_changelog_versions().
1992         (get_changelog_versions): new function: extract the source package
1993         and optionally parse debian/changelog to obtain the version
1994         history for the BTS.
1995         (process_it): call check_source() rather than check_diff().
1996
1997 2004-03-08  James Troup  <james@nocrew.org>
1998
1999         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
2000         listbar" rather than "if listbar.count(varfoo)"' change on
2001         2004-02-24.
2002
2003 2004-03-05  James Troup  <james@nocrew.org>
2004
2005         * alicia (main): don't warn about not closing bugs - we don't
2006         manage overrides through the BTS.
2007
2008 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
2009
2010         * docs/README.config: lots of updates and corrections.
2011         * docs/README.first: likewise.
2012
2013         * docs/README.config: drop unused Dir::Queue::Root.
2014         * katie.conf-non-US: likewise.
2015         * katie.conf: likewise.
2016         * katie.conf-security: likewise.
2017
2018 2004-02-27  James Troup  <james@nocrew.org>
2019
2020         * rose (process_tree): use 'if var in [ list ]' rather than long
2021         'if var == foo or var == bar or var == baz'.  Suggested by Martin
2022         Michlmayr.
2023
2024         * jennifer (check_files): reduce 'if var != None' to 'if var' as
2025         suggested by Martin Michlmayr.
2026         * catherine (poolize): likewise.
2027         * charisma (main): likewise.
2028         * halle (check_changes): likewise.
2029         * heidi (main): likewise.
2030         (process_file): likewise.
2031         * kelly (install): likewise.
2032         (stable_install): likewise.
2033         * utils.py (fix_maintainer): likewise.
2034
2035         * apt.conf: add support for debian-installer in testing-proposed-updates.
2036         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
2037         add - set to main.
2038
2039         * mkmaintainers: add "-T15" option to wget of non-US packages file
2040         so that we don't hang cron.daily if non-US is down.
2041
2042         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
2043
2044         * templates/jennifer.bug-close: add Source and Source-Version
2045         pseudo-headers that may be used for BTS Version Tracking someday
2046         [ajt@].
2047
2048         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
2049         (main): likewise.
2050
2051         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
2052
2053 2004-02-25  James Troup  <james@nocrew.org>
2054
2055         * katie.conf (SuiteMappings): don't map testing-security to
2056         proposed-updates.
2057
2058 2004-02-24  James Troup  <james@nocrew.org>
2059
2060         * katie.py (Katie.__init__): remove unused 'values' field.
2061
2062         * utils.py (extract_component_from_section): use 's.find(c) != -1'
2063         rather than 's.count(c) > 0'.
2064
2065         * katie.py (Katie.source_exists): use "if varfoo in listbar"
2066         rather than "if listbar.count(varfoo)".
2067         * halle (check_joey): likewise.
2068         * jeri (check_joey): likewise.
2069         * lisa (edit_index): likewise.
2070         * jenna (stable_dislocation_p): likewise.
2071
2072         * jennifer (main): remove unused global 'nmu'.
2073
2074 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
2075
2076         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
2077           to be ftpmaster@ftp-master.debian.org to bring it into line with how
2078           the dak tools close bugs.
2079
2080 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2081
2082         * katie.conf (Alicia): Added an Alicia section with email address
2083         * templates/alicia.bug-close: Added
2084         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
2085         * alicia (main): Added a -d/--done argument
2086
2087 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2088
2089         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
2090
2091 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2092
2093         * lisa (prod_maintainer): Added function to prod the maintainer without
2094           accepting or rejecting the package
2095         * templates/lisa.prod: Added this template for the prodding mail
2096
2097         * .cvsignore: Added neve-files which turns up in new installations
2098
2099 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
2100
2101         * alicia (usage): Fixed usage message to offer section and priority
2102           as seperately optional arguments.
2103         * alicia (main): Added a % (arg) interpolation needed when only
2104           one of section or priority is provided and it cannot be found.
2105
2106 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2107
2108         * alicia: Added
2109         * docs/alicia.1.sgml: Added
2110         * docs/Makefile: Added alicia to the list of manpages to build
2111         * docs/README.names: Noted what alicia does
2112         * docs/README.first: Noted where alicia is useful
2113
2114 2004-01-21  James Troup  <james@nocrew.org>
2115
2116         * madison (main): add -b/--binary-type.
2117         (usage): likewise.
2118
2119         * denise (main): generate debian-installer overrides for testing
2120         too.
2121         * apt.conf: add support for debian-installer in testing.
2122         * katie.conf (Suite::Testing::UdebComponents): set to main.
2123
2124         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
2125         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
2126         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
2127
2128         * utils.py (parse_changes): don't process data not inside the
2129         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
2130         pointing this out.
2131         * test/005/test.py (main): new test to test for above.
2132
2133 2004-01-04  James Troup  <james@nocrew.org>
2134
2135         * jenna (write_filelists): correct typo, s/Components/Component/
2136         for Options.
2137
2138 2004-01-04  Ryan Murray  <rmurray@debian.org>
2139
2140         * cron.buildd: move update of overrides and Packages file...
2141         * cron.unchecked: to here.
2142         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
2143         * katie.conf-security: likewise
2144
2145 2003-11-20  James Troup  <james@nocrew.org>
2146
2147         * jenna (main): don't use utils.try_with_debug(), it produces way
2148         too much output.
2149
2150         * halle (check_changes): don't error out if a .changes refers to a
2151         non-existent package, just warn and skip the file.
2152
2153         * docs/README.stable-point-release: mention halle and .changes
2154         obsoleted by removal through melanie.  Update for 3.0r2.
2155
2156         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
2157         (Suite::Stable::Description): update for 3.0r2.
2158         (Lauren::MoreInfoURL): likewise.
2159         * katie.conf-non-US (Suite::Stable::Version): likewise.
2160         (Suite::Stable::Description): likewise.
2161         (Lauren::MoreInfoURL): likewise.
2162
2163         * apt.conf.stable (Default): don't define MaxContentsChange.
2164         * apt.conf.stable-non-US (Default): likewise.
2165
2166         * lauren (reject): hack to work around partial replacement of an
2167         upload, i.e. one or more binaries superseded by another source
2168         package.
2169
2170 2003-11-17  James Troup  <james@nocrew.org>
2171
2172         * pseudo-packages.maintainers: point installation-reports at
2173         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
2174         request.
2175
2176         * utils.py (parse_changes): calculate the number of lines once
2177         with len() rather than max().
2178
2179         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2180         files, since check_dsc_against_db() deletes the .orig.tar.gz
2181         entry.
2182
2183 2003-11-13  Ryan Murray  <rmurray@debian.org>
2184
2185         * apt.conf: specify a src override file for debian-installer
2186
2187 2003-11-10  James Troup  <james@nocrew.org>
2188
2189         * fernanda.py (strip_pgp_signature): new function - strips PGP
2190         signature from a file and returns the modified contents of the
2191         file in a string.
2192         (display_changes): use it.
2193         (read_dsc): likewise.
2194
2195 2003-11-09  Ryan Murray  <rmurray@debian.org>
2196
2197         * cron.buildd: export accepted_autobuild table for unstable, and use
2198         it to generate the incoming Packages/Sources rather than having apt
2199         walk the directory.
2200         * apt.conf.buildd: use exported table from cron.buildd to generate
2201         Packages/Sources
2202
2203 2003-11-07  James Troup  <james@nocrew.org>
2204
2205         * kelly: import errno.
2206
2207         * katie.py (Katie.build_summaries): sort override disparities.
2208
2209         * kelly (install): set dsc_component based on the .dsc's component
2210         not a random binaries.
2211
2212 2003-10-29  James Troup  <james@nocrew.org>
2213
2214         * katie.py (Katie.build_summaries): don't assume changes["source"]
2215         exists since it might not.
2216
2217 2003-10-20  James Troup  <james@nocrew.org>
2218
2219         * pseudo-packages.maintainers: update security.d.o to use
2220         team@s.d.o at joy@'s request.
2221
2222 2003-10-17  James Troup  <james@nocrew.org>
2223
2224         * jennifer (check_dsc): use .startswith rather than .find() == 0.
2225
2226 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
2227
2228         * tea (chk_bd_process_dir): use .endswith rather than slice.
2229
2230 2003-10-14  James Troup  <james@nocrew.org>
2231
2232         * tea (check_build_depends): new function.
2233         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
2234         in the archive.
2235         (main): update for new function.
2236         (usage): likewise.
2237
2238         * katie.py (Katie.do_reject): sanitize variable names,
2239         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
2240         os.close() to outside if clause.
2241
2242         * jennifer (check_dsc): check build-depends and
2243         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
2244         Fold the ARRAY check into the same code block and tidy up it's
2245         rejection message.
2246         (check_changes): ensure that the Files field is non-empty.
2247         Suggested by Santiago Vila <sanvila@unex.es>
2248         (check_changes): normalize reject messages.
2249         (check_dsc): instead of doing most of the checks inside a for loop
2250         and an if, find the dsc_filename in a short loop over files first
2251         and then do all the checks.  Add check for more than one .dsc in a
2252         .changes which we can't handle.  Normalize reject messages.
2253
2254 2003-10-13  James Troup  <james@nocrew.org>
2255
2256         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
2257         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
2258
2259         * jennifer (check_files): Set 'has_binaries' and 'has_source'
2260         variables while iterating over 'files'.  Don't regenerate it when
2261         checking for source if source is mentioned.
2262
2263         Reject source only uploads if the config variable
2264         Dinstall::Reject::NoSourceOnly is set.
2265
2266 2003-10-03  James Troup  <james@nocrew.org>
2267
2268         * rene (main): add nasty hardcoded reference to debian-installer
2269         so we detect NBS .udebs.
2270
2271 2003-09-29  James Troup  <james@nocrew.org>
2272
2273         * apt.conf (old-proposed-updates): remove.
2274         * apt.conf-non-US (old-proposed-updates): likewise.
2275
2276 2003-09-24  James Troup  <james@nocrew.org>
2277
2278         * tea (check_files_not_symlinks): new function, ensure files
2279         mentioned in the database aren't symlinks.  Includes code to
2280         update any files that are like this to their real filenames +
2281         location; commented out by though.
2282         (usage): update for new function.
2283         (main): likewise.
2284
2285 2003-09-24  Anthony Towns  <ajt@debian.org>
2286
2287         * vars: external-overrides variable added
2288         * cron.daily: Update testing/unstable Task: overrides from joeyh
2289         managed external source.
2290
2291 2003-09-22  James Troup  <james@nocrew.org>
2292
2293         * kelly (install): if we can't move the .changes into queue/done,
2294         fail don't warn and carry on.  The old behaviour pre-dates NI and
2295         doesn't make much sense now since jennifer checks both
2296         queue/accepted and queue/done for any .changes files it's
2297         processing.
2298
2299         * utils.py (move): don't throw exceptions on existing files or
2300         can't overwrite, instead just fubar out.
2301
2302         * jennifer (check_dsc): also check Build-Depends-Indep for
2303         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
2304
2305 2003-09-18  James Troup  <james@nocrew.org>
2306
2307         * katie.py (Katie.close_bugs): only log the bugs we've closed
2308         once.
2309
2310         * kelly (main): log as 'kelly', not 'katie'.
2311
2312 2003-09-16  James Troup  <james@nocrew.org>
2313
2314         * katie.py (Katie.check_binary_against_db): likewise noramlize.
2315
2316         * jennifer (check_changes): normalize reject message for "changes
2317         file already exists" to be %s: <foo>.
2318         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
2319         produced by broken dpkg-source in 1.10.11.  Tone down and
2320         normalize rejection message for incompatible 'Format' version
2321         numbers.
2322         (check_diff): likewise tone down and normalize.
2323
2324 2003-09-07  James Troup  <james@nocrew.org>
2325
2326         * utils.py (parse_changes): if dsc_whitespace_rules is false,
2327         don't bomb out on bogus empty lines.
2328         (build_file_list): check for changes["files"] earlier.  use Dict
2329         to create files[name] dictionary.
2330         (send_mail): don't bother validating arguments.
2331         (check_signature): minor improvements to some of the rejection
2332         messages including listing the key id of the key that wasn't found
2333         in the keyring.
2334         (wrap): new function.
2335
2336         * tea: add new check 'validate-indices' that ensures all files
2337         mentioned in indices (Packages, Sources) files do in fact exist.
2338
2339         * catherine (poolize): use a local re_isadeb which handles legacy
2340         (i.e. no architecture) style .deb filenames.
2341
2342         * rosamund: new script.
2343
2344         * rhona (check_binaries): when checking for binary packages not in
2345         a suite, don't bother selecting files that already have a
2346         last_used date.
2347         (check_sources): likewise.
2348
2349         * rhona: change all SQL EXISTS sub-query clauses to use the
2350         postgres suggested convention of "SELECT 1 FROM".
2351         * andrea (main): likewise.
2352         * tea (check_override): likewise.
2353         * catherine (main): likewise.
2354
2355         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
2356         entries and in other suites MustBeNewerThan's.
2357         (SuiteMappings): likewise
2358         * katie.conf-non-US: likewise.
2359         * katie.conf-security: likewise.
2360
2361         * apt.conf-security: remove oldstable.
2362         * apt.conf.stable: likewise.
2363         * apt.conf.stable-non-US: likewise.
2364         * cron.buildd-security: likewise.
2365         * cron.daily-security: likewise.
2366         * vars-security (suites): likewise.
2367         * wanna-build/trigger.daily: likewise.
2368
2369         * claire.py (clean_symlink): move...
2370         * utils.py (clean_symlink): here.
2371
2372         * claire.py (find_dislocated_stable): update accordingly.
2373
2374 2003-08-16  Anthony Towns  <ajt@debian.org>
2375
2376         * katie.py (source_exists): expand the list of distributions
2377         the source may exist in to include any suite that's mapped to
2378         the destination suite (even transitively (a->b->c)). This should
2379         unbreak binary uploads to *-proposed-updates.
2380
2381 2003-08-09  Randall Donald  <rdonald@debian.org>
2382
2383         * lisa (recheck): change changes["distribution"].keys() to
2384         Katie.pkg.changes...
2385
2386 2003-08-08  Randall Donald  <rdonald@debian.org>
2387
2388         * katie.py: only tag bugs as fixed-in-experimental for
2389         experimental uploads
2390
2391 2003-07-26  Anthony Towns  <ajt@debian.org>
2392
2393         * katie.py (source_exists): add an extra parameter to limit the
2394         distribution(s) the source must exist in.
2395         * kelly, lisa, jennifer: update to use the new source_exists
2396
2397 2003-07-15  Anthony Towns  <ajt@debian.org>
2398
2399         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
2400         checksums for debian-installer stuff even when it's just a symlink to
2401         another suite
2402
2403         * apt.conf: add the FakeDI line
2404
2405 2003-06-09  James Troup  <james@nocrew.org>
2406
2407         * kelly (check): make sure the 'file' we're looking for in 'files'
2408         hasn't been deleted by katie.check_dsc_against_db().
2409
2410 2003-05-07  James Troup  <james@nocrew.org>
2411
2412         * helena (time_pp): fix s/years/year/ typo.
2413
2414 2003-04-29  James Troup  <james@nocrew.org>
2415
2416         * madison (usage): document -c/--component.
2417
2418         * madison (usage): Fix s/seperated/separated/.
2419         * melanie (usage): likewise.
2420         * jenna (usage): likewise.
2421
2422 2003-04-24  James Troup  <james@nocrew.org>
2423
2424         * cron.daily-non-US: if there's nothing for kelly to install, say
2425         so.
2426
2427         * jennifer (check_timestamps): print sys.exc_value as well as
2428         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
2429         failed' with 'deb contents' to make it clearer what timestamp(s)
2430         are being checked.
2431
2432 2003-04-15  James Troup  <james@nocrew.org>
2433
2434         * cron.daily-non-US: only run kelly if there are some .changes
2435         files in accepted.
2436
2437         * rene: add -m/--mode argument which can be either daily (default)
2438         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
2439         Various changes to make this possible including a poor attempt at
2440         splitting main() up a little.  De-hardcode suite numbers from SQL
2441         queries and return quietly from do_nviu() if experimental doesn't
2442         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
2443         is.
2444
2445         * debian/control (Depends): remove python-zlib as it's obsolete.
2446
2447         * charisma (main): don't slice the \n off strings when we're
2448         strip()-ing it anyway.
2449         * heidi (set_suite): likewise.
2450         (process_file): likewise.
2451         * natalie (process_file): likewise.
2452
2453 2003-04-08  James Troup  <james@nocrew.org>
2454
2455         * katie.py (Katie.check_dsc_against_db): improve the speed of two
2456         slow queries by using one LIKE '%foo%' and then matching against
2457         '%s' or '/%s$' in python.  Also only join location when we need it
2458         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
2459         query, so 6s for each sourceful package.
2460
2461         * cron.daily: invoke rene and send the report to ftpmaster.
2462         * cron.daily-non-US: likewise.
2463
2464 2003-03-14  James Troup  <james@nocrew.org>
2465
2466         * utils.py (send_mail): default filename to blank.
2467         * amber (make_advisory): adapt.
2468         * jennifer (acknowledge_new): likewise.
2469         * katie.py (Katie.close_bugs): likewise.
2470         (Katie.announce): likewise.
2471         (Katie.accept): likewise.
2472         (Katie.check_override): likewise.
2473         (Katie.do_reject): likewise.
2474         * kelly (do_reject): likewise.
2475         (stable_install): likewise.
2476         * lisa (do_bxa_notification): likewise.
2477         * lauren (reject): likewise.
2478         * melanie (main): likewise.
2479
2480         * rene (add_nbs): check any NBS packages against unstable to see
2481         if they haven't been removed already.
2482
2483         * templates/katie.rejected: remove paragraph about rejected files
2484         since they're o-rwx due to c-i-m and the uploader can't do
2485         anything about them and shania will take care of them anyway.
2486
2487         * madison (usage): update usage example to use comma seperation.
2488         * melanie (usage): likewise.
2489
2490         * utils.py (split_args): new function; splits command line
2491         arguments either by space or comma (whichever is used).  Also has
2492         optional-but-default DWIM spurious space detection to avoid
2493         'command -a i386, m68k' problems.
2494         (parse_args): use it.
2495         * melanie (main): likewise.
2496
2497         * melanie (main): force the admin to tell someone if we're not
2498         doing a rene-led removal (or closing a bug, which counts as
2499         telling someone).
2500
2501 2003-03-05  James Troup  <james@nocrew.org>
2502
2503         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
2504         and python sections.
2505         * katie.conf-security (Section): likewise.
2506
2507         * add_constraints.sql: add uid and uid_id_seq to grants.
2508
2509         * lisa (determine_new): also warn about adding overrides to
2510         oldstable.
2511
2512         * madison (main): make the -S/--source-and-binary query obey
2513         -s/--suite restrictions.
2514
2515 2003-03-03  James Troup  <james@nocrew.org>
2516
2517         * madison (main): if the Archive_Maintenance_In_Progress lockfile
2518         exists, warn the user that our output might seem strange.  (People
2519         get confused by multiple versions in a suite which happens
2520         post-kelly but pre-jenna.)
2521
2522 2003-02-21  James Troup  <james@nocrew.org>
2523
2524         * kelly (main): we don't need to worry about StableRejector.
2525
2526         * melanie (main): sort versions with apt_pkg.VersionCompare()
2527         prior to output.
2528
2529         * lauren: new script to manually reject packages from
2530         proposed-updates.  Updated code from pre-NI kelly (nee katie).
2531
2532 2003-02-20  James Troup  <james@nocrew.org>
2533
2534         * kelly (init): remove unused -m/--manual-reject argument.
2535
2536         * katie.py (Katie.force_reject): renamed from force_move to make
2537         it more explicit what this function does.
2538         (Katie.do_reject): update to match.
2539
2540         * utils.py (prefix_multi_line_string): add an optional argument
2541         include_blank_lines which defaults to 0.  If non-zero, blank lines
2542         will be includes in the output.
2543
2544         * katie.py (Katie.do_reject): don't add leading space to each line
2545         of the reject message.  Include blank lines when showing the
2546         message to the user.
2547
2548 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
2549
2550         * utils.py (fix_maintainer): replace pointless re.sub() with
2551         simple string format.
2552
2553 2003-02-11  James Troup  <james@nocrew.org>
2554
2555         * lisa (edit_overrides): only strip-to-one-char and upper-case
2556         non-numeric answers.  Fixes editing of items with indices >= 10;
2557         noticed by Randall.
2558         (edit_overrides): correct order of arguments to "not a valid
2559         index" error message.
2560
2561         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
2562         remove_duplicate_versions(); thanks to aj for the initial
2563         diagnosis.
2564         (remove_duplicate_versions): correct how we return
2565         dominant_versions.
2566         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
2567         a tuple rather than just a tuple.
2568
2569 2003-02-10  James Troup  <james@nocrew.org>
2570
2571         * emilie: new script - sync fingerprint and uid tables with a
2572         debian.org LDAP DB.
2573
2574         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
2575         in 'fingerprint'.
2576
2577         * db_access.py (get_or_set_uid_id): new function.
2578
2579         * jennifer (main): update locking to a) not used FCNTL (deprecated
2580         in python >= 2.2) and b) acknowledge upstream's broken
2581         implementation of lockf (see Debian bug #74777), c) try to acquire
2582         the lock non-blocking.
2583         * kelly (main): likewise.
2584
2585         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
2586
2587         * madison (main): only append the package to new_packages if it's
2588         not already in there; fixes -S/--source-and-binary for cases where
2589         the source builds a binary package of the same name.
2590
2591 2003-02-10  Anthony Towns  <ajt@debian.org>
2592
2593         * madison (main): use explicit JOIN syntax for
2594         -S/--source-and-binary queries to reduce the query's runtime from
2595         >10 seconds to negligible.
2596
2597 2003-02-08  James Troup  <james@nocrew.org>
2598
2599         * rene (main): in the NVIU output, append items to lists, not
2600         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
2601         should be removed.
2602
2603 2003-02-07  James Troup  <james@nocrew.org>
2604
2605         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
2606         Sources [aj].
2607
2608         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
2609         O. Benham/Adam Heath/.
2610
2611         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
2612         (Suite::Stable::Description): update for 3.0r1a.
2613         (Dinstall::SigningKeyIds): update for 2003 key [aj].
2614
2615         * utils.py (gpgv_get_status_output): rename from
2616         get_status_output().
2617
2618         * neve (check_signature): use gpgv_get_status_output and Dict from
2619         utils().  Add missing newline to error message about duplicate tokens.
2620
2621         * saffron (per_arch_space_use): also print space used by source.
2622         (output_format): correct string.join() invocation.
2623
2624         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2625
2626 2003-02-04  James Troup  <james@nocrew.org>
2627
2628         * cron.buildd: correct generation of Packages/Sources and grep out
2629         non-US/non-free as well as non-free.
2630
2631 2003-02-03  Ryan Murray  <rmurray@debian.org>
2632
2633         * cron.buildd: generate quinn-diff output with full Packages/Sources
2634           files to get out-of-date vs. uncompiled right.
2635         * apt.conf.buildd: no longer generate uncompressed files, as they
2636           are generated in cron.buildd instead
2637         * add -i option to quinn-diff to ignore binary-all packages
2638         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2639           aren't in the packages file, the arch that uploaded them will build
2640           them anyways...
2641
2642 2003-01-30  James Troup  <james@nocrew.org>
2643
2644         * rene (main): only print suggested melanie command when there's
2645         some NBS to remove.
2646
2647 2003-01-30  Ryan Murray  <rmurray@debian.org>
2648
2649         * cron.buildd: fix incorrectly inverted lockfile check
2650
2651 2003-01-29  Ryan Murray  <rmurray@debian.org>
2652
2653         * cron.buildd: generate override.sid.all3.src
2654         * apt.conf.buildd: use generated override.sid.all3.src
2655
2656 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2657
2658         * utils.py (get_status_output): moved from jennifer.
2659         (Dict): likewise.
2660         (check_signature): likewise.
2661
2662         * jennifer (get_status_output): moved to utils.py.
2663         (Dict): likewise.
2664         (check_signature): likewise.
2665
2666         * utils.py (check_signature): add an argument to specifiy which
2667         function to call when an error was found.
2668         (check_signature): document this function better.
2669
2670         * jennifer (check_files): pass the reject function as an argument
2671         to utils.check_signature.
2672         (process_it): likewise.
2673
2674 2003-01-20  James Troup  <james@nocrew.org>
2675
2676         * rene (main): lots of changes to improve the output and make it
2677         more useful.
2678
2679         * katie.py (Katie.check_override): make the override messages
2680         clearer (hopefully).
2681
2682 2002-12-26  James Troup  <james@nocrew.org>
2683
2684         * ziyi (usage): document the ability to pass suite(s) as
2685         argument(s).
2686         (main): read apt.conf after checking for -h/--help.
2687
2688         * tea (main): take the check to run as an argument.
2689
2690         * saffron.R: R script to graph daily install runs.
2691
2692         * saffron: new script; various stats functions.
2693
2694         * rhona (main): connect to the database after checking for -h/--help.
2695
2696         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2697
2698         * melanie (main): sort versions with utils.arch_compare_sw().
2699
2700         * madison (usage): alphabetize order of options.
2701         * melanie (usage): likewise.
2702
2703         * kelly (usage): fix usage short description (we aren't dinstall).
2704
2705         * julia (usage): fix usage description and alphabetize order of
2706         options.
2707
2708         * jeri (usage): fix usage short description.
2709
2710         * jennifer (main): move --help and --version checks from here...
2711         (init): to here so that they work with an empty katie.conf.
2712         * kelly: likewise.
2713
2714         * alyson (usage): new function.
2715         (main): use it.
2716         * andrea: likewise.
2717         * ashley: likewise.
2718         * cindy: likewise.
2719         * denise: likewise.
2720         * helena: likewise.
2721         * neve: likewise.
2722         * rene: likewise.
2723         * rose: likewise.
2724         * tea: likewise.
2725
2726         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2727         entry that caused tasks to be omitted from 3.0r1.
2728
2729 2002-12-10  James Troup  <james@nocrew.org>
2730
2731         * jennifer (check_files): sanity check the Depends field to ensure
2732         it's non-empty if present since apt chokes on an empty one.
2733         Thanks to Ryan Murray for the idea.
2734
2735 2002-12-08  James Troup  <james@nocrew.org>
2736
2737         * katie.conf-security (Helena::Directories): new; include accepted
2738         in addition to byhand and new.
2739
2740         * helena (process_changes_files): use utils.arch_compare_sw().
2741         Justify things based on the longest [package, version,
2742         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2743         the commas in architecture and version lists for the same reason.
2744         (main): make directories we process configurable through
2745         Helena::Directories in the config file; if that doesn't exist
2746         default to the old hardcoded values (byhand & new).
2747
2748         * utils.py (arch_compare_sw): moved here from madison.
2749         * madison (main): adjust to compensate.
2750
2751 2002-12-06  James Troup  <james@nocrew.org>
2752
2753         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2754         right filename.
2755
2756 2002-12-05  James Troup  <james@nocrew.org>
2757
2758         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2759
2760 2002-11-28  Randall Donald  <rdonald@debian.org>
2761
2762         * fernanda.py (read_control): fix typo of 'Architecture'.
2763
2764 2002-11-26  James Troup  <james@nocrew.org>
2765
2766         * lisa (check_pkg): call less with '-R' so we see the colour from
2767         Randall's fernanda changes.
2768
2769         * neve (process_sources): if Directory points to a legacy location
2770         but the .dsc isn't there; assume it's broken and look in the pool.
2771         (update_section): new, borroed from alyson.
2772         (do_da_do_da): use it.
2773         (process_packages): add suite_it to the cache key used for
2774         arch_all_cache since otherwise we only add a package to the first
2775         suite it's in and ignore any subsequent ones.
2776
2777         * katie.conf-non-US (Location): fixed to reflect reality (all
2778         suites, except old-proposed-updates (which is legacy-mixed)) are
2779         pool.
2780
2781         * utils.py (try_with_debug): wrapper for print_exc().
2782         * jenna (main): use it.
2783         * neve (main): likewise.
2784
2785 2002-11-25  Randall Donald  <rdonald@debian.org>
2786
2787         * fernanda.py (main): added -R to less command line for raw control
2788         character support to print colours
2789         (check_deb): Instead of running dpkg -I on deb file, call
2790         output_deb_info, the new colourized control reporter.
2791         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2792         of printing out each .dsc line.
2793         (output_deb_info): new function. Outputs each key/value pair from
2794         read_control except in special cases where we highlight section,
2795         maintainer, architecture, depends and recommends.
2796         (create_depends_string): new function. Takes Depends tree and looks
2797         up it's compontent via projectb db, colourizes and constructs a
2798         depends string in original order.
2799         (read_dsc): new function. reads and parses .dsc info via
2800         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2801         colourized.
2802         (read_control): new function. reads and parses control info via
2803         apt_pkg. Depends and Recommends are split in to list structures,
2804         Section and Architecture are colourized. Maintainer is colourized
2805         if it has a localhost.localdomain address.
2806         (split_depends): new function. Creates a list of lists of
2807         dictionaries of depends (package,version relation). Top list is
2808         colected from comma delimited items. Sub lists are | delimited.
2809         (get_comma_list): new function. splits string input among commas
2810         (get_or_list): new function. splits string input among | delimiters
2811         (get_depends_parts): new function. Creates dictionary of package name
2812         and version relation from dependancy string.
2813         Colours for section and depends are per component. Unfound depends
2814         are in bold. Lookups using version info is not supported yet.
2815
2816 2002-11-22  James Troup  <james@nocrew.org>
2817
2818         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2819         'udmsearch'.
2820
2821         * amber (make_advisory): string.atol() is deprecated and hasn't
2822         been ported to string methods.  Use long() instead.
2823
2824         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2825         creating the database since we'll fail badly if it's created with
2826         e.g. UNICODE encoding.
2827
2828         * rose (main): AptCnf is a global.
2829
2830         * neve (get_location_path): new function determines the location
2831         from the the first (left-most) directory of a Filename/Directory.
2832         (process_sources): don't need 'location' anymore.  Use
2833         utils.warn().  Use the Directory: field for each package to find
2834         the .dsc.  Use get_location_path() to determine the location for
2835         each .dsc.
2836         (process_packages): do't need 'location' anymore.  Use
2837         utils.warn().  Use get_location_path().
2838         (do_sources): don't need 'location', drop 'prefix' in favour of
2839         being told the full path to the Sources file, like
2840         process_packages().
2841         (do_da_do_da): main() renamed, so that main can call us in a
2842         try/except.  Adapt for the changes in do_sources() and
2843         process_packages() above.  Assume Sources and Packages file are in
2844         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2845
2846         * katie.conf-security (Location): fixed to reflect reality (all
2847         suites are pool, not legacy).
2848
2849         * utils.py (print_exc): more useful (i.e. much more verbose)
2850         traceback; a recipe from the Python cookbook.
2851         * jenna (main): use it.
2852         * neve (main): likewise.
2853
2854 2002-11-19  James Troup  <james@nocrew.org>
2855
2856         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2857         handling which was FUBAR for multi-suite uploads.  Now we just
2858         make a dictionary of destinations to copy to and iterate over
2859         those.
2860
2861         * fernanda.py (check_deb): run linda as well as lintian.
2862
2863 2002-10-21  James Troup  <james@nocrew.org>
2864
2865         * melanie (main): change X-Melanie to X-Katie and prefix it with
2866         'melanie '.
2867
2868         * lisa (main): prefix X-Katie with 'lisa '.
2869
2870         * jennifer (clean_holding): fix typo in string method changes;
2871         s/file.find(file/file.find(/.
2872
2873         * cron.daily: invoke helena and send the report to ftpmaster.
2874         * cron.daily-non-US: likewise.
2875
2876 2002-10-16  James Troup  <james@nocrew.org>
2877
2878         * kelly (check): call reject() with a blank prefix when parsing
2879         the return of check_dsc_against_db() since it does its own
2880         prefix-ing.
2881
2882         * rose: new script; only handles directory creation initally.
2883
2884         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2885         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2886
2887 2002-10-06  James Troup  <james@nocrew.org>
2888
2889         * rene (main): remove bogus argument handling.
2890
2891         * kelly: katie, renamed.
2892         * cron.daily: adapt for katie being renamed to kelly.
2893         * cron.daily-non-US: likewise.
2894         * amber (main): likewise.
2895
2896         * Changes for python 2.1.
2897
2898         * kelly: time.strftime no longer requires a second argument of
2899         "time.localtime(time.time())".
2900         * logging.py: likewise.
2901         * rhona: likewise.
2902         * shania (init): likewise.
2903
2904         * amber: use augmented assignment.
2905         * catherine (poolize): likewise.
2906         * claire.py (fix_component_section): likewise.
2907         * halle (check_changes): likewise.
2908         * helena: likewise.
2909         * jenna: likewise.
2910         * jennifer: likewise.
2911         * jeri: likewise.
2912         * katie.py: likewise.
2913         * kelly: likewise.
2914         * lisa: likewise.
2915         * madison (main): likewise.
2916         * melanie: likewise.
2917         * natalie: likewise.
2918         * neve: likewise.
2919         * rhona: likewise.
2920         * tea: likewise.
2921         * utils.py: likewise.
2922         * ziyi: likewise.
2923
2924         * amber: use .endswith.
2925         * fernanda.py: likewise.
2926         * halle (main): likewise.
2927         * jennifer: likewise.
2928         * jeri: likewise.
2929         * katie.py: likewise.
2930         * kelly: likewise.
2931         * lisa: likewise.
2932         * neve: likewise.
2933         * shania (main): likewise.
2934         * utils.py: likewise.
2935
2936         * alyson: use string methods.
2937         * amber: likewise.
2938         * andrea: likewise.
2939         * ashley: likewise.
2940         * catherine: likewise.
2941         * charisma: likewise.
2942         * claire.py: likewise.
2943         * db_access.py: likewise.
2944         * denise: likewise.
2945         * halle: likewise.
2946         * heidi: likewise.
2947         * helena: likewise.
2948         * jenna: likewise.
2949         * jennifer: likewise.
2950         * jeri: likewise.
2951         * julia: likewise.
2952         * katie.py: likewise.
2953         * kelly: likewise.
2954         * lisa: likewise.
2955         * logging.py: likewise.
2956         * madison: likewise.
2957         * melanie: likewise.
2958         * natalie: likewise.
2959         * neve: likewise.
2960         * rene: likewise.
2961         * tea: likewise.
2962         * utils.py: likewise.
2963         * ziyi: likewise.
2964
2965 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2966
2967         * utils.py (parse_changes): use <string>.startswith() rather than
2968         string.find().
2969
2970 2002-08-27  Anthony Towns  <ajt@debian.org>
2971
2972         * katie.py (in_override_p): when searching for a source override,
2973         and the dsc query misses, search for both udeb and deb overrides
2974         as well. Should fix the UNACCEPT issues with udebs.
2975
2976 2002-08-24  James Troup  <james@nocrew.org>
2977
2978         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2979         source+binary package finding code which was causing severe
2980         performance degradation with postgres 7.2.
2981
2982 2002-08-14  James Troup  <james@nocrew.org>
2983
2984         * julia (main): use the pwd.getpwall() to get system user info
2985         rather than trying to read a password file.  Add a -n/--no-action
2986         option.
2987
2988         * cron.hourly: julia no longer takes any arguments.
2989         * cron.hourly-non-US: likewise.
2990
2991 2002-08-07  James Troup  <james@nocrew.org>
2992
2993         * katie (install): handle multi-suite uploads when CopyChanges
2994         and/or CopyKatie are in use, ensuring we only copy stuff once.
2995
2996 2002-08-01  Ryan Murray  <rmurray@debian.org>
2997
2998         * wanna-build/trigger.daily: initial commit, with locking
2999         * cron.buildd: add locking against daily run
3000
3001 2002-07-30  James Troup  <james@nocrew.org>
3002
3003         * melanie (main): readd creation of suite_ids_list so melanie is
3004         remotely useful again.
3005
3006         * katie.conf: adopt for woody release; diable
3007         StableDislocationSupport, add oldstable, adjust other suites and
3008         mappings, fix up location.
3009         * katie.conf-non-US: likewise.
3010         * katie.conf-security: likewise.
3011
3012         * apt.conf.stable: adapt for woody release; add oldstable, adjust
3013         stable.
3014         * apt.conf.stable-non-US: likewise.
3015
3016         * apt.conf-security: adapt for woody release; adding oldstable,
3017         oldstable, adjust stable and testing.
3018         * cron.daily-security: likewise.
3019         * cron.buildd-security: likewise.
3020
3021         * apt.conf: adapt for woody release; rename woody-proposed-updates
3022         to testing-proposed-updates and proposed-updates to
3023         old-proposed-updates.
3024         * apt.conf-non-US: likewise.
3025
3026         * vars-non-US (copyoverrides): add sarge.
3027         * vars (copyoverrides): likewise.
3028
3029         * vars-security (suites): add oldstable.
3030
3031 2002-07-22  Ryan Murray  <rmurray@debian.org>
3032
3033         * apt.conf.security-buildd: use suite codenames instead of
3034           distnames.
3035
3036 2002-07-16  James Troup  <james@nocrew.org>
3037
3038         * denise (main): fix filenames for testing override files.
3039
3040 2002-07-14  James Troup  <james@nocrew.org>
3041
3042         * jennifer (process_it): call check_md5sums later so we can check
3043         files in the .dsc too
3044         (check_md5sums): check files in the .dsc too.  Check both md5sum
3045         and size.
3046
3047         * melanie (main): use parse_args() and join_with_commas_and() from
3048         utils.  If there's nothing to do, say so and exit, don't ask for
3049         confirmation etc.
3050
3051         * amber (join_with_commas_and): moved from here to ...
3052         * utils.py (join_with_commas_and): here.
3053
3054 2002-07-13  James Troup  <james@nocrew.org>
3055
3056         * madison (main): use parse_args() from utils.  Support
3057         -c/--component.
3058
3059         * jenna (parse_args): moved from here to ...
3060         * utils.py (parse_args): here.
3061
3062         * katie.conf (Architectures): minor corrections to the description
3063         for arm, mips and mipsel.
3064         * katie.conf-non-US (Architectures): likewise.
3065         * katie.conf-security (Architectures): likewise.
3066
3067         * cron.daily-security: use natalie's new -a/--add functionality to
3068         flesh out the security overrides.
3069
3070 2002-07-12  James Troup  <james@nocrew.org>
3071
3072         * cron.buildd (ARCHS): add arm.
3073
3074         * katie.conf: 2.2r7 was released.
3075         * katie.conf-non-US: likewise.
3076
3077         * utils.py (parse_changes): handle a multi-line field with no
3078         starting line.
3079
3080 2002-06-25  James Troup  <james@nocrew.org>
3081
3082         * templates/amber.advisory (To): add missing email address since
3083         __WHOAMI__ is only a name.
3084
3085         * katie.conf-security (Melane::LogFile): correct to go somewhere
3086         katie has write access to.
3087         (Location::/org/security.debian.org/ftp/dists/::Suites): add
3088         Testing.
3089
3090         * natalie: add support for -a/-add which adds packages only
3091         (ignoring changes and deletions).
3092
3093         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
3094         use FindB, not get.
3095
3096 2002-06-22  James Troup  <james@nocrew.org>
3097
3098         * jennifer (check_files): validate the package name and version
3099         field.  If 'Package', 'Version' or 'Architecture' are missing,
3100         don't try any further checks.
3101         (check_dsc): likewise.
3102
3103         * utils.py (re_taint_free): add '~' as a valid character.
3104
3105 2002-06-20  Anthony Towns  <ajt@debian.org>
3106
3107         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
3108
3109 2002-06-09  James Troup  <james@nocrew.org>
3110
3111         * jennifer (check_files): reduce useless code.
3112
3113         * cron.daily-security: run symlinks -dr on $ftpdir.
3114
3115         * vars-security (ftpdir): add.
3116
3117 2002-06-08  James Troup  <james@nocrew.org>
3118
3119         * neve (update_override_type): transaction is handled higher up in
3120         main().
3121         (update_priority): likewise.
3122         (process_sources): remove code that makes testing a duplicate of
3123         stable.
3124         (process_packages): likewise.
3125
3126         * templates/amber.advisory: add missing mail headers.
3127
3128         * cron.daily-security: also call apt-ftparchive clean for
3129         apt.conf.buildd-security.
3130         * cron.weekly: likewise.
3131
3132         * amber (do_upload): write out a list of source packages (and
3133         their version) uploaded for testing.
3134         (make_advisory): add more Subst mappings for the mail headers.
3135         (spawn): check for suspicious characters in the command and abort
3136         if their found.
3137
3138 2002-06-07  James Troup  <james@nocrew.org>
3139
3140         * ziyi (main): remove the 'nonus'/'security' hacks and use
3141         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
3142         the lower level Release files, even if they don't exist.  fubar
3143         out if we can't open a lower level Release file for writing.
3144
3145         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
3146         ziyi.
3147         * katie.conf-security (Dinstall): likewise.
3148
3149         * amber (do_upload): renamed from get_file_list().  Determine the
3150         upload host from the original component.
3151         (init): Add a -n/--no-action option.  Fix how we get changes_files
3152         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
3153         sys.argv).  Add an Options global.
3154         (make_advisory): support -n/--no-action.
3155         (spawn): likewise.
3156         (main): likewise.
3157         (usage): document -n/--no-action.
3158
3159         * cron.buildd-security: fix path to Packages-arch-specific in
3160         quinn-diff invocation.
3161
3162         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
3163         to proper suite names (i.e. stable, testing) rather than codenames
3164         (potato, woody).
3165         (Dinstall::DefaultSuite): likewise.
3166         (Suite): likewise.
3167         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
3168         * vars-security (suites): likewise.
3169         * apt.conf-security: likewise.
3170
3171         * katie.conf-security (Component): add "updates/" prefix.
3172         (Suite::*::Components): likewise.
3173         (ComponentMappings): new; map all {ftp-master,non-US} components
3174         -> updates/<foo>.
3175
3176         * katie.conf-security (Natalie): removed; the options have
3177         defaults and ComponentPosition is used by alyson which doesn't
3178         work on security.d.o.
3179         (Amber): replace UploadHost and UploadDir with ComponentMappings
3180         which is a mapping of components -> URI.
3181         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
3182         (SuiteMappings): use "silent-map" in preference to "map".
3183
3184         * cron.unchecked-security: fix call to cron.buildd-security.
3185
3186         * cron.daily-security: map local suite (stable) -> override suite
3187         (potato) when fixing overrides.  Correct component in natalie call
3188         to take into account "updates/" prefix.  Fix cut'n'waste in
3189         override.$dist.all3 generation, the old files weren't being
3190         removed, so they were endlessly growing.
3191
3192         * neve (main): don't use .Find for the CodeName since we require
3193         it.  Location::*::Suites is a ValueList.
3194         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
3195         out on expired keys, just warn.
3196         (update_override_type): new function; lifted from alyson.
3197         (update_priority): likewise.
3198         (main): use update_{override_type,priority}().
3199
3200         * jennifer (check_distributions): remove redunant test for
3201         SuiteMappings; ValueList("does-not-exist") returns [] which is
3202         fine.  Add support for a "silent-map" type which doesn't warn
3203         about the mapping to the user.
3204         (check_files): add support for ComponentMappings, similar to
3205         SuiteMappings, but there's no type, just a source and a
3206         destination and the original component is stored in "original
3207         component".
3208         * katie.py (Katie.dump_vars): add "original component" as an
3209         optionsal files[file] dump variable.
3210
3211         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
3212         query.  Add support for section-less legacy locations like current
3213         security.debian.org through YetAnotherConfigBoolean
3214         'LegacyStableHasNoSections'.
3215         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
3216
3217         * utils.py (real_arch): moved here from ziyi.
3218         * ziyi (real_arch): moved to utils.py.
3219         * ziyi (main): likewise.
3220
3221         * claire.py (find_dislocated_stable): use real_arch() with
3222         filter() to strip out source and all.
3223         * neve (main): likewise.
3224         * rene (main): likewise.
3225         * jeri (parse_packages): likewise.
3226
3227 2002-06-06  James Troup  <james@nocrew.org>
3228
3229         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
3230         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
3231         doing.
3232
3233 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3234
3235         * jeri (check_joey): check if the line contains two elements
3236         before accessing the second.  Also, strip trailing spaces as well
3237         as the newline.
3238         * halle (check_joey): likewise.
3239
3240 2002-06-05  James Troup  <james@nocrew.org>
3241
3242         * cron.unchecked-security: new file; like cron.unchecked but if
3243         there's nothing to do exit so we don't call cron.buildd-security.
3244
3245         * apt.conf.buildd-security: new file.
3246
3247         * vars (archs): alphabetize.
3248         * vars-non-US (archs): likewise.
3249
3250         * vars-security: add unchecked.
3251
3252         * madison (main): reduce rather bizarrely verbose and purposeless
3253         code to print arches to a simple string.join.
3254
3255         * katie.conf (Suites::Unstable): add UdebComponents, a new
3256         valuelist of suites, used by jenna to flesh out the list of
3257         <suite>_main-debian-installer-binary-<arch>.list files generated.
3258         (Dinstall): add StableDislocationSupport, a new boolean used by
3259         jenna to enable or disable stable dislocation support
3260         (i.e. claire), as true.
3261
3262         * katie.conf (Dinstall): add StableDislocationSupport, a new
3263         boolean used by jenna to enable or disable stable dislocation
3264         support (i.e. claire), as true.
3265         * katie.conf-non-US: likewise.
3266         * katie.conf-security: likewise.
3267
3268         * cron.daily-security: generate .all3 overrides for the buildd
3269         support.  Freshen a local copy of Packages-arch-specific from
3270         buildd.debian.org.
3271
3272         * claire.py (find_dislocated_stable): disable the support for
3273         files in legacy-mixed locations since none of the Debian archives
3274         have any anymore.
3275
3276         * helena: new script; produces a report on NEW and BYHAND
3277         packages.
3278
3279         * jenna: rewritten from scratch to fix speed problems.  Run time
3280         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
3281         minutes, 105 seconds are the monster query and 70 odd seconds is
3282         claire.
3283
3284         * apt.conf.buildd (Default): remove MaxContentsChange as it's
3285         irrelevant.
3286
3287 2002-06-05  Ryan Murray  <rmurray@debian.org>
3288
3289         * cron.buildd-security: new file.
3290
3291 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
3292
3293         * denise (list): take a file argument and use it.
3294         (main): don't abuse sys.stdout, just write to the file.
3295
3296         * claire.py (usage): Fix misspelling.
3297         (clean_symlink): Simplify.
3298         (find_dislocated_stable): Avoid unnecessary work.
3299
3300 2002-05-29  James Troup  <james@nocrew.org>
3301
3302         * cameron: removed; apt-ftparchive can simply walk the directory.
3303
3304 2002-05-26  Anthony Towns  <ajt@debian.org>
3305
3306         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
3307         for the autobuilders.
3308
3309 2002-05-24  Ryan Murray  <rmurray@debian.org>
3310
3311         * cron.buildd: update override files before running apt-ftparchive
3312
3313 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3314
3315         * amber (main): remove extra space in prompt.
3316
3317         * utils.py (validate_changes_file_arg): use original filename in
3318         error messages.
3319
3320         * jeri (check_joey): close file after use.
3321         (parse_packages): likewise.
3322         (main): setup debug option properly.
3323
3324         * melanie (main): remove unused packages variable and simplify the
3325         code to build up con_packages by using repr().
3326
3327 2002-05-23  James Troup  <james@nocrew.org>
3328
3329         * lisa (recheck): when we reject, also return 0 so the package is
3330         skipped.
3331         (sg_compare): fix note sorting.
3332         (recheck): remove the .katie file after rejection.
3333
3334         * katie.py (Katie.accept): accepted auto-build support take 3;
3335         this time adding support for security.  Security needs a) non-pool
3336         files copied rather than symlinked since accepted is readable only
3337         by katie/security and www-data needs to be able to see the files,
3338         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
3339         AcceptedAutoBuildSuites and is a ValueList containing the suites.
3340         SecurityAcceptedAutoBuild is a new boolean which controls whether
3341         or not normal or security style is used.  The unstable_accepted
3342         table was renamed to accepted_autobuild and a suite column added.
3343         Also fix a bug noticed by Ryan where an existent orig.tar.gz
3344         didn't have it's last_used/in_accepted flags correctly updated.
3345         * katie (install): likewise.
3346         * rhona (clean_accepted_autobuild): likewise.
3347
3348 2002-05-22  James Troup  <james@nocrew.org>
3349
3350         * lisa (sort_changes): new function; sorts changes properly.
3351         Finally.
3352         (sg_compare): new function; helper for sort_changes().  Sorts by
3353         have note and time of oldest upload.
3354         (indiv_sg_compare): new function; helper for sort_changes().
3355         Sorts by source version, have source and filename.
3356         (main): use sort_changes().
3357         (changes_compare): obsoleted; removed.
3358
3359 2002-05-20  James Troup  <james@nocrew.org>
3360
3361         * rhona (clean_accepted_autobuild): don't die if a file we're
3362         trying to remove doesn't exist.  Makes rhona more friendly to
3363         katie/katie.py crashes/bugs without any undue cost.
3364
3365 2002-05-19  James Troup  <james@nocrew.org>
3366
3367         * lisa (main): if sorting a large number of changes give some
3368         feedback.
3369         (recheck): new function, run the same checks (modulo NEW,
3370         obviously) as katie does, if they fail do the standard
3371         reject/skip/quit dance.
3372         (do_pkg): use it.
3373
3374         * katie (install): don't try to unlink the symlink in the
3375         AcceptedAutoBuild support if the destination is not a symlink (or
3376         doesn't exist).  Avoids unnecessary bombs on previous partial
3377         accepts and will still bomb hard if the file exists and isn't a
3378         symlink.
3379
3380         * utils.py: blah, commands _is_ used when the mail stuff isn't
3381         commented out like it is in my test environment.
3382
3383         * lisa (changes_compare): "has note" overrides everything else.
3384         Use .katie files rather than running parse_changes, faster and
3385         allows "has note" to work.  Correct version compare, it was
3386         reversed.  Ctime check should only kick in if the source packages
3387         are not the same.
3388         (print_new): print out and return any note.  Rename 'ret_code' to
3389         'broken'.
3390         (edit_new): renamed from spawn_editor.  Don't leak file
3391         descriptors.  Clean up error message if editor fails.
3392         (edit_note): new function, allows one to edit notes.
3393         (do_new): add note support, editing and removing.
3394         (init): kill -s/--sort; with notes we always want to use our
3395         sorting method.
3396         (usage): likewise.
3397
3398         * katie.py (Katie.dump_vars): add "lisa note" as an optional
3399         changes field.
3400
3401         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
3402         it default to 0.  Adapt tests to assume it's boolean.
3403         * fernanda.py (check_changes): adjust call appropriately.
3404         * halle (check_changes): likewise.
3405         * jennifer (check_changes): likewise.
3406         * jeri (check_changes): likewise.
3407         * shania (flush_orphans): likewise.
3408
3409         * jennifer (check_dsc): pass is_a_dsc by name when calling
3410         build_file_list() for clarity.
3411         * shania (flush_orphans): likewise.
3412         * tea (check_missing_tar_gz_in_dsc): likewise.
3413
3414         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
3415         calling parse_changes() for clarity.
3416         * tea (check_dscs): likewise.
3417
3418         * utils.py (parse_changes): make dsc_whitespace_rules default to
3419         not true.
3420         * halle (check_changes): adjust call appropriately.
3421         * jennifer (check_changes): likewise.
3422         * jeri (check_changes): likewise.
3423         * lisa (changes_compare): likewise.
3424         * utils.py (changes_compare): likewise.
3425         * melanie (main): likewise.
3426         * shania (flush_orphans): likewise.
3427         * fernanda.py (check_changes): likewise.
3428
3429 2002-05-18  James Troup  <james@nocrew.org>
3430
3431         * katie.py (Katie.dump_vars): make the .katie file unreadable,
3432         it's not useful and by and large a duplication of information
3433         available in readable format in other files.
3434
3435 2002-05-16  Ryan Murray  <rmurray@debian.org>
3436
3437         * melanie: Dir::TemplatesDir -> Dir::Templates
3438
3439 2002-05-15  Ryan Murray  <rmurray@debian.org>
3440
3441         * cameron: correct the use of os.path.join
3442
3443 2002-05-15  Anthony Towns  <ajt@debian.org>
3444
3445         * ziyi: Update to match the new format for Architectures/Components
3446         in katie.conf.
3447
3448 2002-05-14  James Troup  <james@nocrew.org>
3449
3450         * amber: new script; 'installer' wrapper script for the security
3451         team.
3452
3453         * katie.py (Katie.announce): remove unused 'dsc' local
3454         variable. (pychecker)
3455
3456         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
3457
3458         * neve: don't import sys, we don't use it. (pychecker)
3459         (check_signature): fix return type mismatch. (pychecker)
3460
3461         * utils.py: don't import commands, we don't use it.  (pychecker)
3462
3463         * katie (install): SpecialAcceptedAutoBuild is a boolean.
3464
3465         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
3466         obsoleted by the change to "othercomponents" handling in jennifer
3467         detailed below.
3468         (Katie.cross_suite_version_check): new function; implements
3469         cross-suite version checking rules specified in the conf file
3470         while also enforcing the standard "must be newer than target
3471         suite" rule.
3472         (Katie.check_binary_against_db): renamed, since it's invoked once
3473         per-binary, "binaries" was inaccurate.  Use
3474         cross_suite_version_check() and don't bother with the "oldfiles"
3475         rubbish as jennifer works out "othercomponents" herself now.
3476         (Katie.check_source_against_db): use cross_suite_version_check().
3477
3478         * katie (check): the version and file overwrite checks
3479         (check_{binary,source,dsc}_against_db) are not per-suite.
3480
3481         * jennifer (check_files): less duplication of
3482         'control.Find("Architecture", "")' by putting it in a local
3483         variable.
3484         (check_files): call check_binary_against_db higher up since it's
3485         not a per-suite check.
3486         (check_files): get "othercomponents" directly rather than having
3487         check_binary_against_db do it for us.
3488
3489         * heidi (main): 'if x:', not 'if x != []:'.
3490         * katie.py (Katie.in_override_p): likewise.
3491         (Katie.check_dsc_against_db): likewise.
3492         * natalie (main): likewise.
3493         * rene (main): likewise.
3494         * ziyi (real_arch): likewise.
3495
3496         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
3497         and OverrideType are now value lists, not lists.
3498         * andrea (main): likewise.
3499         * cindy (main): likewise.
3500         * claire.py (find_dislocated_stable): likewise.
3501         * denise (main): likewise.
3502         * jenna (main): likewise.
3503         * jennifer (check_distributions): likewise.
3504         (check_files): likewise.
3505         (check_urgency): likewise (Urgency::Valid).
3506         * jeri (parse_packages): likewise.
3507         * neve (main): likewise (and Location::%s::Suites).
3508         * rene (main): likewise.
3509
3510 2002-05-13  James Troup  <james@nocrew.org>
3511
3512         * katie.py (Katie.check_source_against_db): correct case of reject
3513         message to be consistent with binary checks.
3514
3515         * jennifer (get_status_output): don't leak 2 file descriptors per
3516         invocation.
3517         (check_signature): add missing '\n' to "duplicate status token"
3518         error message.
3519
3520 2002-05-09  James Troup  <james@nocrew.org>
3521
3522         * utils.py (validate_changes_file_arg): new function; validates an
3523         argument which should be a .changes file.
3524         * ashley (main): use it.
3525         * lisa (main): likewise.
3526
3527         * katie.py (Katie.check_dsc_against_db): since there can be more
3528         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
3529         entry still exists in files.
3530
3531         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
3532         files, since check_dsc_against_db() deletes the .orig.tar.gz
3533         entry.
3534
3535         * cameron: cleanups.
3536
3537         * utils.py (changes_compare): change sort order so that source
3538         name and source version trump 'have source'; this should fix
3539         UNACCEPT problems in katie where -1 hppa+source & i386, -2
3540         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
3541         by Ryan.
3542
3543         * lisa (main): allow the arguments to be .katie files too.
3544
3545 2002-05-07  Ryan Murray  <rmurray@debian.org>
3546
3547         * cron.buildd: add s390 to arch list again
3548
3549 2002-05-05  Ryan Murray  <rmurray@debian.org>
3550
3551         * cron.buildd: new script, update w-b database from unstable_accepted
3552         table
3553         * cameron: new script, take list in unstable_accepted and write out
3554         a file list for apt-ftparchive
3555         * apt.conf.buildd: new apt configuration for Packages/Sources for
3556         unstable_accepted
3557         * vars: add s390 to arch list.
3558
3559 2002-05-03  James Troup  <james@nocrew.org>
3560
3561         * neve (main): don't hard code the calling user as that doesn't
3562         work with modern postgres installs.  Fix psql invocation for
3563         init_pool.sql (database name required).  Dont' hard code the
3564         database name.
3565         (process_sources): add support for fingerprint and install_date.
3566         (process_packages): add support for fingerprint.
3567         (do_sources): pass in the directory, fingerprint support needs it.
3568         (get_status_output): borrowed from jennifer.
3569         (reject): likewise.
3570         (check_signature): likewise.
3571
3572         * katie (install): only try to log urgencies if Urgency_Logger is
3573         defined.
3574         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
3575         defined; only close Urgency_Logger if it's defined.
3576
3577         * catherine (poolize): adapt for Dir rationalization.
3578         * claire.py (find_dislocated_stable): likewise.
3579         * denise (main): likewise.
3580         * halle (check_joey): likewise.
3581         * jenna: likewise.
3582         * jennifer: likewise.
3583         * jeri: likewise.
3584         * katie.py: likewise.
3585         * katie: likewise.
3586         * lisa (do_bxa_notification): likewise.
3587         * logging.py (Logger.__init__): likewise
3588         * rene (main): likewise.
3589         * rhona (clean): likewise.
3590         * shania (init): likewise.
3591         * tea: likewise.
3592         * ziyi: likewise.
3593
3594         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
3595         FindB, not FindI.
3596
3597         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
3598         boolean, use FindB, not get.
3599
3600         * katie.py (Katie.check_dsc_against_db): ignore duplicate
3601         .orig.tar.gz's which are an exact (size/md5sum) match.
3602
3603         * ashley (main): really allow *.katie files as arguments too;
3604         noticed by aj.
3605
3606         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
3607
3608 2002-05-03  Anthony Towns  <ajt@debian.org>
3609
3610         * ziyi: support for security.
3611
3612 2002-05-02  James Troup  <james@nocrew.org>
3613
3614         * jennifer (accept): call Katie.check_override() unconditional as
3615         no-mail check moved into that function.
3616         (do_byhand): likewise.
3617
3618         * katie.py (Katie.check_override): don't do anything if we're a)
3619         not sending mail or b) the override disparity checks have been
3620         disbled via Dinstall::OverrideDisparityCheck.
3621
3622         * jennifer (check_files): don't hard code Unstable as the suite
3623         used to check for architecture validity; use
3624         Dinstall::DefaultSuite instead, if it exists.
3625         (accept): conditionalize
3626
3627         * katie.py (Katie.update_subst): support global maintainer
3628         override with Dinstall::OverrideMaintainer.
3629
3630         * jennifer (check_distributions): new function, Distribution
3631         validation and mapping.  Uses new SuiteMappings variable from
3632         config file to abstract suite mappings.
3633         (check_changes): call it.
3634
3635         * natalie: renamed; nothing imports or likely will for some time.
3636
3637         * denise (main): remove unused natalie import and init().
3638
3639         * natalie.py (init): removed.
3640         (main): initalize here instead and don't hardcode the database
3641         name.
3642
3643 2002-04-30  James Troup  <james@nocrew.org>
3644
3645         * katie.py (Katie.close_bugs): new function, split out from
3646         announce().
3647         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3648         true.
3649         (Katie.close_bugs): new function, split out
3650         (Katie.close_bugs): return immediately if there are no bugs to
3651         close.
3652
3653         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3654         * katie (do_reject): likewise.
3655         (stable_install): likewise.
3656         * katie.py (Katie.announce): likewise.
3657         (Katie.accept): likewise.
3658         (Katie.check_override): likewise.
3659         (Katie.do_reject): likewise.
3660         * lisa (do_bxa_notification): likewise.
3661         * melanie (main): likewise.
3662
3663         * utils.py (TemplateSubst): change second argument to be a
3664         filename rather than a template since every caller opened a file
3665         on the fly which was ugly and leaked file descriptor.
3666
3667 2002-04-29  James Troup  <james@nocrew.org>
3668
3669         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3670         <hertzog@debian.org> to send 'accepted' announce mails to the
3671         PTS. [#128140]
3672
3673 2002-04-24  James Troup  <james@nocrew.org>
3674
3675         * init_pool.sql (unstable_accepted): add two new fields to
3676         unstable_accepted; in_accepted is a boolean indicating whether or
3677         not the file is in accepted and last_used is a timestamp used by
3678         rhona to determine when to remove symlinks for installed packages.
3679
3680         * katie.py (Katie.accept): auto-build support take 2.  Create
3681         symlinks for all files into a seperate directory.  Add files to
3682         unstable_accepted as paths to the new directory; mark them as
3683         being in accepted for cameron.  Properly conditionalize it on a
3684         configuration variable.
3685
3686         * katie (install): likewise.  Update symlinks to point into the
3687         pool; mark the files for later deletion by rhona and mark them as
3688         not being in accepted for cameron.
3689
3690         * rhona (clean_accepted_autobuild): new function.
3691
3692 2002-04-22  James Troup  <james@nocrew.org>
3693
3694         * jennifer (check_files): handle db_access.get_location_id()
3695         returning -1 properly/better.
3696
3697         * rhona (clean_fingerprints): new function.
3698
3699 2002-04-21  James Troup  <james@nocrew.org>
3700
3701         * utils.py (touch_file): unused; remove.
3702         (plural): likewise.
3703
3704         * jennifer (check_files): close file descriptor used to get the
3705         control file.
3706         (check_md5sums): likewise.
3707         (callback): likewise.
3708
3709         * katie.py (Katie.do_reject): handle manual rejects much better;
3710         call the editor first and get confirmation from the user before
3711         proceeding.
3712
3713         * jennifer (check_signature): prefix_multi_line_string() moved to
3714         utils.
3715
3716         * utils.py (prefix_multi_line_string): moved here from jennifer.
3717
3718 2002-04-20  James Troup  <james@nocrew.org>
3719
3720         * lisa (main): handle non-existent files.
3721
3722         * ashley (main): allow *.katie files as arguments too.
3723
3724 2002-04-19  James Troup  <james@nocrew.org>
3725
3726         * katie.py (Katie.accept): add stuff to help auto-building from
3727         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3728         in the pool), create a symlink to it in the accepted directory and
3729         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3730
3731         * katie (install): undo the "auto-building from accepted" stuff
3732         (i.e. remove the .orig.tar.gz symlink and remove the files from
3733         unstable_accepted table).
3734
3735 2002-04-16  James Troup  <james@nocrew.org>
3736
3737         * jennifer (upload_too_new): fix typo which was causing all
3738         timestamp comparisons to be against the .changes file.  Also move
3739         back to the original directory so we do the comparisons against
3740         accurate timestamps.
3741
3742         * tea (check_missing_tar_gz_in_dsc): new function.
3743
3744         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3745         file mentioned in the .dsc.
3746
3747         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3748         way mails reach debian-{devel-,}changes@l.d.o.
3749
3750 2002-04-02  Ryan Murray  <rmurray@debian.org>
3751
3752         * cron.daily: run shania after rhona
3753         * cron.daily-non-US: likewise.
3754
3755 2002-04-01  James Troup  <james@nocrew.org>
3756
3757         * katie: re-add proposed-updates/stable install support.
3758
3759         * katie.py (Katie.dump_vars): add changes["changes"] as an
3760         optional field; should be mandatory later.
3761
3762 2002-03-31  James Troup  <james@nocrew.org>
3763
3764         * katie (install): support a Suite::<foo>::CopyKatie similar to
3765         CopyChanges.  Done seperately because .katie files don't need to
3766         be mirrored and will probably be copied to another directory as a
3767         result.
3768
3769         * halle (main): add missing debug to options.
3770
3771 2002-03-29  James Troup  <james@nocrew.org>
3772
3773         * madison (main): add a -r/--regex option.
3774
3775 2002-03-26  James Troup  <james@nocrew.org>
3776
3777         * lisa: don't trample on changes["distribution"]; make a copy of
3778         it as changes["suite"] instead and use that.
3779
3780 2002-03-16  Anthony Towns  <ajt@debian.org>
3781
3782         * templates/lisa.bxa_notification: Fix some grammatical errors.
3783         Encourage contact via bxa@ftp-master email address.
3784
3785 2002-03-15  James Troup  <james@nocrew.org>
3786
3787         * jennifer (check_timestamps): remove bogus raise in except.
3788
3789 2002-03-15  Anthony Towns  <ajt@debian.org>
3790
3791         * cron.monthly: rotate mail/archive/bxamail as well as
3792         mail/archive/mail. This is for a complete archive of
3793         correspondence with the BXA.
3794
3795 2002-03-14  Anthony Towns  <ajt@debian.org>
3796
3797         * crypto-in-main changes.
3798
3799         * utils.py (move, copy): add an optional perms= parameter to let you
3800         set the resulting permissions of the moved/copied file
3801         * katie.py (force_move): rejected/morgued files should be unreadable
3802         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3803         should be unreadable.
3804
3805 2002-03-07  Ryan Murray  <rmurray@debian.org>
3806
3807         * katie (install): check for existance of "files id" key as well as
3808         it being set to a valid value.
3809         * katie (install): check for existense and valid value for location
3810         id as well
3811
3812 2002-03-05  Ryan Murray  <rmurray@debian.org>
3813
3814         * katie.py (do_reject): reread the reason file after editing it.
3815
3816 2002-02-25  James Troup  <james@nocrew.org>
3817
3818         * jennifer (check_changes): don't enforce sanity in .changes file
3819         names since it doesn't seem to be possible; pcmica-cs and similar
3820         freak show packages in particular cause real problems.
3821
3822         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3823         each dsc_file since the .orig.tar.gz checking code now uses it as
3824         a boolean.  Fixes bizarro rejections which bogusly claimed
3825         .diff.gz md5sum/size was incorrect.
3826
3827 2002-02-24  James Troup  <james@nocrew.org>
3828
3829         * katie (process_it): reset reject_message.
3830
3831 2002-02-22  James Troup  <james@nocrew.org>
3832
3833         * db_access.py(set_files_id): disable use of
3834         currval('files_id_seq') because it was taking 3 seconds on auric
3835         which is insane (most calls take < 0.01) and simply call
3836         get_files_id() for the return value instead.
3837
3838         * katie.py (Katie.do_query): convenience function; unused by
3839         default, useful for profiling.
3840         * db_access.py (do_query): likewise.
3841
3842         * katie (install): fix insert SQL call when binary has no source.
3843
3844         * lisa (determine_new): auto-correct non-US/main to non-US.
3845         (determine_new): add a warning when adding things to stable.
3846         (edit_index): use our_raw_input().
3847         (edit_overrides): likewise.
3848         (do_new): likewise.  Use re.search() not re.match() since the
3849         default answer may not be the first one.
3850         (do_byhand): likewise.
3851         (do_new): Default to 'S'kip and never 'A'dd.
3852
3853         * jennifer (action): pass prompt to our_raw_input().
3854         * melanie (game_over): likewise.
3855         * katie (action): likewise.
3856
3857         * utils.py (our_raw_input): add an optional prompt argument to
3858         make the function more usable as a drop in replacement for
3859         raw_input().
3860
3861         * jennifer (check_files): correct reject() to not double prefix
3862         when using katie.py based functions.
3863         (check_dsc): likewise.
3864
3865         * katie.py (Katie.reject): prepend a new line if appropriate
3866         rathen than appending one to avoid double new lines when caller
3867         adds one of his own.
3868
3869         * lisa (determine_new): warn if the package is also in other
3870         components.
3871
3872 2002-02-20  James Troup  <james@nocrew.org>
3873
3874         * jennifer (check_files): if .changes file lists "source" in
3875         Architecture field, there must be a .dsc.
3876
3877 2002-02-15  James Troup  <james@nocrew.org>
3878
3879         * ashley (main): add some missing fields.
3880
3881         * katie.py (Katie.check_dsc_against_db): fix to take into account
3882         the fact that the .orig.tar.gz might be in byhand, accepted or
3883         new.  Also fix calling of reject().
3884         (Katie.check_binaries_against_db): fix calling of reject().
3885         (Katie.check_source_against_db): likewise.
3886         (Katie.dump_vars): add missing variables used for bug closures.
3887
3888         * lisa (changes_compare_by_time): sort by reverse time.
3889
3890         * katie.py (Katie.accept): log.
3891         (Katie.dump_vars): missing has_key test for optional changes fields.
3892
3893         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3894         (process_it): traceback goes to stderr, not stdout.
3895         (acknowledge_new): log.
3896         (do_byhand): likewise.
3897
3898         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3899
3900         * add_constraints.sql: add grants for the new fingerprint table.
3901
3902 2002-02-13  James Troup  <james@nocrew.org>
3903
3904         * katie (do_reject): basename the .changes filename before trying
3905         to use it to construct the .reason filename.
3906         (process_it): call Katie.update_subst() so do_reject() DTRT with
3907         the mail template.
3908         (do_reject): setup the mail template correctly.
3909
3910 2002-02-12  James Troup  <james@nocrew.org>
3911
3912         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3913         (check_files): don't abuse global dictionaries.
3914         (Ent): use all variables.
3915         (check_timestamps): don't abuse global dictionaries.
3916
3917         * fernanda.py: renamed to .py so lisa can import it.
3918         (check_dsc): remove unused local variables (pychecker).
3919         (display_changes): split off from check_changes.
3920
3921         * katie: rewritten; most of the functionality moves to jennifer;
3922         what's left is the code to install packages once a day from the
3923         'accepted' directory.
3924
3925         * jennifer: new program, processes packages in 'unchecked'
3926         (i.e. most of the non-install functionality of old katie).
3927
3928         * katie.py: common functions shared between the clique of
3929         jennifer, lisa and katie.
3930
3931         * lisa: new program; handles NEW and BYHAND packages.
3932
3933         * jeri (usage): new function.
3934         (main): use it.
3935         (check_package): remove unused local variable (pychecker).
3936
3937         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3938         binaries and source.  Add install_date to source.
3939
3940         * halle (usage): new function.
3941         (main): use it.  Remove unused options.
3942         (check_changes): remove unused local variable (pychecker).
3943
3944         * add_constraints.sql: add fingerprint references.
3945
3946         * db_access.py (get_or_set_fingerprint_id): new function.
3947
3948         * ashley (main): new program; dumps the contents of a .katie file
3949         to stdout.
3950
3951         * alyson (main): remove option handling since we don't actually
3952         support any.
3953         * cindy (main): likewise.
3954
3955         * remove unnecessary imports and pre-define globals (pychecker).
3956
3957 2002-02-11  Anthony Towns  <ajt@debian.org>
3958
3959         * added installation-report and upgrade-report pseudo-packages
3960
3961 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3962
3963         * katie (update_subst): use Dinstall::TrackingServer.
3964         * melanie (main): likewise.
3965
3966 2002-01-27  James Troup  <james@nocrew.org>
3967
3968         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3969         noticing, jgg@ for fix.
3970
3971 2002-01-19  James Troup  <james@nocrew.org>
3972
3973         * utils.py (extract_component_from_section): handle non-US
3974         non-main properly.
3975
3976 2002-01-12  James Troup  <james@nocrew.org>
3977
3978         * madison: add support for -S/--source-and-binary which displays
3979         information for the source package and all it's binary children.
3980
3981 2002-01-13  Anthony Towns  <ajt@debian.org>
3982
3983         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3984         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3985           and 2002 key ids.
3986         * katie.conf-non-US: Likewise.
3987         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3988           multiple keys automatically. This is probably only useful for
3989           transitioning from an expired (or revoked?) key.
3990
3991 2002-01-08  Ryan Murray  <rmurray@debian.org>
3992
3993         * debian/python-dep: new file that prints out python:Depends for
3994           substvars
3995         * debian/control: use python:Depends, build-depend on python
3996           lower Depends: on postgresql to Suggests:
3997         * debian/rules: determine python version, install to the correct
3998           versioned dir
3999
4000 2001-12-18  Anthony Towns  <ajt@debian.org>
4001
4002         * ziyi: unlink Release files before overwriting them (in case they've
4003           been merged)
4004         * ziyi: always include checksums/sizes for the uncompressed versions
4005           of Sources and Packages, even if they're not present on disk
4006
4007 2001-11-26  Ryan Murray  <rmurray@debian.org>
4008
4009         * ziyi (main): add SigningPubKey config option
4010         * katie.conf: use SigningPubKey config option
4011         * katie.conf-non-US: likewise
4012
4013 2001-11-24  James Troup  <james@nocrew.org>
4014
4015         * katie (acknowledge_new): log newness.
4016
4017 2001-11-24  Anthony Towns  <ajt@debian.org>
4018
4019         * ziyi (real_arch): bail out if some moron forgot to reset
4020         untouchable on stable.
4021         (real_arch): source Release files.
4022
4023 2001-11-19  James Troup  <james@nocrew.org>
4024
4025         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
4026         utils.get_conf().
4027         * shania (main): likewise.
4028
4029         * rhona (main): add default options.
4030
4031         * db_access.py (get_archive_id): case independent.
4032
4033         * katie (action): sort files so that ordering is consistent
4034         between mails; noticed/requested by Joey.
4035
4036 2001-11-17  Ryan Murray  <rmurray@debian.org>
4037
4038         * utils.py: add get_conf function, change startup code to read all
4039           config files to the Cnf that get_conf returns
4040           use the component list from the katie conf rather than the hardcoded
4041           list.
4042         * all scripts: use new get_conf function
4043         * shania: fix try/except around changes files
4044         * jenna: only do debian-installer if it is a section in Cnf
4045
4046 2001-11-16  Ryan Murray  <rmurray@debian.org>
4047
4048         * shania (main): Initialize days to a string of a number.
4049                  (main): Initialize Cnf vars before reading in Cnf
4050
4051 2001-11-14  Ryan Murray  <rmurray@debian.org>
4052
4053         * shania (main): Initialize days to a number.
4054
4055 2001-11-04  James Troup  <james@nocrew.org>
4056
4057         * docs/Makefile: use docbook-utils' docbook2man binary.
4058
4059         * Change all "if foo == []" constructs into "if not foo".
4060
4061         * katie (check_changes): when installing into stable from
4062         proposed-updates, remove all non-stable target distributions.
4063         (check_override): don't check for override disparities on stable
4064         installs.
4065         (stable_install): update install_bytes appropriately.
4066         (reject): stable rejection support; i.e. don't remove files when
4067         rejecting files in the pool, rather remove them from the
4068         proposed-update suite instead, rhona will do the rest.
4069         (manual_reject): support for a stable specific template.
4070         (main): setup up stable rejector in subst.
4071
4072 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
4073
4074         * debian/control (Build-Depends): docbook2man has been superseded
4075         by docbook-utils.
4076
4077         * neve (main): exit with a more useful error message.
4078         (update_suites): Suite::<suite>::Version, Origin and Description
4079         are not required, so don't fail if they don't exist.
4080
4081         * db_access.py (get_archive_id): return -1 on error rather than
4082         raise an exception.
4083         (get_location_id): likewise.
4084
4085         * madison (main): don't exit on the first not-found package,
4086         rather exit with an appropriate return code after processing all
4087         packages.
4088
4089 2001-11-03  James Troup  <james@nocrew.org>
4090
4091         * claire.py (find_dislocated_stable): add per-architecture
4092         symlinks for dislocated architecture: all debs.
4093
4094 2001-10-19  Anthony Towns  <ajt@debian.org>
4095
4096         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
4097
4098 2001-10-10  Anthony Towns  <ajt@debian.org>
4099
4100         * claire.py (fix_component_section): do _not_ assign to None under
4101         any circumstances
4102
4103 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
4104
4105         * melanie (main): don't duplicate architectures when removing from
4106         more than one suite.
4107
4108         * heidi (main, process_file, get_list): report suite name not ID.
4109
4110         * naima (nmu_p): be case insensitive.
4111
4112         * naima (action): more list handling clean ups.
4113
4114         * melanie (main): clean up lists handling to use string.join and
4115         IN's.
4116
4117         * madison (main): clean up suite and architecture argument parsing
4118         to use slices less and string.join more.
4119
4120         * utils.py (parse_changes): Use string.find() instead of slices for
4121         string comparisons thereby avoid hardcoding the length of strings.
4122         * ziyi (main): likewise.
4123
4124 2001-10-07  James Troup  <james@nocrew.org>
4125
4126         * Remove mode argument from utils.open_files() calls if it's the
4127         default, i.e. 'r'.
4128
4129 2001-09-27  James Troup  <james@nocrew.org>
4130
4131         * katie (init): new function; options clean up.
4132         (usage): add missing options, remove obsolete ones.
4133         (main): adapt for the two changes above.  If the lock file or
4134         new-ack log file don't exist, create them.  Don't try to open the
4135         new-ack log file except running in new-ack mode.
4136
4137         * alyson (main): initialize all the tables that are based on the
4138         conf file.
4139
4140         * utils.py (touch_file): like touch(1).
4141         (where_am_i): typo.
4142
4143         * catherine (usage): new.
4144         (main): use it.  options cleanup.
4145         * claire.py: likewise.
4146         * fernanda: likewise.
4147         * heidi: likewise.
4148         * jenna: likewise.
4149         * shania: likewise.
4150         * ziyi: likewise.
4151
4152         * andrea: options cleanup.
4153         * charisma: likewise.
4154         * julia: likewise.
4155         * madison: likewise.
4156         * melanie: likewise.
4157         * natalie: likewise.
4158         * rhona: likewise.
4159         * tea: likewise.
4160
4161 2001-09-26  James Troup  <james@nocrew.org>
4162
4163         * utils.py: default to sane config file locations
4164         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
4165         or they can point to the real ones through use of a new Config
4166         section.  Based on an old patch by Adam Heath.
4167         (where_am_i): use the new default config stuff.
4168         (which_conf_file): likewise.
4169         (which_apt_conf_file): likewise.
4170
4171         * charisma (main): output defaults to
4172         `Package~Version\tMaintainer'; input can be of either form.  When
4173         parsing the new format do version comparisons, when parsing the
4174         old format assume anything in the extra file wins.  This fixes the
4175         problem of newer non-US packages being overwhelmed by older
4176         versions still in stable on main.
4177
4178 2001-09-17  James Troup  <james@nocrew.org>
4179
4180         * natalie.py (list): use result_join().
4181
4182         * denise (main): result_join() moved to utils.
4183
4184         * utils.py (result_join): move to utils; add an optional seperator
4185         argument.
4186
4187 2001-09-14  James Troup  <james@nocrew.org>
4188
4189         * heidi (set_suite): new function; does --set like natalie does,
4190         i.e. turns it into a sequence of --add's and --remove's
4191         internally.  This is a major win (~20 minute run time > ~20
4192         seconds) in the common, everday (i.e. testing) case.
4193         (get_id): common code used by set_suite() and process_file().
4194         (process_file): call set_suite() and get_id().
4195         (main): add logging support.
4196
4197         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
4198         files.
4199
4200         * utils.py (parse_changes): use slices or simple string comparison
4201         in favour of regexes where possible.
4202
4203         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
4204         fact that the string VARDATA() points to are not null terminated.
4205
4206         * denise (result_join): new function; like string.join() but
4207         handles None's.
4208         (list): use it.
4209         (main): likewise.
4210
4211         * charisma (main): python-pygresql 7.1 returns None not "".
4212
4213 2001-09-14  Ryan Murray  <rmurray@debian.org>
4214
4215         * natalie.py (list): handle python-pygresql 7.1 returning None.
4216
4217 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
4218
4219         * madison (main): return 1 if no package is found.
4220
4221 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
4222
4223         * madison (main): better error handling for incorrect
4224         -a/--architecture or -s/--suite arguments.
4225         (usage): new.
4226         (main): use it.
4227
4228 2001-09-05  Ryan Murray  <rmurray@debian.org>
4229
4230         * charisma, madison, katie: remove use of ROUser
4231         * katie.conf,katie.conf-non-US: remove defintion of ROUser
4232
4233 2001-08-26  James Troup  <james@nocrew.org>
4234
4235         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
4236         maintained packages at cjwatson@'s request.
4237
4238 2001-08-21  James Troup  <james@nocrew.org>
4239
4240         * madison (main): add -a/--architecture support.
4241
4242         * jenna: use logging instead of being overly verbose on stdout.
4243
4244 2001-08-11  Ryan Murray  <rmurray@debian.org>
4245
4246         * melanie: add functional help option
4247
4248 2001-08-07  Anthony Towns  <ajt@debian.org>
4249
4250         * apt.conf, katie.conf: Add ia64 and hppa to testing.
4251
4252 2001-07-28  James Troup  <james@nocrew.org>
4253
4254         * katie (check_dsc): ensure source version is >> than existing
4255         source in target suite.
4256
4257 2001-07-25  James Troup  <james@nocrew.org>
4258
4259         * natalie.py: add logging support.
4260
4261         * utils.py (open_file): make the second argument optional and
4262         default to read-only.
4263
4264         * rene (main): work around broken source packages that duplicate
4265         arch: all packages with arch: !all packages (no longer allowed
4266         into the archive by katie).
4267
4268 2001-07-13  James Troup  <james@nocrew.org>
4269
4270         * katie (action): don't assume distribution is a dictionary.
4271         (update_subst): don't assume architecture is a dictionary and that
4272         maintainer822 is defined.
4273         (check_changes): recognise nk_format exceptions.
4274         (check_changes): reject on 'testing' only uploads.
4275         (check_files): when checking to ensure all packages are newer
4276         versions check against arch-all packages too.
4277         (check_dsc): enforce the existent of a sane set of mandatory
4278         fields.  Ensure the version number in the .dsc (modulo epoch)
4279         matches the version number in the .changes file.
4280
4281         * utils.py (changes_compare): ignore all exceptions when parsing
4282         the changes files.
4283         (build_file_list): don't UNDEF on a changes file with no format
4284         field.
4285
4286 2001-07-07  James Troup  <james@nocrew.org>
4287
4288         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
4289         rather than 'changedbyname' to avoid false negatives on uploads
4290         with an email-address-only Changed-By field.
4291         (check_dsc): don't overwrite reject_message; append to it.
4292         (check_signature): likewise.
4293         (check_changes): likewise.
4294         (announce): condition logging on 'action'.
4295
4296         * logging.py: new logging module.
4297
4298         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
4299         sub-tree into a separate (global) variable.
4300         (check_dsc): ensure format is 1.0 to retain backwards
4301         compatability with dpkg-source in potato.
4302         (main): only try to obtain the lock when not running in no-action
4303         mode.
4304         Use the new logging module.
4305
4306         * christina: initial version; only partially usable.
4307
4308 2001-06-28  Anthony Towns  <ajt@debian.org>
4309
4310         * apt.conf: Add ExtraOverrides to auric.
4311
4312 2001-06-25  James Troup  <james@nocrew.org>
4313
4314         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
4315         they preferred the name 'Uploaders'.
4316
4317 2001-06-23  James Troup  <james@nocrew.org>
4318
4319         * katie (check_files): fix typo in uncommon rejection message,
4320         s/sourceversion/source version/.
4321
4322         * denise (main): we can't use print because stdout has been
4323         redirected.
4324
4325         * katie (source_exists): new function; moved out of check_files()
4326         and added support for binary-only NMUs of earlier sourceful NMUs.
4327
4328         * rhona (clean): find_next_free has moved.
4329
4330         * utils.py (find_next_free): new function; moved here from rhona.
4331         Change too_many to be an argument with a default value, rather
4332         than a hardcoded variable.
4333
4334         * shania: rewritten to work better; REJECTion reminder mail
4335         handling got lost though.
4336
4337 2001-06-22  James Troup  <james@nocrew.org>
4338
4339         * rhona (main): remove unused override code.
4340
4341         * fernanda (main): remove extraneous \n's from utils.warn calls.
4342         * natalie.py (list): likewise.
4343
4344         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
4345         use utils.{warn,fubar} where appropriate.
4346
4347 2001-06-21  James Troup  <james@nocrew.org>
4348
4349         * katie (nmu_p): new class that encapsulates the "is a nmu?"
4350         functionality.
4351         (nmu_p.is_an_nmu): add support for multiple maintainers specified
4352         by the "Maintainers" field in the .dsc file and maintainer groups.
4353         (nmu_p.__init__): read in the list of group maintainer names.
4354         (announce): use nmu_p.
4355
4356 2001-06-20  James Troup  <james@nocrew.org>
4357
4358         * rene (main): hardcode the suite experimental is compared to by
4359         name rather than number.
4360
4361         * katie (check_files): differentiate between doesn't-exist and
4362         permission-denied in "can not read" rejections; requested by edd@.
4363         (check_dsc): use os.path.exists rather than os.access to allow the
4364         above check to kick in.
4365
4366         * heidi (process_file): read all input before doing anything and
4367         use transactions.
4368
4369 2001-06-15  James Troup  <james@nocrew.org>
4370
4371         * fernanda: new script; replaces old 'check' shell script
4372         nastiness.
4373
4374 2001-06-14  James Troup  <james@nocrew.org>
4375
4376         * katie: actually import traceback module to avoid amusing
4377         infinite loop.
4378
4379 2001-06-10  James Troup  <james@nocrew.org>
4380
4381         * utils.py (extract_component_from_section): fix to handle just
4382         'non-free' and 'contrib'.  Also fix to handle non-US in a
4383         completely case insensitive manner as a component.
4384
4385 2001-06-08  James Troup  <james@nocrew.org>
4386
4387         * madison (arch_compare): sort function that sorts 'source' first
4388         then alphabetically.
4389         (main): use it.
4390
4391 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
4392
4393         * catherine (poolize): explicitly make poolized_size a long so it
4394         doesn't overflow when poolizing e.g. entire archives.
4395
4396 2001-06-01  James Troup  <james@nocrew.org>
4397
4398         * utils.py (send_mail): throw exceptions rather than exiting.
4399
4400         * katie (process_it): catch exceptions and ignore them.
4401
4402 2001-06-01  Michael Beattie  <mjb@debian.org>
4403
4404         * added update-mailingliststxt and update-readmenonus to update
4405         those files, respectively. modified cron.daily{,-non-US} to
4406         use them.
4407
4408 2001-05-31  Anthony Towns  <ajt@debian.org>
4409
4410         * rhona: make StayOfExecution work.
4411
4412 2001-05-31  James Troup  <james@nocrew.org>
4413
4414         * rhona (find_next_free): fixes to not overwrite files but rename
4415         them by appending .<n> instead.
4416         (clean): use find_next_free and use dated sub-directories in the
4417         morgue.
4418
4419         * utils.py (move): don't overwrite files unless forced to.
4420         (copy): likewise.
4421
4422 2001-05-24  James Troup  <james@nocrew.org>
4423
4424         * katie (check_files): determine the source version here instead
4425         of during install().
4426         (check_files): check for existent source with bin-only NMU
4427         support.
4428         (main): sort the list of changes so that the source-must-exist
4429         check Does The Right Thing(tm).
4430
4431         * utils.py (changes_compare): new function; sorts a list of
4432         changes files by 'have-source', source, version.
4433         (cc_fix_changes): helper function.
4434         (parse_changes): use compiled regexes.
4435         (fix_maintainer): likewise.
4436
4437         * rene (main): warn about packages in experimental that are
4438         superseded by newer versions in unstable.
4439
4440 2001-05-21  James Troup  <james@nocrew.org>
4441
4442         * rene (main): add support for checking for ANAIS (Architecture
4443         Not Allowed In Source) packages.
4444
4445 2001-05-17  James Troup  <james@nocrew.org>
4446
4447         * katie (check_changes): initalize `architecture' dictionary in
4448         changes global so that if we can't parse the changes file for
4449         whatever reason we don't undef later on.
4450
4451         * utils.py (parse_changes): fix handling of multi-line fields
4452         where the first line did have data.
4453
4454 2001-05-05  Anthony Towns  <ajt@debian.org>
4455
4456         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
4457         (It should always have been there. Ooopsy.)
4458
4459 2001-05-03  Anthony Towns  <ajt@debian.org>
4460
4461         * jenna: Cleanup packages that move from arch:any to arch:all or
4462         vice-versa.
4463
4464 2001-04-24  Anthony Towns  <ajt@debian.org>
4465
4466         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
4467         cope with debian-installer and boot-floppies' md5sum.txt.
4468
4469 2001-04-16  James Troup  <james@nocrew.org>
4470
4471         * katie (check_changes): add missing %s format string argument.
4472         (stable_install): temporary work around for morgue location to
4473         move installed changes files into.
4474         (stable_install): helps if you actually read in the template.
4475         (manual_reject): fix for editing of reject messages which was
4476         using the wrong variable name.
4477
4478         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
4479
4480 2001-04-13  James Troup  <james@nocrew.org>
4481
4482         * katie (manual_reject): Cc the installer.
4483         (reject): don't.
4484         (check_changes): remove unused maintainer-determination code.
4485         (update_subst): add support for Changed-By when setting the
4486         *MAINTAINER* variables.
4487
4488         * rene (bar): new function to check for packages on architectures
4489         when they shouldn't be.
4490
4491         * natalie.py (main): use fubar() and warn() from utils.
4492
4493         * utils.py (whoami): new mini-function().
4494         * melanie (main): use it.
4495         * katie (manual_reject): likewise.
4496
4497 2001-04-03  James Troup  <james@nocrew.org>
4498
4499         * katie (action): ignore exceptions from os.path.getmtime() so we
4500         don't crash on non-existent changes files (e.g. when they are
4501         moved between the start of the install run in cron.daily and the
4502         time we get round to processing them).
4503
4504         * madison (main): also list source and accept -s/--suite.
4505
4506         * jenna (generate_src_list): missing \n in error message.
4507
4508         * katie (update_subst): add sane defaults for when changes is
4509         skeletal.
4510
4511 2001-03-29  James Troup  <james@nocrew.org>
4512
4513         * melanie (main): use fubar() and warn() from utils.  Remember who
4514         the maintainer for the removed packages are and display that info
4515         to the user.  Readd support for melanie-specific Bcc-ing that got
4516         lost in the TemplateSubst transition.
4517
4518         * utils.py (fubar): new function.
4519         (warn): like wise.
4520
4521         * db_access.py (get_maintainer): as below.
4522
4523         * charisma (get_maintainer): moved the bulk of this function to
4524         db_access so that melanie can use it too.
4525
4526         * claire.py (find_dislocated_stable): restrict the override join
4527         to those entries where the suite is stable; this avoids problems
4528         with packages which have moved to new sections (e.g. science)
4529         between stable and unstable.
4530
4531 2001-03-24  James Troup  <james@nocrew.org>
4532
4533         * catherine (poolize): new function; not really independent of
4534         main() fully, yet.
4535         (main): use it.
4536
4537         * katie (stable_install): __SUITE__ needs to be space prefixed
4538         because buildd's check for 'INSTALLED$'.
4539
4540 2001-03-22  James Troup  <james@nocrew.org>
4541
4542         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
4543
4544         * jenna: rewritten; now does deletions on a per-suite level
4545         instead of a per-suite-component-architecture-type level.  This
4546         allows mutli-component packages to be auto-cleaned (and as a
4547         bonus, reduces the code size and duplication).
4548
4549 2001-03-22  Anthony Towns  <ajt@debian.org>
4550
4551         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
4552         instead of just giving a gpg error.
4553
4554 2001-03-21  James Troup  <james@nocrew.org>
4555
4556         * madison (main): use apt_pkg.VersionCompare to sort versions so
4557         that output is correctly sorted for packages like debhlper.
4558         Noticed by ajt@.
4559
4560         * tea (check_source_in_one_dir): actually find problematic source
4561         packages.
4562
4563         * katie (check_dsc): remember the orig.tar.gz's location ID if
4564         it's not in a legacy suite.
4565         (check_diff): we don't use orig_tar_id.
4566         (install): add code to handle sourceful diff-only upload of
4567         packages which change components by copying the .orig.tar.gz into
4568         the new component, if it doesn't already exist there.
4569         (process_it): reset orig_tar_location (as above).
4570
4571         * melanie (main): use template substiution for the bug closing
4572         emails.
4573         (main): don't hardcode bugs.debian.org or packages.debian.org
4574         either; use configuration items.
4575
4576         * katie: likewise.
4577
4578         * natalie.py (init): use None rather than 'localhost' for the
4579         hostname given to pg.connect.
4580
4581         * utils.py (TemplateSubst): new function; lifted from
4582         userdir-ldap.
4583
4584 2001-03-21  Ryan Murray  <rmurray@debian.org>
4585
4586         * katie (announce): fix the case of non-existent
4587         Suite::$SUITE::Announce.
4588
4589 2001-03-20  Ryan Murray  <rmurray@debian.org>
4590
4591         * debian/rules (binary-indep): install melanie into /usr/bin/ not
4592         /usr/.
4593
4594         * alyson (main): use config variable for database name.
4595         * andrea (main): likewise.
4596         * catherine (main): likewise.
4597         * charisma (main): likewise.
4598         * cindy (main): likewise.
4599         * claire.py (main): likewise.
4600         * denise (main): likewise.
4601         * heidi (main): likewise.
4602         * jenna (main): likewise.
4603         * katie (main): likewise.
4604         * madison (main): likewise.
4605         * melanie (main): likewise.
4606         * neve (main): likewise.
4607         * rhona (main): likewise.
4608         * tea (main): likewise.
4609
4610 2001-03-15  James Troup  <james@nocrew.org>
4611
4612         * rhona (check_sources): fixed evil off by one (letter) error
4613         which was causing only .dsc files to be deleted when cleaning
4614         source packages.
4615
4616         * charisma (get_maintainer_from_source): remove really stupid and
4617         gratuitous IN sub-query and replace with normal inner join.
4618         (main): connect as read-only user nobody.
4619
4620         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4621         with EXISTS.
4622         (check_files): likewise; still disabled by default though.
4623         (clean_binaries): add ' seconds' to the mysterious number in the
4624         output.
4625         (clean): likewise.
4626
4627         * tea (check_files): add missing global declaration on db_files.
4628
4629 2001-03-14  James Troup  <james@nocrew.org>
4630
4631         * rhona: rewritten large chunks. Removed a lot of the silly
4632         selecting into dictionaries and replaced it with 'where exists'
4633         based sub queries.  Added support for StayOfExecution.  Fix the
4634         problem with deleting dsc_files too early and disable cleaning of
4635         unattached files.
4636
4637 2001-03-14  Anthony Towns  <ajt@debian.org>
4638
4639         * katie (announce): also check Changed-By when trying to detect
4640         NMUs.
4641
4642 2001-03-06  Anthony Towns  <ajt@debian.org>
4643
4644         * ziyi (main): Generate Release.gpg files as well, using the key from
4645         Dinstall::SigningKey in katie.conf, if present. That key has to be
4646         passwordless, and hence kept fairly secretly.
4647
4648 2001-03-02  James Troup  <james@nocrew.org>
4649
4650         * utils.py (str_isnum): new function; checks to see if the string
4651         is a number.
4652
4653         * shania (main): fix _hideous_ bug which was causing all files > 2
4654         weeks old to be deleted from incoming, even if they were part of a
4655         valid upload.
4656
4657 2001-02-27  James Troup  <james@nocrew.org>
4658
4659         * melanie (main): accept new argument -C/--carbon-copy which
4660         allows arbitarty carbon-copying of the bug closure messages.
4661         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4662         separate variable.
4663
4664 2001-02-27  Anthony Towns  <ajt@debian.org>
4665
4666         * ziyi: new program; generates Release files.
4667
4668 2001-02-25  James Troup  <james@nocrew.org>
4669
4670         * katie (reject): add missing '\n' to error message.
4671         (manual_reject): likewise.
4672         (install): catch exceptions from moving the changes file into DONE
4673         and ignore them.
4674
4675         * tea (check_md5sums): new function.
4676
4677 2001-02-25  Michael Beattie  <mjb@debian.org>
4678
4679         * melanie: use $EDITOR if available.
4680
4681 2001-02-15  James Troup  <james@nocrew.org>
4682
4683         * utils.py (parse_changes): don't crash and burn on empty .changes
4684         files.  Symptoms noticed by mjb@.
4685
4686 2001-02-15  Adam Heath  <doogie@debian.org>
4687
4688         * denise (main): use an absolute path for the output filename.
4689
4690         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4691         compile errors with postgresql-dev >= 7.0.
4692
4693 2001-02-12  James Troup  <james@nocrew.org>
4694
4695         * rene: initial version.
4696
4697         * andrea: initial version.
4698
4699         * catherine (main): remove obsolete assignment of arguments.
4700
4701 2001-02-09  James Troup  <james@nocrew.org>
4702
4703         * catherine: first working version.
4704
4705 2001-02-06  James Troup  <james@nocrew.org>
4706
4707         * katie (check_files): validate the priority field; i.e. ensure it
4708         doesn't contain a '/' (to catch people prepending the priority
4709         with the component rather than the section).
4710         (check_override): don't warn about source packages; the only check
4711         is on section and we have no GUI tools that would use the Section
4712         field for a Sources file.
4713         (announce): use tags rather than severities for NMUs.  Requested
4714         by Josip Rodin <joy@>. [#78035]
4715
4716 2001-02-04  James Troup  <james@nocrew.org>
4717
4718         * tea (check_override): new function; ensures packages in suites
4719         are also in the override file.  Thanks to bod@ for noticing that
4720         such packages existed.
4721
4722         * katie: move file type compiled regular expressions to utils as
4723         catherine uses them too.
4724         (check_changes): always default maintainer822 to the installer
4725         address so that any bail out won't cause undefs later.
4726         (check_files): update file type re's to match above.
4727         (stable_install): likewise.
4728         (reject): handle any except from moving the changes files.  Fixes
4729         crashes on unreadable changes files.
4730
4731         * melanie (main): add an explanation of why things are not removed
4732         from testing.
4733
4734 2001-01-31  James Troup  <james@nocrew.org>
4735
4736         * melanie (main): ignore a) no message, b) removing from stable or
4737         testing when invoked with -n/--no-action.
4738
4739         * katie (check_override): lower section before checking to see if
4740         we're whining about 'non-US' versus 'non-US/main'.
4741
4742         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4743         function so that we can use inside of PostgreSQL.
4744
4745 2001-01-28  James Troup  <james@nocrew.org>
4746
4747         * katie: updated to pass new flag to parse_changes() and deal with
4748         the exception raised on invalid .dsc's if appropriate.
4749         * shania (main): likewise.
4750         * melanie (main): likewise.
4751
4752         * tea (check_dscs): new function to validate all .dsc files in
4753         unstable.
4754
4755         * utils.py (parse_changes): if passed an additional flag, validate
4756         the .dsc file to ensure it's extractable by dpkg-source.
4757         Requested by Ben Collins <bcollins@>.
4758
4759 2001-01-27  James Troup  <james@nocrew.org>
4760
4761         * madison (main): connect to the DB as nobody.
4762
4763         * katie (check_files): remove support for -r/--no-version-check
4764         since it makes no sense under katie (jenna will automatically
4765         remove the (new) older version) and was evil in any event.
4766         (check_changes): add missing new line to rejection message.
4767         (check_dsc): likewise.
4768         (process_it): reset reject_message here.
4769         (main): not here.  Also remove support for -r.
4770
4771 2001-01-26  James Troup  <james@nocrew.org>
4772
4773         * katie (check_override): don't whine about 'non-US/main' versus
4774         'non-US'.
4775
4776 2001-01-26  Michael Beattie  <mjb@debian.org>
4777
4778         * natalie.py (usage): new function.
4779         (main): use it.
4780
4781 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4782
4783         * update-mirrorlists: Update README.non-US too (request from Joy).
4784
4785 2001-01-25  James Troup  <james@nocrew.org>
4786
4787         * katie (reject): catch any exception from utils.move() and just
4788         pass, we previously only caught can't-overwrite errors and not
4789         can't-read ones.
4790
4791         * jenna (generate_src_list): use ORDER BY in selects to avoid
4792         unnecessary changes to Packages files.
4793         (generate_bin_list): likewise.
4794
4795         * utils.py (extract_component_from_section): separated out from
4796         build_file_list() as it's now used by claire too.
4797
4798         * claire.py (find_dislocated_stable): rewrite the query to extract
4799         section information and handle component-less locations properly.
4800         Thanks to ajt@ for the improved queries.
4801         (fix_component_section): new function to fix components and
4802         sections.
4803
4804 2001-01-23  James Troup  <james@nocrew.org>
4805
4806         * katie (check_files): set file type for (u?)debs first thing, so
4807         that if we continue, other functions which rely on file type
4808         existing don't bomb out.  If apt_pkg or apt_inst raise an
4809         exception when parsing the control file, don't try any other
4810         checks, just drop out.
4811         (check_changes): new test to ensure there is actually a target
4812         distribution.
4813
4814 2001-01-22  James Troup  <james@nocrew.org>
4815
4816         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4817         <grin@>.
4818         (check_changes): when mapping to unstable, remember to actually
4819         add unstable to the suite list and not just remove the invalid
4820         suite.
4821
4822 2001-01-21  James Troup  <james@nocrew.org>
4823
4824         * katie (check_files): catch exceptions from debExtractControl()
4825         and reject packages which raise any.
4826
4827 2001-01-19  James Troup  <james@nocrew.org>
4828
4829         * katie (check_signature): basename() file name in rejection
4830         message.
4831
4832 2001-01-18  James Troup  <james@nocrew.org>
4833
4834         * katie (in_override_p): remember the section and priority from
4835         the override file so we can check them against the package later.
4836         (check_override): new function; checks section and priority (for
4837         binaries) from the package against the override file and mails the
4838         maintainer about any disparities.
4839         (install): call check_override after announcing the upload.
4840
4841 2001-01-16  James Troup  <james@nocrew.org>
4842
4843         * utils.py (build_file_list): catch ValueError's from splitting up
4844         the files field and translate it into a parse error.
4845
4846         * tea: add support for finding unreferenced files.
4847
4848         * katie (in_override_p): add support for suite-aliasing so that
4849         proposed-updates uploads work again.
4850         (check_changes): catch parses errors from utils.build_file_list().
4851         (check_dsc): likewise.
4852         (check_diff): yet more dpkg breakage so we require even newer a
4853         version.
4854
4855         * jenna (generate_bin_list): don't do nasty path munging that's no
4856         longer needed.
4857
4858         * denise (main): support for non-US; and rename testing's override
4859         files so they're based on testing's codename.
4860
4861 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4862
4863         * melanie: add to the bug closing message explaining what happens
4864         (or rather doesn't) with bugs against packages that have been
4865         removed.
4866
4867 2001-01-14  James Troup  <james@nocrew.org>
4868
4869         * charisma (main): fix silly off-by-one error; suite priority
4870         checking was done using "less than" rather than "less than or
4871         equal to" which was causing weird hesienbugs with wrong Maintainer
4872         fields.
4873
4874 2001-01-10  James Troup  <james@nocrew.org>
4875
4876         * katie (in_override_p): adapted to use SQL-based overrides.
4877         read_override_file function disappears.
4878
4879         * db_access.py: add new functions get_section_id, get_priority_id
4880         and get_override_type_id.
4881         (get_architecture_id): return -1 if the architecture is not found.
4882
4883         * heidi: switch %d -> %d in all SQL queries.
4884         (get_list): Use string.join where appropriate.
4885
4886         * rhona (in_override_p): don't die if the override file doesn't
4887         exist.
4888         (main): warn if the override file doesn't exist.
4889
4890         * alyson: new script; will eventually sync the config file and the
4891         SQL database.
4892
4893         * natalie.py: new script; manipulates overrides.
4894
4895         * melanie: new script; removes packages from suites.
4896
4897 2001-01-08  James Troup  <james@nocrew.org>
4898
4899         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4900         anything it just changed the symptom.  Recognise the new breakage
4901         and reject them too.
4902
4903 2001-01-07  James Troup  <james@nocrew.org>
4904
4905         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4906         to the .changes file, be sure to set up files[filename]["type"]
4907         too.
4908
4909 2001-01-06  James Troup  <james@nocrew.org>
4910
4911         * katie (check_diff): new function; detects bad diff files
4912         produced by dpkg 1.8.1 and rejects thems.
4913         (process_it): call check_diff().
4914         (check_dsc): gar.  Add support for multiple versions of the
4915         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4916         and size against all versions and use one which matches if
4917         possible and exclude any that don't from being poolized to avoid
4918         file overwrites.  Thanks to broonie@ for providing the example.
4919         (install): skip any files marked as excluded as above.
4920
4921 2001-01-05  James Troup  <james@nocrew.org>
4922
4923         * heidi (process_file): add missing argument to error message.
4924
4925 2001-01-04  James Troup  <james@nocrew.org>
4926
4927         * heidi (main): fix handling of multiple files by reading all
4928         files not just the first file n times (where n = the number of
4929         files passed as arguments).
4930
4931 2001-01-04  Anthony Towns  <ajt@debian.org>
4932
4933         * katie (check_dsc): proper fix for the code which locates the
4934         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4935
4936 2000-12-20  James Troup  <james@nocrew.org>
4937
4938         * rhona: replace IN's with EXISTS's to make DELETE time for
4939         binaries and source sane on auric.  Add a -n/--no-action flag and
4940         make it stop actions if used.  Fixed a bug in binaries deletion
4941         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4942         -V/--version.  Giving timing info on deletion till I'm sure it's
4943         sane.
4944
4945         * katie (check_changes): map testing to unstable.
4946
4947         * madison: new script; shows versions in different architectures.
4948
4949         * katie (check_dsc): ensure size matches as well as md5sum;
4950         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4951         #69702.
4952
4953 2000-12-19  James Troup  <james@nocrew.org>
4954
4955         * katie (reject): ignore the "can't overwrite file" exception from
4956         utils.move() and leave the files where they are.
4957         (reject): doh! os.access() test was reversed so we only tried to
4958         move files which didn't exist... replaced with os.path.exists()
4959         test the right way round.
4960
4961         * utils.py (move): raise an exception if we can't overwrite the
4962         destination file.
4963         (copy): likewise.
4964
4965 2000-12-18  James Troup  <james@nocrew.org>
4966
4967         * rhona: first working version.
4968
4969         * db_access.py (get_files_id): force both sizes to be integers.
4970
4971         * katie (main): use size_type().
4972
4973         * utils.py (size_type): new function; pretty prints a file size.
4974
4975 2000-12-17  James Troup  <james@nocrew.org>
4976
4977         * charisma (main): do version compares so that older packages do
4978         not override newer ones and process source first as source wins
4979         over binaries in terms of who we think of as the Maintainer.
4980
4981 2000-12-15  James Troup  <james@nocrew.org>
4982
4983         * katie (install): use the files id for the .orig.tar.gz from
4984         check_dsc().
4985         (install): limit select for legacy source to a) source in legacy
4986         or legacy-mixed type locations and b) distinct on files.id.
4987         (install): rather than the bizarre insert new, delete old method
4988         for moving legacy source into the pool, use a simple update of
4989         files.
4990         (process_it): initalize some globals before each process.
4991
4992 2000-12-14  James Troup  <james@nocrew.org>
4993
4994         * katie (in_override_p): index on binary_type too since .udeb
4995         overrides are in a different file.
4996         (read_override_file): likewise.
4997         (check_files): correct filename passed to get_files_id().
4998         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4999         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
5000         (check_dsc): remember the files id of the .orig.tar.gz, not the
5001         location id.
5002
5003 2000-12-13  James Troup  <james@nocrew.org>
5004
5005         * utils.py (poolify): force the component to lower case except for
5006         non-US.
5007
5008         * katie (in_override_p): handle .udeb-specific override files.
5009         (check_files): pass the binary type to in_override_p().
5010         (check_dsc): remember the location id of the old .orig.tar.gz in
5011         case it's not in the pool.
5012         (install): use location id from dsc_files; which is where
5013         check_dsc() puts it for old .orig.tar.gz files.
5014         (install): install files after all DB work is complete.
5015         (reject): basename() the changes filename.
5016         (manual_reject): likewise.
5017
5018         * shania: new progam; replaces incomingcleaner.
5019
5020 2000-12-05  James Troup  <james@nocrew.org>
5021
5022         * katie (check_changes): if inside stable and can't find files
5023         from the .changes; assume it's installed in the pool and chdir()
5024         to there.
5025         (check_files): we are not installing for stable installs, so don't
5026         check for overwriting existing files.
5027         (check_dsc): likewise.
5028         (check_dsc): reorder .orig.tar.gz handling so that we search in
5029         the pool first and only then fall back on any .orig.tar.gz in the
5030         cwd; this avoids false positives on the overwrite check when
5031         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
5032         (install): if this is a stable install, bail out to
5033         stable_install() immediately.
5034         (install): dsc_files handling was horribly broken. a) we need to
5035         add files from the .dsc and not the .changes (duh), b) we need to
5036         add the .dsc file itself to dsc_files (to be consistent with neve
5037         if for no other reason).
5038         (stable_install): new function; handles installs from inside
5039         proposed-updates to stable.
5040         (acknowledge_new): basename changes_filename before doing
5041         anything.
5042         (process_it): absolutize the changes filename to avoid the
5043         requirement of being in the same directory as the .changes file.
5044         (process_it): save and restore the cwd as stable installs can
5045         potentially jump into the pool to find files.
5046
5047         * jenna: dislocated_files support using claire.
5048
5049         * heidi (process_file): select package field from binaries
5050         explicitly.
5051
5052         * db_access.py (get_files_id): fix cache key used.
5053
5054         * utils.py (build_file_list): fix 'non-US/non-free' case in
5055         section/component splitting.
5056         (move): use os.path.isdir() rather than stat.
5057         (copy): likewise.
5058
5059         * claire.py: new file; stable in non-stable munger.
5060
5061         * tea: new file; simply ensures all files in the DB exist.
5062
5063 2000-12-01  James Troup  <james@nocrew.org>
5064
5065         * katie (check_dsc): use regex_safe().
5066         (check_changes): typo in changes{} key:
5067         s/distributions/distribution/.
5068         (install): use changes["source"], not files[file]["source"] as the
5069         latter may not exist and the former is used elsewhere.  Commit the
5070         SQL transaction earlier.
5071
5072         * utils.py (regex_safe): new function; escapes characters which
5073         have meaning to SQL's regex comparison operator ('~').
5074
5075 2000-11-30  James Troup  <james@nocrew.org>
5076
5077         * katie (install): pool_location is based on source package name,
5078         not binary package.
5079
5080         * utils.py (move): if dest is a directory, append the filename
5081         before chmod-ing.
5082         (copy): ditto.
5083
5084         * katie (check_files): don't allow overwriting of existing .debs.
5085         (check_dsc): don't allow overwriting of existing source files.
5086
5087 2000-11-27  James Troup  <james@nocrew.org>
5088
5089         * katie (check_signature): don't try to load rsaref; it's
5090         obsolete.
5091         (in_override_p): don't try to lookup override entries for packages
5092         with an invalid suite name.
5093         (announce): don't assume the suite name is valid; use Find() to
5094         lookup the mailing list name for announcements.
5095
5096         * utils.py (where_am_i): typo; hostname is in the first element,
5097         not second.
5098
5099         * db_access.py (get_suite_id): return -1 on an unknown suite.
5100
5101 2000-11-26  James Troup  <james@nocrew.org>
5102
5103         * katie (install): fix CopyChanges handling; typo in in checking
5104         Cnf for CopyChanges flag and was calling non-existent function
5105         copy_file.
5106
5107         * utils.py (copy): new function; clone of move without the
5108         unlink().
5109
5110 2000-11-25  James Troup  <james@nocrew.org>
5111
5112         * utils.py (build_file_list): handle non-US prefixes properly
5113         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
5114         + 'libs' not 'non-US/libs').
5115         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
5116         delays.  This is possibly(/probably) exim speicifc and (like other
5117         sendmail options) needs to be in the config file.
5118
5119 2000-11-24  James Troup  <james@nocrew.org>
5120
5121         * rhona (check_sources): we need file id from dsc_files; not id.
5122         Handle non .dsc source files being re-referenced in dsc_files.
5123
5124         * katie (in_override_p): strip out any 'non-US' prefix.
5125         (check_files): use utils.where_am_i() rather than hardcoding.
5126         (check_files): validate the component.
5127         (install): use utils.where_am_i() rather than hardcoding.
5128         (install): fix mail to go to actual recepient.
5129         (reject): likewise.
5130         (manual_reject): likewise.
5131         (acknowledge_new): likewise.
5132         (announce): likewise.
5133
5134         * db_access.py (get_component_id): ignore case when searching for
5135         the component and don't crash if the component can't be found, but
5136         return -1.
5137         (get_location_id): handle -1 from get_component_id().
5138
5139         * jenna (generate_src_list): don't bring 'suite' into our big
5140         multi-table-joining select as we already know the 'suite_id'.
5141         (generate_bin_list): likewise.
5142
5143         * neve (main): don't quit if not on ftp-master.
5144         (process_packages): remove unused variable 'suite_codename'.
5145
5146         * utils.py (move): actually move the file.
5147         (build_file_list): handle non-US prefixes in the section.
5148
5149         * catherine (main): use which_conf_file().
5150         * charisma (main): likewise.
5151         * heidi (main): likewise.
5152         * jenna (main): likewise.
5153         * katie (main): likewise.
5154         * neve (main): likewise.
5155         * rhona (main): likewise.
5156
5157         * utils.py (where_am_i): new routine; determines the archive as
5158         understood by other 'dak' programs.
5159         (which_conf_file): new routine; determines the conf file to read.
5160
5161 2000-11-17  James Troup  <james@nocrew.org>
5162
5163         * katie (install): fix where .changes files for proposed-updates
5164         go.
5165
5166 2000-11-04  James Troup  <james@nocrew.org>
5167
5168         * jenna (main): handle architecture properly if no
5169         -a/--architecture argument is given, i.e. reset architecture with
5170         the values for the suite for each suite.
5171
5172         * Add apt_pkg.init() to the start of all scripts as it's now
5173         required by python-apt.
5174
5175 2000-10-29  James Troup  <james@nocrew.org>
5176
5177         * jenna (generate_bin_list): take an additional argument 'type'
5178         and use it in the SELECT.
5179         (main): if processing component 'main', process udebs and debs.
5180
5181         * neve (process_packages): set up 'type' in 'binaries' (by
5182         assuming .deb).
5183
5184         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
5185         (check_files): set up files[file]["dbtype"].
5186         (install): use files[file]["dbtype"] to set up the 'type' field in
5187         the 'binaries' table.
5188
5189         * init_pool.sql: add a 'type' field to the 'binaries' table to
5190         distinguisgh between ".udeb" and ".deb" files.
5191
5192         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
5193         dest ? dirname(dest)" type check instead.
5194
5195         * katie (check_dsc): handle the case of an .orig.tar.gz not found
5196         in the pool without crashing.  Also handle the case of being asked
5197         to look for something other than an .orig.tar.gz in the pool.
5198
5199 2000-10-26  James Troup  <james@nocrew.org>
5200
5201         * katie (install): fix filenames put into files table during
5202         poolification of legacy source.
5203
5204         * utils.py (move): work around a bug in os.path.basename() which
5205         cunningly returns '' if there is a trailing slash on the path
5206         passed to it.
5207
5208         * katie (check_dsc): Remove more cruft.  If we find the
5209         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
5210         location, make a note of that so we can fix things in install().
5211         (install): as above.  Move any old source out of legacy locations
5212         so that 'apt-get source' will work.
5213         (process_it): reset the flag that indicates to install that the
5214         source needs moved.
5215
5216         * cron.daily: more.  Nowhere near complete yet though.
5217
5218         * katie (install): don't run os.makedirs, a) utils.move() does
5219         this now, b) we weren't removing the user's umask and were
5220         creating dirs with SNAFU permissions.
5221         (check_dsc): rewrite the .orig.tar.gz handling to take into
5222         account, err, package pools.  i.e. look anywhere in the pool
5223         rather than faffing around with two simple paths.
5224
5225         * neve (process_sources): add the .dsc to dsc_files too.
5226
5227 2000-10-25  James Troup  <james@nocrew.org>
5228
5229         * neve (process_sources): don't duplicate .orig.tar.gz's.
5230
5231 2000-10-23  James Troup  <james@nocrew.org>
5232
5233         * utils.py (re_extract_src_version): moved here.
5234
5235         * neve: move re_extract_src_version to utils.
5236         (process_packages): reflect change.
5237
5238         * katie (install): reflect change.
5239
5240 2000-10-19  James Troup  <james@nocrew.org>
5241
5242         * jenna (generate_src_list): handle locations with null
5243         components.
5244         (generate_bin_list): likewise.
5245