]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Merge from mhy
[dak.git] / ChangeLog
1 2008-05-05  Mark Hymers  <mhy@debian.org>
2
3         * daklib/dak_exceptions.py: Add a default message and tidy up our string
4         representation
5
6 2008-05-05  Joerg Jaspert  <joerg@debian.org>
7
8         * daklib/dak_exceptions.py: New file, central place for all those
9         own exceptions dak may raise.
10
11         * daklib/utils.py: Use dak_exceptions and delete all those string
12         exception raising stuff, which is depcreated.
13         During that delete the unknown_hostname_exc, as it wasnt used.
14
15         * dak/import_archive.py: use the new Exception class
16         * dak/rm.py: dito
17         * dak/generate_releases.py: dito
18         * dak/queue_report.py: dito
19         * daklib/queue.py: dito
20
21 2008-05-04  Joerg Jaspert  <joerg@debian.org>
22
23         * daklib/queue.py: Various pychecker cleanups
24
25         * dak/import_keyring.py: Remove unused daklib.logging and Logger
26         and add the actually used daklib/utils
27
28         * dak/examine_package.py: remove daklib.queue import, never used
29
30         * dak/check_proposed_updates.py: Import stuff from daklib as
31         "import daklib.foo as foo"
32         * dak/clean_proposed_updates.py: likewise
33         * dak/clean_queues.py: likewise
34         * dak/clean_suites.py: likewise
35         * dak/compare_suites.py: likewise
36         * dak/cruft_report.py: likewise
37         (get_suite_binaries): Seperated in own function, out of main. More
38         of main should be splitted. (Or well, cruft_report redesigned a
39         little, so its easier to run on multiple suites with differing tests)
40
41         * dak/examine_package.py: likewise
42         * dak/find_null_maintainers.py: likewise
43         * dak/generate_index_diffs.py: likewise
44         * dak/generate_releases.py: likewise
45         * dak/import_archive.py: likewise
46         * dak/import_ldap_fingerprints.py: likewise
47         * dak/import_users_from_passwd.py: likewise
48         * dak/init_db.py: likewise
49         * dak/init_dirs.py: likewise
50         * dak/ls.py: likewise
51         * dak/make_maintainers.py: likewise
52         * dak/make_overrides.py: likewise
53         * dak/make_suite_file_list.py: likewise
54         * dak/new_security_install.py: likewise
55         * dak/override.py: likewise
56         * dak/process_accepted.py: likewise
57         * dak/process_new.py: likewise
58         * dak/process_unchecked.py: likewise
59         * dak/rm.py: likewise
60         * dak/show_new.py: likewise
61         * dak/split_done.py: likewise
62         * dak/stats.py: likewise
63         * dak/transitions.py: likewise
64
65         * dak/check_archive.py (check_files_not_symlinks): Remove
66         long-time unused and commented code. Import stuff from daklib as
67         "import daklib.foo as foo"
68
69 2008-05-04  Thomas Viehmann  <tv@beamnet.de>
70
71         * dak/process_unchecked.py (check_signed_by_key): cater for uid_email
72         None in sponsor notification
73
74 2008-05-03  Joerg Jaspert  <joerg@debian.org>
75
76         * dak/examine_package.py: clean up pychecker warnings (merged with
77         Thomas changes to the NEW display)
78
79 2008-05-03  Mark Hymers <mhy@debian.org>
80
81         * dak/check_archive.py: clean up pychecker warnings
82         * dak/check_overrides.py: likewise
83         * dak/check_proposed_updates.py: likewise
84         * dak/clean_proposed_updates.py: likewise
85         * dak/clean_queues.py: likewise
86         * dak/control_overrides.py: likewise
87         * dak/control_suite.py: likewise
88         * dak/decode_dot_dak.py: likewise
89         * dak/examine_package.py: likewise
90         * dak/process_new.py: likewise
91         * dak/process_unchecked.py: likewise
92         * dak/queue_report.py: likewise
93         * dak/reject_proposed_updates.py: likewise
94         * dak/security_install.py: likewise
95         * dak/show_new.py: likewise
96         * dak/stats.py: likewise
97         * dak/symlink_dists.py: likewise
98         * dak/transitions.py: likewise
99
100 2008-05-03  Joerg Jaspert  <joerg@debian.org>
101
102         * config/debian/cron.daily: Rename to
103         * config/debian/cron.dinstall: this, as its not really something run
104         daily for some time now. And while dinstall is an OLD name, its
105         recognized pretty well within Debian
106         Also add some more timing information
107         Do not allow automated [o-]p-u-new processing to break dinstall
108
109 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
110
111         * web/,web/style.css: add web dir and current style.css
112
113         * dak/examine_package.py, dak/show_new.py: improve NEW html pages,
114         based on mock-up by M. Ferrari.
115         remove Checksums-* from examine-package output
116
117 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
118
119         * dak/process_unchecked.py (check_hashes): Reject on error while
120         parsing Checksums-*.
121
122 2008-05-02  Joerg Jaspert  <joerg@debian.org>
123
124         * config/debian/pseudo-packages*: Removed listarchives, closes #468667
125         added wiki.debian.org (currently pointing to debian-www), closes #194206
126         added security-tracker, closes #436152
127         added release.debian.org, closes #451005
128
129         * config/debian/cron.buildd: Cleanup unreachable code. (If someone
130         still wants it - its in revision control...)
131
132         * config/debian/cron.daily: Modify call to update-ftpstats to only
133         use files log/2*, instead of log/*, so it ignores the new cron/
134         subdir. Makes sure it can't get confused, and is also safe for
135         nearly thousand years. If this code is really in use in year 3000,
136         im sure people can adjust it! :)
137
138         * config/debian/vars: Add logdir as a place for cronjob log output
139
140         * config/debian/cron.daily: Use a logfile and be more verbose of
141         whats going on.
142           Also moved the commented VACUUM ; VACUUM ANALYZE calls over to
143         cron.weekly, ...
144         * config/debian/cron.weekly: likewise,
145           ... and activate those calls again. Once a week, as an
146         additional safety bet to be sure the stuff does get run is ok,
147         even if we have autovacuum by default.
148
149 2008-05-02  Thomas Viehmann  <tv@beamnet.de>
150
151         * dak/process_unchecked.py (check_hashes): fix typo in
152           checksum reject message.
153
154 2008-05-02  Joerg Jaspert  <joerg@debian.org>
155
156         * config/debian/extensions.py: used reindent.py from the python
157         2.x source examples to get all dak code use the same indentation
158         style, no longer a mix of 4 spaces / 1 tab.
159         * dak/check_archive.py: likewise
160         * dak/check_overrides.py: likewise
161         * dak/check_proposed_updates.py: likewise
162         * dak/clean_proposed_updates.py: likewise
163         * dak/clean_queues.py: likewise
164         * dak/clean_suites.py: likewise
165         * dak/compare_suites.py: likewise
166         * dak/control_overrides.py: likewise
167         * dak/control_suite.py: likewise
168         * dak/cruft_report.py: likewise
169         * dak/dak.py: likewise
170         * dak/decode_dot_dak.py: likewise
171         * dak/examine_package.py: likewise
172         * dak/find_null_maintainers.py: likewise
173         * dak/generate_index_diffs.py: likewise
174         * dak/generate_releases.py: likewise
175         * dak/import_archive.py: likewise
176         * dak/import_keyring.py: likewise
177         * dak/import_ldap_fingerprints.py: likewise
178         * dak/import_users_from_passwd.py: likewise
179         * dak/init_db.py: likewise
180         * dak/init_dirs.py: likewise
181         * dak/ls.py: likewise
182         * dak/make_maintainers.py: likewise
183         * dak/make_overrides.py: likewise
184         * dak/make_suite_file_list.py: likewise
185         * dak/mirror_split.py: likewise
186         * dak/new_security_install.py: likewise
187         * dak/override.py: likewise
188         * dak/poolize.py: likewise
189         * dak/process_accepted.py: likewise
190         * dak/process_new.py: likewise
191         * dak/process_unchecked.py: likewise
192         * dak/queue_report.py: likewise
193         * dak/reject_proposed_updates.py: likewise
194         * dak/rm.py: likewise
195         * dak/security_install.py: likewise
196         * dak/show_new.py: likewise
197         * dak/split_done.py: likewise
198         * dak/stats.py: likewise
199         * dak/symlink_dists.py: likewise
200         * dak/test/001/test.py: likewise
201         * dak/test/002/test.py: likewise
202         * dak/transitions.py: likewise
203         * daklib/extensions.py: likewise
204         * daklib/logging.py: likewise
205         * daklib/queue.py: likewise
206         * daklib/utils.py: likewise
207         * scripts/debian/insert_missing_changedby.py: likewise
208
209         * dak/process_new.py (recheck): Make the path check more robust,
210         so we no longer have to keep process_new seperate trees between
211         security and normal archive.
212
213 2008-04-27  Joerg Jaspert  <joerg@debian.org>
214
215         * dak/process_accepted.py (Urgency_Log.__init__): Warn if the
216         configured path does not exist or is not writeable by us. Use a
217         tmp path if so, so we do not lose the urgencies in such cases.
218
219         * config/debian/dak.conf: Changed path for UrgencyLog
220         Same for the ReleaseTransitions file
221
222         * config/debian/cron.daily: Notify qa user on merkel of dinstall
223         start, Remove the britney call
224
225 2008-04-26  Joerg Jaspert  <joerg@debian.org>
226
227         * dak/process_new.py: Call end() whenever we try to leave by
228         pressing Q
229
230         * config/debian/cron.daily: Also report NBS in experimental
231
232 2008-04-25  Joerg Jaspert  <joerg@debian.org>
233
234         * dak/cruft_report.py (main): Make it possible to look at
235         experimental too, especially NBS
236
237         * dak/split_done.py (main): Only move files into their subdirs if
238         they are older than 30 days. That enables us to run this script as
239         part of a cronjob.
240
241         * config/debian/cron.weekly: Run dak split-done
242
243 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
244
245         * dak/process_unchecked.py: add changes["sponsoremail"]
246           for sponsored uploads if desired
247         * daklib/queue.py: add changes["sponsoremail"] to
248           Subst["__MAINTAINER_TO__"] if present
249         * daklib/utils.py: add functions
250           is_email_alias to check which accounts allow email forwarding,
251           which_alias_file to find the alias file, and
252           gpg_get_key_addresses to find uid addresses for a given
253             fingerprint
254
255 2008-04-22  Joerg Jaspert  <joerg@debian.org>
256
257         * setup/init_pool.sql: added a function/aggregate for the release
258         team to base some script on it.
259
260         * config/debian/cron.daily: push katie@merkel to immediately start
261         the sync of projectb there.
262
263 2008-04-21  Joerg Jaspert  <joerg@debian.org>
264
265         * scripts/debian/expire_dumps: New script, expires old database
266         dumps, using a scheme to keep more of the recent dumps.
267
268         * config/debian/cron.daily: Use the new script. Also - compress
269         all files older than 7 days, instead of 30.
270
271         * dak/process_accepted.py (install): Do not break if a
272         source/maintainer combination is already in src_uploaders, "just"
273         warn us.
274
275 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
276
277         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
278         Format lines (ie. those having extra text appended).
279
280 2008-04-19  Joerg Jaspert  <joerg@debian.org>
281
282         * dak/process_unchecked.py (check_files): Sanity check the
283         provides field, which closes #472783
284
285 2008-04-18  Joerg Jaspert  <joerg@debian.org>
286
287         * config/debian/dak.conf: Add mapping stable-proposed-updates
288           -> proposed-updates.
289
290         * dak/transitions.py (load_transitions): Additionally check for
291         invalid package list indentation
292
293 2008-04-17  Joerg Jaspert  <joerg@debian.org>
294
295         * config/debian/dak.conf: Add TempPath statement for the Release
296         Transitions script
297
298         * dak/transitions.py (temp_transitions_file): Use the TempPath
299         (write_transitions_from_file): Check if the file we should get our
300         transitions from is in our TempPath, error out if it isnt
301         (main): Check for TempPath existance
302
303 2008-04-12  James Troup  <troup@debian.org>
304
305         * dak/clean_proposed_updates.py: add support for -s/--suite and
306         -n/--no-action.
307
308 2008-04-11  Anthony Towns  <ajt@debian.org>
309
310         * dak/utils.py: build_file_list() extra parameters so it can
311         build a file list for checksums-foo fields. Don't use float() to
312         compare formats, because Format: 1.10 should compare greater than
313         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
314
315         * dak/process_unchecked.py: check_md5sum becomes check_hashes
316         and check_hash. If changes format is 1.8 or later, also check
317         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
318         and reject on presence/absence of un/expected checksums-* fields.
319
320 2008-04-07  Joerg Jaspert  <joerg@debian.org>
321
322         * daklib/utils.py (build_file_list): Check for dpkg .changes
323         adjusted to reject newer (and right now broken) 1.8 version, until
324         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
325
326 2008-03-22  Joerg Jaspert  <joerg@debian.org>
327
328         * dak/transitions.py (load_transitions): Check if all our keys are
329         defined, if there are only keys defined we want and also the types
330         of the various keys.
331
332 2008-03-22  Anthony Towns  <ajt@debian.org>
333
334         * dak/edit_transitions.py: Add --import option.
335         Add --use-sudo option. Use fcntl locking for writing.
336         Move writing into a function (write_transitions).
337         Reinvoke self using sudo and --import if necessary.
338         Move temporary file creation into a function, use mkstemp.
339         Rename to "dak transitions".
340
341 2008-03-21  Joerg Jaspert  <joerg@debian.org>
342
343         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
344         edited file back in place
345         (check_transitions): Use proper locking and also use sudo to copy
346         the new file in place
347
348 2008-03-21  Anthony Towns <ajt@debian.org>
349
350         * config/debian/extensions.py: Add infrastructure for replacing
351         functions in dak modules; add upload blocking for dpkg.
352
353 2008-03-12  Joerg Jaspert  <joerg@debian.org>
354
355         * dak/edit_transitions.py: Done a number of cleanups to make code
356         working. Also changed the way prompting/answering goes, to not
357         have to import daklib/queue.
358         (edit_transitions): When done with a successful edit - also print
359         a final overview about defined transitions
360
361 2008-03-11  Joerg Jaspert  <joerg@debian.org>
362
363         * dak/process_unchecked.py: Import syck module directly, not "from
364         syck import *"
365         (check_transition): Do the check for sourceful upload in here
366         Also adjust the syck loading commands, rename new_vers to
367         expected, curvers to current, to make it more clear what they mean.
368
369         * daklib/database.py (get_suite_version): Renamed from
370         get_testing_version. Also changed the cache variables name
371
372         * The above changes are based on modifications from Anthony.
373
374         * dak/dak.py (init): Renamed check -> edit transitions
375
376         * dak/edit_transitions.py: Renamed from check_transitions.py
377         (main): Also rename new_vers/curvers to expected/current
378         Basically a nice rewrite, so it now does checks and edit,
379         depending on how you call it. Check also removes old transitions,
380         if user wants it.
381
382 2008-03-02  Joerg Jaspert  <joerg@debian.org>
383
384         * debian/control (Suggests): Add python-syck to Depends:
385
386         * dak/dak.py (init): Tell it about check_transitions
387
388         * dak/check_transitions.py (usage): Added, checks the transitions
389         file (if any)
390
391         * daklib/database.py (get_testing_version): Added. Returns the
392         version for the source in testing, if any
393
394         * dak/process_unchecked.py (check_transition): Added. Checks if a
395         release team member defined a transition, and rejects based on
396         that data.
397         (process_it): Use it.
398         (check_transition): Warn on broken transitions file and return,
399         not doing anything.
400         (check_transition): Moved out of here, into daklib/queue
401         (process_it): Call check_transitions only if
402         changes[architecture] has source included.
403         (check_transition): Now call the database.get_testing_version
404
405 2008-02-09  Christoph Berg <myon@debian.org>
406
407         * daklib/queue.py (get_type): fubar does not exist in global
408         namespace.
409
410         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
411         to source table, and move src_uploaders after source so the REFERNCES
412         clause works.
413         * dak/process_accepted.py (install): Fill the changedby column from
414         the information found in the .changes. This will allow to identify
415         NMUs and sponsored uploads more precisely in tools querying projectb.
416         * scripts/debian/insert_missing_changedby.py: Script to import yet
417         missing fields from filippo's uploads-history DB.
418
419 2008-02-06  Joerg Jaspert  <joerg@debian.org>
420
421         * daklib/utils.py (check_signature): Make variable key available,
422         so we can access it.
423
424 2008-01-07  Joerg Jaspert  <joerg@debian.org>
425
426         * dak/examine_package.py (check_deb): Remove linda call. It
427         provides no added benefit to lintian anymore.
428
429 2008-01-07  Joerg Jaspert  <joerg@debian.org>
430
431         * dak/examine_package.py (check_deb): Remove linda call. It
432         provides no added benefit to lintian anymore.
433
434 2008-01-06  Joerg Jaspert  <joerg@debian.org>
435
436         * dak/examine_package.py (do_lintian): lintian now supports html
437         coloring, so use it.
438         (do_command): Dont escape html chars if param escaped = 1
439
440 2008-01-06  Joerg Jaspert  <joerg@debian.org>
441
442         * dak/examine_package.py (do_lintian): lintian now supports html
443         coloring, so use it.
444         (do_command): Dont escape html chars if param escaped = 1
445
446 2007-12-31  Anthony Towns  <ajt@debian.org>
447
448         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
449         when processing result of check_dsc_against_db so we don't promote
450         warnings to rejections.
451
452 2007-12-31  Anthony Towns  <ajt@debian.org>
453
454         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
455         when processing result of check_dsc_against_db so we don't promote
456         warnings to rejections.
457
458 2007-12-30  Joerg Jaspert  <joerg@debian.org>
459
460         * dak/dak.py (init): add show-new. This is based on a patch
461         submitted by Thomas Viehmann in Bug #408318, but large parts of
462         handling it are rewritten and show-new is done by me.
463
464         * dak/queue_report.py (table_row): Add link to generated html page
465         for NEW package.
466
467         * dak/show_new.py: new file, generates html overview for NEW
468         packages, similar to what we see with examine-package.
469
470         * config/debian/cron.hourly: Add show-new call
471
472         * config/debian/dak.conf: Add HTMLPath for Show-New
473
474         * dak/examine_package.py (print_copyright): ignore stderr when
475         finding copyright file.
476         (main): add html option
477         (html_escape): new function
478         (escape_if_needed): ditto
479         (headline): ditto
480         (colour_output): ditto
481         (print_escaped_text): ditto
482         (print_formatted_text): ditto
483         - use those functions everywhere where we generate output, as they
484         easily know if we want html or not and just DTRT
485         (do_lintian): new function
486         (check_deb): use it
487         (output_deb_info): Use print_escaped_text, not print_formatted_text.
488         Also import daklib.queue, determine_new now lives there
489
490         Also add a variable to see if we want html output. Default is
491         disabled, show_new enables it for its use.
492         Most of html, besides header/footer are in examine_package instead
493         of show_new, as it makes it a whole lot easier to deal with it at
494         the point the info is generated.
495
496
497         * dak/process_new.py (determine_new): Moved out of here.
498         (check_valid): Moved out of here.
499         (get_type): Moved out of here.
500
501         * daklib/queue.py (determine_new): Moved here.
502         (check_valid): Moved here.
503         (get_type): Moved here.
504
505         * dak/init_db.py (do_section): Remove non-US code
506
507         * dak/make_overrides.py (main): ditto
508
509         * dak/process_new.py (determine_new): ditto
510
511         * daklib/queue.py (Upload.in_override_p),
512         (Upload.check_override): ditto
513
514         * daklib/utils.py (extract_component_from_section):,
515         (poolify): ditto
516
517         * dak/import_archive.py (update_section): ditto
518
519         * dak/symlink_dists.py (fix_component_section): ditto
520
521         * scripts/debian/mkmaintainers: ditto
522
523         * scripts/debian/update-mirrorlists (masterlist): ditto
524
525         * config/debian-non-US/*: Remove subdir
526
527         * scripts/debian/update-readmenonus: Removed.
528
529
530 2007-12-30  Joerg Jaspert  <joerg@debian.org>
531
532         * dak/dak.py (init): add show-new. This is based on a patch
533         submitted by Thomas Viehmann in Bug #408318, but large parts of
534         handling it are rewritten and show-new is done by me.
535
536         * dak/queue_report.py (table_row): Add link to generated html page
537         for NEW package.
538
539         * dak/show_new.py: new file, generates html overview for NEW
540         packages, similar to what we see with examine-package.
541
542         * config/debian/cron.hourly: Add show-new call
543
544         * config/debian/dak.conf: Add HTMLPath for Show-New
545
546         * dak/examine_package.py (print_copyright): ignore stderr when
547         finding copyright file.
548         (main): add html option
549         (html_escape): new function
550         (escape_if_needed): ditto
551         (headline): ditto
552         (colour_output): ditto
553         (print_escaped_text): ditto
554         (print_formatted_text): ditto
555         - use those functions everywhere where we generate output, as they
556         easily know if we want html or not and just DTRT
557         (do_lintian): new function
558         (check_deb): use it
559         (output_deb_info): Use print_escaped_text, not print_formatted_text.
560         Also import daklib.queue, determine_new now lives there
561
562         Also add a variable to see if we want html output. Default is
563         disabled, show_new enables it for its use.
564         Most of html, besides header/footer are in examine_package instead
565         of show_new, as it makes it a whole lot easier to deal with it at
566         the point the info is generated.
567
568
569         * dak/process_new.py (determine_new): Moved out of here.
570         (check_valid): Moved out of here.
571         (get_type): Moved out of here.
572
573         * daklib/queue.py (determine_new): Moved here.
574         (check_valid): Moved here.
575         (get_type): Moved here.
576
577         * dak/init_db.py (do_section): Remove non-US code
578
579         * dak/make_overrides.py (main): ditto
580
581         * dak/process_new.py (determine_new): ditto
582
583         * daklib/queue.py (Upload.in_override_p),
584         (Upload.check_override): ditto
585
586         * daklib/utils.py (extract_component_from_section):,
587         (poolify): ditto
588
589         * dak/import_archive.py (update_section): ditto
590
591         * dak/symlink_dists.py (fix_component_section): ditto
592
593         * scripts/debian/mkmaintainers: ditto
594
595         * scripts/debian/update-mirrorlists (masterlist): ditto
596
597         * config/debian-non-US/*: Remove subdir
598
599         * scripts/debian/update-readmenonus: Removed.
600
601
602 2007-12-28  Anthony Towns  <ajt@debian.org>
603
604         * daklib/utils.py (check_signature): add NOTATION_DATA and
605         NOTATION_NAME to known keywords.
606
607         * daklib/queue.py (Upload.check_source_against_db):
608
609         * dak/make_suite_file_list.py: add -f/--force option.
610
611         * dak/generate_releases.py: add -a/--apt-conf=FILE and
612         -f/--force-touch options.  Pull version info from the database.
613         Make suite description optional.
614
615         * config/debian/dak.conf: update
616         Reject-Proposed-Updates::MoreInfoURL.  Comment out
617         Suite::Stable::Version and ::Description.
618
619         * config/debian/apt.conf: Add hurd-i386 to unstable
620         debian-installer stanza.
621
622 2007-12-28  Joerg Jaspert  <joerg@debian.org>
623
624         * KEYEXPIRED is actually a known keyword. We do check it earlier
625         on and reject in case the sig is bad (or unknown)
626
627 2007-12-28  Anthony Towns  <ajt@debian.org>
628
629         * daklib/utils.py (check_signature): add NOTATION_DATA and
630         NOTATION_NAME to known keywords.
631
632         * daklib/queue.py (Upload.check_source_against_db):
633
634         * dak/make_suite_file_list.py: add -f/--force option.
635
636         * dak/generate_releases.py: add -a/--apt-conf=FILE and
637         -f/--force-touch options.  Pull version info from the database.
638         Make suite description optional.
639
640         * config/debian/dak.conf: update
641         Reject-Proposed-Updates::MoreInfoURL.  Comment out
642         Suite::Stable::Version and ::Description.
643
644         * config/debian/apt.conf: Add hurd-i386 to unstable
645         debian-installer stanza.
646
647 2007-12-28  Joerg Jaspert  <joerg@debian.org>
648
649         * KEYEXPIRED is actually a known keyword. We do check it earlier
650         on and reject in case the sig is bad (or unknown)
651
652 2007-12-24  Joerg Jaspert  <joerg@debian.org>
653
654         * Also run lintian on the .dsc file to check the source itself.
655
656         * Fix the direct usage of ar | tar etc to get the copyright file
657         and use dpkg-deb, which is made for this and makes us able to
658         process data.tar.bz2 (or whatever format it will be in the
659         future).
660
661 2007-12-24  Joerg Jaspert  <joerg@debian.org>
662
663         * Also run lintian on the .dsc file to check the source itself.
664
665         * Fix the direct usage of ar | tar etc to get the copyright file
666         and use dpkg-deb, which is made for this and makes us able to
667         process data.tar.bz2 (or whatever format it will be in the
668         future).
669
670 2007-12-21  Joerg Jaspert  <joerg@debian.org>
671
672         * Remove the (now useless) check for a pre-depends on dpkg for
673           binaries that contain bzip2 compressed data tarballs.
674
675 2007-12-21  Joerg Jaspert  <joerg@debian.org>
676
677         * Remove the (now useless) check for a pre-depends on dpkg for
678           binaries that contain bzip2 compressed data tarballs.
679
680 2007-08-28  Anthony Towns  <ajt@debian.org>
681
682         * process_unchecked.py: Add support for automatic BYHAND
683         processing.
684         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
685         processing of tag-overrides.
686         * examine_package.py: Summarise duplicate copyright file entries
687         (same md5sum) with a reference to the previous instance, rather
688         than repeating them.
689         * process_new.py: When rejecting from the p-u-new or o-p-u-new
690         holding queues, don't worry if dak has its own reasons for
691         rejecting the package as well as the SRMs.
692
693 2007-08-28  Anthony Towns  <ajt@debian.org>
694
695         * process_unchecked.py: Add support for automatic BYHAND
696         processing.
697         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
698         processing of tag-overrides.
699         * examine_package.py: Summarise duplicate copyright file entries
700         (same md5sum) with a reference to the previous instance, rather
701         than repeating them.
702         * process_new.py: When rejecting from the p-u-new or o-p-u-new
703         holding queues, don't worry if dak has its own reasons for
704         rejecting the package as well as the SRMs.
705
706 2007-06-19  Anthony Towns  <ajt@debian.org>
707
708         * Add nm.debian.org pseudopackage
709
710 2007-06-19  Anthony Towns  <ajt@debian.org>
711
712         * Add nm.debian.org pseudopackage
713
714 2007-06-18  Anthony Towns  <ajt@debian.org>
715
716         * daklib/logging.py: Set umask to not exclude group-writability
717         so we don't get reminded at the start of each month. Thanks to
718         Random J.
719         * dak/override.py: More changes from Herr von Wifflepuck: warn
720         if section of source is different to binary section; restore
721         functionality on source-only overrides; croak if trying to set
722         priority of a source override; never set priority of source
723         overrides; correct typo in logging (s/priority/section/ at
724         one place)
725
726         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
727         * config/debian/cron.daily: auotmatically accept/reject
728         oldstable-proposed-updates based on COMMENTS directory
729
730 2007-06-18  Anthony Towns  <ajt@debian.org>
731
732         * config/debian/apt.conf, config/debian/apt.conf.stable,
733         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
734         (sarge), support for oldstable-proposed-updates, dropping m68k
735         from etch, creating etch-m68k suite, creating lenny.
736
737         * config/debian/vars: update for lenny
738
739         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
740         drop upload limitations, add release postgres user
741
742         * dak/process_new.py: support for automatically accepting and rejecting
743         packages from proposed-updates holding queues via COMMENTS directory
744         * cron.daily: automatically process COMMENTS-based approvals
745         and rejections for proposed-updates holding queues
746
747         * dak/process_unchecked.py: add support for oldproposedupdates
748         holding queue
749
750         * dak/control_suite.py: allow control-suite to work with etch-m68k
751
752         * dak/generate_releases.py: unlink old Release files before updating
753         them if nlinks > 1 (ie, if two files used to be the same, maybe they
754         shouldn't be when generate-releases is run)
755
756         * dak/generate_releases.py: add a couple of commented lines to make
757         it easier to deal with point releases
758
759         * dak/make_overrides.py: generate overrides for !contrib udebs
760
761         * docs/README.stable-point-release: update docs for doing a
762         point release
763
764 2007-06-18  Anthony Towns  <ajt@debian.org>
765
766         * daklib/logging.py: Set umask to not exclude group-writability
767         so we don't get reminded at the start of each month. Thanks to
768         Random J.
769         * dak/override.py: More changes from Herr von Wifflepuck: warn
770         if section of source is different to binary section; restore
771         functionality on source-only overrides; croak if trying to set
772         priority of a source override; never set priority of source
773         overrides; correct typo in logging (s/priority/section/ at
774         one place)
775
776         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
777         * config/debian/cron.daily: auotmatically accept/reject
778         oldstable-proposed-updates based on COMMENTS directory
779
780 2007-06-18  Anthony Towns  <ajt@debian.org>
781
782         * config/debian/apt.conf, config/debian/apt.conf.stable,
783         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
784         (sarge), support for oldstable-proposed-updates, dropping m68k
785         from etch, creating etch-m68k suite, creating lenny.
786
787         * config/debian/vars: update for lenny
788
789         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
790         drop upload limitations, add release postgres user
791
792         * dak/process_new.py: support for automatically accepting and rejecting
793         packages from proposed-updates holding queues via COMMENTS directory
794         * cron.daily: automatically process COMMENTS-based approvals
795         and rejections for proposed-updates holding queues
796
797         * dak/process_unchecked.py: add support for oldproposedupdates
798         holding queue
799
800         * dak/control_suite.py: allow control-suite to work with etch-m68k
801
802         * dak/generate_releases.py: unlink old Release files before updating
803         them if nlinks > 1 (ie, if two files used to be the same, maybe they
804         shouldn't be when generate-releases is run)
805
806         * dak/generate_releases.py: add a couple of commented lines to make
807         it easier to deal with point releases
808
809         * dak/make_overrides.py: generate overrides for !contrib udebs
810
811         * docs/README.stable-point-release: update docs for doing a
812         point release
813
814 2007-03-05  Anthony Towns  <ajt@debian.org>
815
816         * config/debian/dak.conf: update for 3.1r5.
817         * scripts/debian/ssh-move: add ssh-move script from debbugs
818         * config/debian/cron.unchecked: push version info to debbugs using
819         ssh-move.
820
821 2007-03-05  Anthony Towns  <ajt@debian.org>
822
823         * config/debian/dak.conf: update for 3.1r5.
824         * scripts/debian/ssh-move: add ssh-move script from debbugs
825         * config/debian/cron.unchecked: push version info to debbugs using
826         ssh-move.
827
828 2007-02-14  James Troup  <troup@ries.debian.org>
829
830         * docs/README.config: remove Dinstall::GroupOverrideFilename.
831         * config/debian/dak.conf: likewise.
832         * config/debian-non-US/dak.conf: likewise.
833         * config/debian-security/dak.conf: likewise.
834
835         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
836         experimental differently, just close the bugs and let version
837         tracking sort it out.
838          (nmu_p): remove entire class - now unused.
839          (Upload.__init__): don't use nmu_p.
840
841 2007-02-14  James Troup  <troup@ries.debian.org>
842
843         * docs/README.config: remove Dinstall::GroupOverrideFilename.
844         * config/debian/dak.conf: likewise.
845         * config/debian-non-US/dak.conf: likewise.
846         * config/debian-security/dak.conf: likewise.
847
848         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
849         experimental differently, just close the bugs and let version
850         tracking sort it out.
851          (nmu_p): remove entire class - now unused.
852          (Upload.__init__): don't use nmu_p.
853
854 2007-02-08  Anthony Towns  <ajt@debian.org>
855
856         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
857         signing key.  Drop maximum index diffs down to 14.
858
859         * config/debian/apt.conf: add udeb support for non-free (testing,
860         unstable) and experimental.
861         * config/debian/dak.conf: likewise.
862
863         * dak/generate_releases.py (main): handle udebs in any component.
864
865         * daklib/queue.py (Upload.build_summaries): handle files without a
866         'type' gracefully.
867
868         * dak/generate_releases.py (print_sha256_files): new function.
869         (main): use it.
870
871         * dak/process_accepted.py (stable_install): fix name of template
872         mail.
873
874         * dak/process_unchecked.py (is_stableupdate): fix invocation of
875         database.get_suite_id().
876
877         * templates/process-new.bxa_notification: Update on request
878         of/after discussion with BIS staff.
879
880         * scripts/debian/mkfilesindices: also handle proposed-updates.
881
882 2007-02-08  Ryan Murray  <rmurray@debian.org>
883
884         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
885         group name for chgrp of mail archives.
886
887         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
888         orig.tar.gz's by picking the first one by file id.
889
890         * dak/override.py (main): limit to binary overrides only for now.
891         (usage): update to match.
892
893         * config/debian/cron.daily: track when we have the accepted lock
894         and clean it up on exit if we have it.  Take/check the
895         cron.unchecked lock just before traping to cleanup on exit.
896         Remove potato override handling.  Remove any dangling symlinks in
897         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
898
899         * config/debian/apt.conf: change default compression scheme for
900         both Sources and Packages to gzip and bzip2 rather than
901         uncompressed and gzip (Packages) and gzip (Sources).  Use old
902         defaults for proposed-updates.
903
904         * dak/control_overrides.py (main): refuse to operate on
905         untouchable suites.
906
907         * config/debian/pseudo-packages.maintainers: drop install,
908         installation, boot-floppy, slink-cd, potato-cd and
909         nonus.debian.org.  Update base.
910         * config/debian/pseudo-packages.description: likewise.
911
912         * daklib/utils.py (re_srchasver): new regex.
913         (parse_changes): use regex to split 'Source (Version)' style
914         Source fields into 'source' and 'source-version'.
915
916         * config/debian/cron.daily: use $base instead of hardcoding path
917         name.
918
919         * scripts/debian/mkfilesindices: source 'vars' file and use it's
920         variables instead of hardcoding path names.
921
922         * config/debian/apt.conf: switch from /org to /srv.
923         * config/debian/apt.conf.buildd: likewise.
924         * config/debian/apt.conf.stable: likewise.
925         * config/debian/cron.daily: likewise.
926         * config/debian/cron.hourly: likewise.
927         * config/debian/cron.monthly: likewise.
928         * config/debian/cron.unchecked: likewise.
929         * config/debian/cron.weekly: likewise.
930         * config/debian/dak.conf: likewise.
931         * config/debian/vars: likewise.
932         * scripts/debian/mkfilesindices: likewise.
933
934 2007-02-08  James Troup  <james@nocrew.org>
935
936         * dak/process_unchecked.py (check_signed_by_key): new function to
937         ensure .changes files are signed by an authorized uploader.
938         (process_it): use it.
939
940         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
941         to configure per suite/component/architecture binary upload
942         restrictions.
943
944 2007-02-08  Anthony Towns  <ajt@debian.org>
945
946         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
947         signing key.  Drop maximum index diffs down to 14.
948
949         * config/debian/apt.conf: add udeb support for non-free (testing,
950         unstable) and experimental.
951         * config/debian/dak.conf: likewise.
952
953         * dak/generate_releases.py (main): handle udebs in any component.
954
955         * daklib/queue.py (Upload.build_summaries): handle files without a
956         'type' gracefully.
957
958         * dak/generate_releases.py (print_sha256_files): new function.
959         (main): use it.
960
961         * dak/process_accepted.py (stable_install): fix name of template
962         mail.
963
964         * dak/process_unchecked.py (is_stableupdate): fix invocation of
965         database.get_suite_id().
966
967         * templates/process-new.bxa_notification: Update on request
968         of/after discussion with BIS staff.
969
970         * scripts/debian/mkfilesindices: also handle proposed-updates.
971
972 2007-02-08  Ryan Murray  <rmurray@debian.org>
973
974         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
975         group name for chgrp of mail archives.
976
977         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
978         orig.tar.gz's by picking the first one by file id.
979
980         * dak/override.py (main): limit to binary overrides only for now.
981         (usage): update to match.
982
983         * config/debian/cron.daily: track when we have the accepted lock
984         and clean it up on exit if we have it.  Take/check the
985         cron.unchecked lock just before traping to cleanup on exit.
986         Remove potato override handling.  Remove any dangling symlinks in
987         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
988
989         * config/debian/apt.conf: change default compression scheme for
990         both Sources and Packages to gzip and bzip2 rather than
991         uncompressed and gzip (Packages) and gzip (Sources).  Use old
992         defaults for proposed-updates.
993
994         * dak/control_overrides.py (main): refuse to operate on
995         untouchable suites.
996
997         * config/debian/pseudo-packages.maintainers: drop install,
998         installation, boot-floppy, slink-cd, potato-cd and
999         nonus.debian.org.  Update base.
1000         * config/debian/pseudo-packages.description: likewise.
1001
1002         * daklib/utils.py (re_srchasver): new regex.
1003         (parse_changes): use regex to split 'Source (Version)' style
1004         Source fields into 'source' and 'source-version'.
1005
1006         * config/debian/cron.daily: use $base instead of hardcoding path
1007         name.
1008
1009         * scripts/debian/mkfilesindices: source 'vars' file and use it's
1010         variables instead of hardcoding path names.
1011
1012         * config/debian/apt.conf: switch from /org to /srv.
1013         * config/debian/apt.conf.buildd: likewise.
1014         * config/debian/apt.conf.stable: likewise.
1015         * config/debian/cron.daily: likewise.
1016         * config/debian/cron.hourly: likewise.
1017         * config/debian/cron.monthly: likewise.
1018         * config/debian/cron.unchecked: likewise.
1019         * config/debian/cron.weekly: likewise.
1020         * config/debian/dak.conf: likewise.
1021         * config/debian/vars: likewise.
1022         * scripts/debian/mkfilesindices: likewise.
1023
1024 2007-02-08  James Troup  <james@nocrew.org>
1025
1026         * dak/process_unchecked.py (check_signed_by_key): new function to
1027         ensure .changes files are signed by an authorized uploader.
1028         (process_it): use it.
1029
1030         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
1031         to configure per suite/component/architecture binary upload
1032         restrictions.
1033
1034 2006-10-09  James Troup  <james.troup@canonical.com>
1035
1036         * dak/process_unchecked.py (check_timestamps): change match to
1037         search as recent versions of python-apt prefix the string with 'E: '.
1038
1039 2006-10-09  James Troup  <james.troup@canonical.com>
1040
1041         * dak/process_unchecked.py (check_timestamps): change match to
1042         search as recent versions of python-apt prefix the string with 'E: '.
1043
1044 2006-06-26  Ryan Murray  <rmurray@debian.org>
1045
1046         * dak/process_unchecked.py (check_files): strip optional source version
1047         from Source: field in changes file, and ensure what is left is a valid
1048         package name.
1049
1050 2006-06-26  Ryan Murray  <rmurray@debian.org>
1051
1052         * dak/process_unchecked.py (check_files): strip optional source version
1053         from Source: field in changes file, and ensure what is left is a valid
1054         package name.
1055
1056 2006-06-23  Ryan Murray  <rmurray@debian.org>
1057
1058         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1059         queue for source.
1060
1061 2006-06-23  Ryan Murray  <rmurray@debian.org>
1062
1063         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1064         queue for source.
1065
1066 2006-06-18  Ryan Murray  <rmurray@debian.org>
1067
1068         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1069         the log, too.
1070
1071         * dak/process_unchecked.py (check_files): only check embargoed and
1072         unembargoed queues if the keys are set.
1073
1074         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1075         and bzip2 for etch.
1076
1077 2006-06-18  Ryan Murray  <rmurray@debian.org>
1078
1079         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1080         the log, too.
1081
1082         * dak/process_unchecked.py (check_files): only check embargoed and
1083         unembargoed queues if the keys are set.
1084
1085         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1086         and bzip2 for etch.
1087
1088 2006-06-16  James Troup  <james@nocrew.org>
1089
1090         * dak/dak.py (init): add new-security-install.
1091
1092         * dak/new_security_install.py: cleanups and adapt for new naming
1093         scheme and other changes.
1094
1095 2006-06-16  Anthony Towns  <ajt@debian.org>
1096
1097         * dak/new_security_install.py: initial version imported from
1098         klecker.
1099
1100 2006-06-16  James Troup  <james@nocrew.org>
1101
1102         [Merged changes from klecker - original author unknown.]
1103
1104         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
1105
1106         * dak/security_install.py (do_upload): fix check for oldstable and
1107         upload file list handling.
1108
1109         * dak/process_unchecked.py (check_files): update "check for
1110         source" code to also look in Embargoed and Unembargoed queues.
1111         (is_unembargo): fix handling of Dir::Queue::Disembargo.
1112
1113         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
1114
1115         * config/debian-security/vars (disembargo): add.
1116
1117         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
1118         update.
1119         (Process-Unchecked::AcceptedLockFile): add.
1120         (Suite::Testing): clean up Version and Description.
1121         (SuiteMappings): add silent map from etch-secure to testing.
1122
1123         * config/debian-security/cron.unchecked: add support for
1124         disembargoed queues.
1125
1126         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
1127         files too.
1128
1129         * config/debian-security/apt.conf: add amd64 to architectures for
1130         testing-security.
1131
1132 2006-06-11  James Troup  <troup@spohr.debian.org>
1133
1134         * config/debian/cron.daily: invoke process-accepted not
1135         process-unchecked.
1136
1137         * config/debian/vars (scriptsdir): new variable.
1138         * config/debian/cron.daily: use it.
1139
1140         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
1141         $base/misc/ instead of versioned $masterdir.  Correct 'dak
1142         make-maintainers' invocation to look in $configdir for
1143         pseudo-packages.maintainers.
1144
1145         * daklib/queue.py (Upload.do_reject): use correct name for
1146         rejection template.
1147
1148 2006-06-11  James Troup  <james@nocrew.org>
1149
1150         * dak/override.py (main): temporarily add content of old X-Katie
1151         header back as the PTS apparently filters on it.
1152         * dak/process_accepted.py (main): likewise.
1153         * dak/process_new.py (main): likewise.
1154         * dak/process_unchecked.py (main): likewise.
1155         * dak/reject_proposed_updates.py (main): likewise.
1156         * dak/rm.py (main): likewise.
1157         * daklib/queue.py (Upload.do_reject): likewise.
1158
1159         * config/debian/cron.unchecked: set -u to error out on undefined
1160         variables.  Preset LOCKDAILY to "" accordingly.
1161         * config/debian/cron.hourly: likewise.
1162         * config/debian/cron.monthly: likewise.
1163         * config/debian/cron.weekly: likewise.
1164
1165         * config/debian/vars (configdir): add new variable pointing to
1166         this directory.
1167
1168         * config/debian/cron.daily: use $configdir inplace of $masterdir
1169         when that's what we mean, and don't cd into $masterdir just to run
1170         dak scripts as we don't need to do that anymore.
1171         * config/debian/cron.hourly: likewise.
1172         * config/debian/cron.unchecked: likewise.
1173         * config/debian/cron.weekly: likewise.
1174
1175         * config/debian/dak.conf
1176         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
1177         user back to list of known users as it's non-trivial to entirely
1178         change the owner of a database with postgresql 7.4.
1179
1180         * daklib/queue.py (Upload.source_exists): use string object
1181         methods rather than string module.
1182         (Upload.get_anyversion): likewise.
1183
1184         * daklib/utils.py (validate_changes_file_arg): update filename
1185         slicing to cope with new .dak filenames.
1186
1187         * dak/ls.py (main): add back 'heidi' as a valid argument for
1188         -f/--format as people are using it in scripts and breaking that
1189         without warning seems rude.
1190
1191 2006-05-21  James Troup  <james@nocrew.org>
1192
1193         * dak/rm.py (main): use string .isdigit() rather than
1194         utils.str_isnum().
1195         * dak/process_new.py (edit_overrides): likewise.
1196
1197         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
1198         string import.
1199
1200 2006-05-21  James Troup  <james@nocrew.org>
1201
1202         * dak/check_archive.py (check_indices_files_exist): use list
1203         comprehension instead of map().  No longer need to import
1204         deprecated string module as a side-effect.
1205         * dak/check_overrides.py (process): likewise.
1206         (main): likewise.
1207         * dak/cruft_report.py (do_obsolete_source): likewise.
1208         (main): likewise.
1209         * dak/ls.py (main): likewise.
1210         * dak/make_suite_file_list.py (write_filelists): likewise.
1211         * dak/process_accepted.py (stable_install): likewise.
1212         * dak/rm.py (main): likewise.
1213         * dak/stats.py (number_of_packages): likewise.
1214         * daklib/logging.py (Logger.log): likewise.
1215         * daklib/queue.py (Upload.source_exists): likewise.
1216         (Upload.cross_suite_version_check): likewise.
1217         * daklib/utils.py (parse_args): likewise.
1218
1219 2006-05-21  James Troup  <james@nocrew.org>
1220
1221         * daklib/utils.py (process_gpgv_output): new function, split out
1222         of check_signature().
1223         (check_signature): adapt accordingly.
1224         (retrieve_key): new function that will try to retrieve the key
1225         that signed a given file from a keyserver.
1226         (check_signature): add 'autofetch' argument that if not set
1227         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
1228         If 'autofetch' is true, invoke retrieve_key().
1229
1230         * docs/README.config: document Dinstall::KeyAutoFetch and
1231         Dinstall:KeyServer.
1232
1233 2006-05-20  James Troup  <james@nocrew.org>
1234
1235         * dak/find_null_maintainers.py (main):
1236         s/createtimestamp/createTimestamp/ to make things work with modern
1237         slapd.
1238
1239         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
1240         Stable::Version and Stable::Description for 3.1r2.
1241
1242         * config/debian-non-US/dak.conf: sync with klecker - update
1243         version number of 3.0 and MoreInfoURL.
1244
1245         * docs/README.stable-point-release: Add notes about updating
1246         dak.conf and Reject-Proposed-Updates section in particular.
1247         s/woody/stable/.  Also need to update README.html.
1248
1249         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
1250
1251         * config/debian/apt.conf: Add udeb tree for proposed-updates.
1252
1253 2006-05-20  Ryan Murray  <rmurray@debian.org>
1254
1255         * scripts/debian/update-ftpstats: new script to update daily
1256         architecture size graph data.
1257
1258         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
1259         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
1260         there.
1261
1262         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
1263         before we finish.  Don't push to merkel.
1264
1265         * dak/process_unchecked.py (check_changes): Also look in
1266         ProposedUpdates queue dir.
1267         (check_files): likewise.
1268
1269 2006-05-20  Anthony Towns  <ajt@debian.org>
1270
1271         * scripts/debian/mkfilesindices: new script to generate file
1272         indices used for partial mirroring.
1273
1274         * config/debian/cron.daily: add progress timestamps.
1275
1276         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
1277         amd64 to testing, unstable and experimental.  Drop sh from
1278         experimental.  Move Experimental to dists/experimental.  Add
1279         Dir::ProposedUpdates.  Add Architectures::amd64.
1280
1281         * config/debian/apt.conf: add amd64 to testing, unstable and
1282         experimental.  Drop uncompressed Packages files from testing. Drop
1283         sh from experimental.  Move experimental to dists/experimental/.
1284
1285         * config/debian/vars (archs): add amd64.
1286
1287         * dak/process_unchecked.py (action): Add support for
1288         proposed-updates approval queue.
1289         (is_stableupdate): new function - checks if the upload is targeted
1290         at proposed-updates.
1291         (do_stableupdate): likewise - moves upload to proposed-updates
1292         holding area.
1293
1294         * dak/process_new.py (do_new): warn if original or new target
1295         suite are invalid.
1296
1297         * dak/generate_releases.py (print_md5sha_files): less whitespace
1298         between the hash and size.
1299
1300         * dak/generate_index_diffs.py (genchanges): don't say we're not
1301         doing anything.  Better formatting of other messages.
1302         (main): don't skip experimental and remove some 'doing stuff'
1303         prints.
1304
1305 2006-05-18  James Troup  <james@nocrew.org>
1306
1307         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
1308         query.
1309
1310         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
1311         docstrings, untabify, don't shadow builtins, lowercase non-global
1312         variable names, spaces after commas.  Also bail if given any
1313         arguments since we don't accept any.
1314         * dak/init_db.py: likewise.  Also split large main() into
1315         subfunctions and rename get() to sql_get().
1316
1317         * dak/init_db.py (main): check returned value from
1318         database.get_archive_id().
1319
1320         * dak/dak.py: renamed from shell.py.  Update to support new source
1321         layout.  Created init() and usage() functions.  Various
1322         pylint-inspired cleanups.  Use daklib utils.warn() and
1323         utils.fubar().  Change 'functionality' variable to only have
1324         (command, description) and always invoke main() when running the
1325         module.  Also support -h.
1326
1327 2006-05-17  James Troup  <james@nocrew.org>
1328
1329         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
1330         imports of and calls to daklib modules.  Change script name
1331         everywhere, i.e. in output, mails, comments and configuration tree
1332         + filenames.  Also update references to other renamed scripts,
1333         classes and templates.  Use '.dak' instead of '.katie' for the
1334         queue info storage files.
1335         (Renamed from tea)
1336         * dak/check_overrides.py: likewise.  (Renamed from cindy)
1337         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
1338         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
1339         * dak/clean_queues.py: likewise.  (Renamed from shania)
1340         * dak/clean_suites.py: likewise.  (Renamed from rhona)
1341         * dak/compare_suites.py: likewise.  (Renamed from andrea)
1342         * dak/control_overrides.py: likewise.  (Renamed from natalie)
1343         * dak/control_suite.py: likewise.  (Renamed from heidi)
1344         * dak/cruft_report.py: likewise.  (Renamed from rene)
1345         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
1346         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
1347         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
1348         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
1349         * dak/import_archive.py: likewise.  (Renamed from neve)
1350         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
1351         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
1352         * dak/init_db.py: likewise. (Renamed from alyson)
1353         * dak/init_dirs.py: likewise. (Renamed from rose)
1354         * dak/ls.py: likewise. (Renamed from madison)
1355         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
1356         * dak/make_overrides.py: likewise.  (Renamed from denise)
1357         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
1358         * dak/mirror_split.py: likewise.  (Renamed from billie)
1359         * dak/override.py: likewise.  (Renamed from alicia)
1360         * dak/poolize.py: likewise.  (Renamed from catherine)
1361         * dak/process_accepted.py: likewise.  (Renamed from kelly)
1362         * dak/process_new.py: likewise.  (Renamed from lisa)
1363         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
1364         * dak/queue_report.py: likewise.  (Renamed from helena)
1365         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
1366         * dak/rm.py: likewise.  (Renamed from melanie)
1367         * dak/security_install.py: likewise.  (Renamed from amber)
1368         * dak/split_done.py: likewise.  (Renamed from nina)
1369         * dak/stats.py: likewise.  (Renamed from saffron)
1370         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
1371         * daklib/database.py: likewise.  (Renamed from db_access)
1372         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
1373         * daklib/utils.py: likewise.
1374
1375         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
1376         doesn't need to notify anyone" string.
1377         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
1378
1379         * dak/process_accepted.py (init): drop -V/--version argument.
1380         * dak/process_new.py (init): likewise.
1381         * dak/process_unchecked.py (init): likewise.
1382         * dak/reject_proposed_updates.py (init): likewise
1383
1384         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
1385
1386         * dak/stats.py: in usage() output change STAT to MODE.
1387
1388 2006-05-15  James Troup  <james@nocrew.org>
1389
1390         * dak/queue_report.py: remove unused encodings imports.
1391
1392         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
1393         imports.  Initalize 'Cnf' as a global.
1394         (BillieDB._internal_recurse): fix 'util.' typo.
1395
1396         * dak/import_ldap_fingerprints.py (main): drop unused time import and
1397         commented out time check for LDAP search.
1398
1399 2005-12-16  Ryan Murray  <rmurray@debian.org>
1400
1401         * halle: add support for udebs
1402         * kelly: stable_install: add support for binNMU versions
1403
1404 2005-12-05  Anthony Towns  <aj@erisian.com.au>
1405
1406         * katie.py: Move accept() autobuilding support into separate function 
1407         (queue_build), and generalise to build different queues
1408
1409         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
1410
1411         * jennifer: Initial support for enabling embargo handling with the
1412         Dinstall::SecurityQueueHandling option.
1413         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
1414         functions.
1415
1416         * katie.conf-security: Include embargo options
1417         * katie.conf-security: Add Lock dir
1418         * init_pool.sql-security: Create disembargo table
1419         * init_pool.sql-security: Add constraints for disembargo table
1420
1421 2005-11-26  Anthony Towns  <aj@erisian.com.au>
1422
1423         * Merge of changes from klecker, by various people
1424
1425         * amber: special casing for not passing on amd64 and oldstable updates
1426         * amber: security mirror triggering
1427         * templates/amber.advisory: updated advisory structure
1428         * apt.conf.buildd-security: update for sarge's release
1429         * apt.conf-security: update for sarge's release
1430         * cron.buildd-security: generalise suite support, update for sarge's release
1431         * cron.daily-security: update for sarge's release, add udeb support
1432         * vars-security: update for sarge's release
1433         * katie.conf-security: update for sarge's release, add amd64 support,
1434         update signing key
1435
1436         * docs/README.names, docs/README.quotes: include the additions
1437
1438 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1439
1440         * Changed accepted_autobuild to queue_build everywhere.
1441         * Add a queue table.
1442         * Add a "queue" field in the queue_build table (currently always 0)
1443
1444         * jennifer: Restructure to make it easier to support special
1445         purpose queues between unchecked and accepted.
1446
1447 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1448
1449         * Finishing merge of changes from spohr, by various people still
1450
1451         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
1452         works
1453         * jennifer: Re-enable .deb ar format checking
1454         * katie.py: Convert to +bX binNMU special casing
1455         * rhona: Add some debug output when deleting binaries
1456         * cron.daily: Add emilie
1457         * cron.unchecked: Add lock files
1458
1459 2005-11-15  Anthony Towns  <aj@erisian.com.au>
1460
1461         * Merge of changes from spohr, by various people.
1462
1463         * tiffani: new script to do patches to Packages, Sources and Contents
1464         files for quicker downloads.
1465         * ziyi: update to authenticate tiffani generated files
1466
1467         * dak: new script to provide a single binary with less arbitrary names
1468         for access to dak functionality.
1469
1470         * cindy: script implemented
1471
1472         * saffron: cope with suites that don't have a Priority specified
1473         * heidi: use get_suite_id()
1474         * denise: don't hardcode stable and unstable, or limit udebs to unstable
1475         * denise: remove override munging for testing (now done by cindy)
1476         * helena: expanded help, added new, sort and age options, and fancy headers
1477         * jennifer: require description, add a reject for missing dsc file
1478         * jennifer: change lock file
1479         * kelly: propogation support
1480         * lisa: honour accepted lock, use mtime not ctime, add override type_id
1481         * madison: don't say "dep-retry"
1482         * melanie: bug fix in output (missing %)
1483         * natalie: cope with maintainer_override == None; add type_id for overrides
1484         * nina: use mtime, not ctime
1485
1486         * katie.py: propogation bug fixes
1487         * logging.py: add debugging support, use | as the logfile separator
1488
1489         * katie.conf: updated signing key (4F368D5D)
1490         * katie.conf: changed lockfile to dinstall.lock
1491         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
1492         * katie.conf: added tiffani, cindy support
1493         * katie.conf: updated to match 3.0r6 release
1494         * katie.conf: updated to match sarge's release
1495
1496         * apt.conf: update for sarge's release
1497         * apt.conf.stable: update for sarge's release
1498         * apt.conf: bump daily max Contents change to 25MB from 12MB
1499
1500         * cron.daily: add accepted lock and invoke cindy
1501         * cron.daily: add daily.lock
1502         * cron.daily: invoke tiffani
1503         * cron.daily: rebuild accepted buildd stuff
1504         * cron.daily: save rene-daily output on the web site
1505         * cron.daily: disable billie
1506         * cron.daily: add stats pr0n
1507
1508         * cron.hourly: invoke helena
1509
1510         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
1511         * vars: add lockdir, add etch to copyoverrides
1512         * Makefile: add -Ipostgresql/server to CXXFLAGS
1513
1514         * docs/: added README.quotes
1515         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
1516         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
1517
1518         * TODO: correct spelling of "conflicts"
1519
1520 2005-05-28  James Troup  <james@nocrew.org>
1521
1522         * helena (process_changes_files): use MTIME rather than CTIME (the
1523         C's not for 'creation', stupid).
1524         * lisa (sort_changes): likewise.
1525
1526         * jennifer (check_distributions): use has_key rather than an 'in'
1527         test which doesn't work with python2.1.  [Probably by AJ]
1528
1529 2005-03-19  James Troup  <james@nocrew.org>
1530
1531         * rene (main): use Suite::<suite>::UdebComponents to determine
1532         what components have udebs rather than assuming only 'main' does.
1533
1534 2005-03-18  James Troup  <james@nocrew.org>
1535
1536         * utils.py (rfc2047_encode): use codecs.lookup() rather than
1537         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
1538         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
1539         <andrew@ubuntu.com>.
1540
1541 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
1542
1543         * helena: add -n/--new HTML output option and improved sorting
1544         options.
1545
1546 2005-03-06  Ryan Murray  <rmurray@debian.org>
1547
1548         * shania(main): use Cnf::Dir::Reject instead of REJECT
1549
1550 2005-02-08  James Troup  <james@nocrew.org>
1551
1552         * rene (main): add partial NBS support by checking that binary
1553         packages are built by their real parent and not some random
1554         stranger.
1555         (do_partial_nbs): likewise.
1556
1557 2005-01-18  James Troup  <james@nocrew.org>
1558
1559         * katie.py (Katie.build_summaries): avoid leaking file handle when
1560         extracting package description.
1561         (Katie.force_reject): remember and close each file descriptor we
1562         use.
1563         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
1564         s/reason_file/reason_fd/ because it's a file descriptor.
1565         (Katie.check_dsc_against_db): avoid leaking file handle whenever
1566         invoking apt_pkg.md5sum().
1567
1568         * jennifer (check_deb_ar): new function: sanity check the ar
1569         contents of a .deb.
1570         (check_files): use it.
1571         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
1572         found.
1573         (check_files): accept 'raw-installer' as an alias for 'byhand'.
1574
1575 2005-01-14  Anthony Towns  <ajt@debian.org>
1576
1577         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
1578
1579         * propup stuff (thanks to Andreas Barth)
1580         * katie.conf: add stable MustBeOlderThan testing, add -security
1581           propup
1582         * jennifer: set distribution-version in .katie if propup may be needed
1583         * katie.py: add propogation to cross_suite_version_check
1584
1585 2004-11-27  James Troup  <james@nocrew.org>
1586
1587         * nina: new script to split monolithic queue/done into date-based
1588         hierarchy.
1589
1590         * rene (usage): document -s/--suite.
1591         (add_nbs): use .setdefault().
1592         (do_anais): likewise.
1593         (do_nbs): don't set a string to "" and then += it.
1594         (do_obsolete_source): new function - looks for obsolete source
1595         packages (i.e source packages whose binary packages are ALL a)
1596         claimed by someone else and b) newer when built from the other
1597         source package).
1598         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
1599         and 'full' check modes.  Check for obsolete source packages.
1600         linux-wlan-ng has been fixed - remove hideous bodge.
1601
1602         * jennifer (check_distributions): support 'reject' suite map type.
1603
1604         * utils.py (validate_changes_file_arg): s/file/filename/.
1605         s/fatal/require_changes/.  If require_changes is -1, ignore errors
1606         and return the .changes filename regardless.
1607         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1608         (re_no_revision): don't escape '-', it's not a special character.
1609         s/\*/+/ as there must be at least one non-dash character after the
1610         dash in a revision.  Thanks to Christian Reis for noticing both of
1611         these.
1612
1613         * ashley (main): pass require_changes=-1 to
1614         utils.validate_changes_file_arg().
1615
1616         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1617         Team <debian-kernel@lists.debian.org>'.
1618
1619         * katie.py (Katie.in_override_p): fix .startswith() usage.
1620
1621         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1622         (Lauren::MoreInfoURL): update to 3.0r3.
1623         (Suite::Stable::Version): likewise.
1624         (Suite::Stable::Description): likewise.
1625
1626         * cron.daily: disable automatic task override generation.
1627
1628         * cindy (process): restrict "find all packages" queries by
1629         component.  Respect Options["No-Action"].
1630         (main): add -n/--no-action support.  Only run on unstable.  Rename
1631         type to otype (pychecker).
1632
1633 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1634
1635         * katie.conf (Billie::BasicTrees): add all architectures.
1636         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1637         'everything'.
1638
1639         * cron.daily: Update a 'current' symlink when creating the
1640         post-daily-cron-job database backup to aid mirroring to merkel.
1641         Run billie.
1642
1643         * billie (BillieTarget.poolish_match): handle .udeb too.
1644
1645 2004-10-13  Ryan Murray  <rmurray@debian.org>
1646
1647         * amber (do_upload): Sort changes files in "katie" order so that
1648           source always arrives before binary-only rebuilds
1649
1650 2004-10-05  James Troup  <james@nocrew.org>
1651
1652         * jennifer (check_dsc): correct reject message on invalid
1653         Maintainer field.
1654
1655 2004-09-20  James Troup  <james@nocrew.org>
1656
1657         * alicia: remove unused 'pwd' import.
1658
1659         * tea (check_override): underline suite name in output properly.
1660
1661         * rene (main): read a compressed Packages file.
1662         * tea (validate_packages): likewise.
1663
1664         * katie.py (re_fdnic): add 'r' prefix.
1665         (re_bin_only_nmu_of_mu): likewise.
1666         (re_bin_only_nmu_of_nmu): likewise.
1667
1668         * madison (main): retrieve component information too and display
1669         it if it's not 'main'.
1670         * melanie (reverse_depends_check): likewise.
1671
1672         * utils.py (pp_dep): renamed...
1673         (pp_deps): ... to this.
1674         * jeri (check_dep): update calls to utils.pp_deps().
1675         * melanie (reverse_depends_check): likewise.
1676
1677         * jennifer (check_changes): move initalization of email variables
1678         from here...
1679         (process_it): ...to here as we no longer always run
1680         check_changes().  Don't bother to initialize
1681         changes["architecture"].
1682
1683         * denise (list): renamed to...
1684         (do_list): ...this to avoid name clash with builtin 'list'.
1685         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1686         for dictionaries.
1687         (main): Likewise for name clash avoidance and also
1688         s/override_type/suffix/.  Adjust call to do_list().
1689
1690 2004-09-01  Ryan Murray  <rmurray@debian.org>
1691
1692         * tea (check_files): check the pool/ directory instead of dists/
1693
1694 2004-08-04  James Troup  <james@nocrew.org>
1695
1696         * jenna (cleanup): use .setdefault() for dictionaries.
1697         (write_filelists): likewise.
1698
1699         (write_filelists): Use utils.split_args() not split() to split
1700         command line arguments.
1701         (stable_dislocation_p): likewise.
1702
1703         (write_filelists): Add support for mapping side of suite-based
1704         "Arch: all mapping".
1705         (do_da_do_da): ensure that if we're not doing all suites that we
1706         process enough to be able correct map arch: all packages.
1707
1708         * utils.py (cant_open_exc): correct exception string,
1709         s/read/open/, s/.$//.
1710
1711         * templates/amber.advisory: update to match reality a little
1712         better.
1713
1714         * melanie (reverse_depends_check): read Packages.gz rather than
1715         Packages.
1716
1717         * jennifer (check_files): check for unknown component before
1718         checking for NEWness.
1719
1720         * katie.py (Katie.in_override_p): use .startswith in favour of a
1721         slice.
1722
1723         * docs/melanie.1.sgml: document -R/--rdep-check.
1724
1725 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1726
1727         * billie (main): Make the verbatim lists include all the README
1728           elements.
1729         * docs/README.names: Add billie in (correcting oversight)
1730
1731 2004-07-01  James Troup  <james@nocrew.org>
1732
1733         * emilie (main): handle woody's case-sensitive python-ldap,
1734         s/keyfingerprint/keyFingerPrint/.
1735
1736 2004-06-25  James Troup  <james@nocrew.org>
1737
1738         * debian/control (Depends): add dpkg-dev since jennifer uses
1739         dpkg-source.
1740
1741 2004-06-24  James Troup  <james@nocrew.org>
1742
1743         * melanie (main): s/file/temp_file/ and close file handle before
1744         removing the temporary file.
1745         (main): don't warn about needing a --carbon-copy if in no-action
1746         mode.
1747
1748         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1749         (main): likewise.
1750
1751         * test/006/test.py (main): check bracketed email-only form.
1752
1753         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1754         email-only, strip the brackets so we don't end up with
1755         <<james@nocrew.org>>.
1756
1757 2004-06-20  James Troup  <james@nocrew.org>
1758
1759         * jennifer (process_it): only run check_changes() if
1760         check_signature() returns something.  (Likewise)
1761
1762         * utils.py (changes_compare): if there's no changes["version"] use
1763         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1764
1765 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1766
1767         * jeri (pp_dep): moved from here to ...
1768         * utils.py (pp_dep): here.
1769
1770         * melanie (main): add reverse dependency checking.
1771
1772 2004-06-17  James Troup  <james@nocrew.org>
1773
1774         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1775         * tea (check_dscs): likewise.
1776
1777         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1778         change from boolean to a variable with 3 possible values, 0 and 1
1779         as before, -1 means don't require a signature.  Makes
1780         parse_changes() useful for parsing arbitary RFC822-style files,
1781         e.g. 'Release' files.
1782         (check_signature): add support for detached signatures by passing
1783         the files the signature is for as an optional third argument.
1784         s/filename/sig_filename/g.  Add a fourth optional argument to
1785         choose the keyring(s) to use.  Don't os.path.basename() the
1786         sig_filename before checking it for taint.
1787         (re_taint_free): allow '/'.
1788
1789 2004-06-11  James Troup  <james@nocrew.org>
1790
1791         * tea (check_files): make override.unreadable optional.
1792         (validate_sources): close the Sources file handle.
1793
1794         * docs/README.first: clarify that 'alyson' and running
1795         add_constraints.sql by hand is something you only want to do if
1796         you're not running 'neve'.
1797
1798         * docs/README.config (Location::$LOCATION::Suites): document.
1799
1800         * db_access.py (do_query): also print out the result of the query.
1801
1802 2004-06-10  James Troup  <james@nocrew.org>
1803
1804         * katie.py (Katie.cross_suite_version_check): post-woody versions
1805         of python-apt's apt_pkg.VersionCompare() function apparently
1806         returns variable integers for less than or greater than results -
1807         update our result checking to match.
1808         * jenna (resolve_arch_all_vs_any): likewise.
1809         * charisma (main): likewise.
1810
1811 2004-06-09  James Troup  <james@nocrew.org>
1812
1813         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1814         valid_dsc_p and don't run check_source() if check_dsc() failed.
1815         (check_dsc): on fatal failures return 0 so check_source() isn't
1816         run (since it makes fatal assumptions about the presence of
1817         mandatory .dsc fields).
1818         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1819
1820 2004-05-07  James Troup  <james@nocrew.org>
1821
1822         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1823         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1824
1825         * katie.conf (Dir::Override): remove duplicate definition.
1826
1827         * neve (get_or_set_files_id): add an always-NULL last_used column
1828         to output.
1829
1830 2004-04-27  James Troup  <james@nocrew.org>
1831
1832         * apt.conf-security (tree "dists/stable/updates"): add
1833         ExtraOverride - noticed by Joey Hess (#246050).
1834         (tree "dists/testing/updates"): likewise.
1835
1836 2004-04-20  James Troup  <james@nocrew.org>
1837
1838         * jennifer (check_files): check for existing .changes or .katie
1839         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1840         directories.
1841
1842 2004-04-19  James Troup  <james@nocrew.org>
1843
1844         * jennifer (check_source): handle failure to remove the temporary
1845          directory (used for source tree extraction) better, specifically:
1846          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1847          and try again and if that works, REJECT the package.
1848
1849 2004-04-17  James Troup  <james@nocrew.org>
1850
1851         * docs/madison.1.sgml: document -b/--binary-type,
1852         -g/--greaterorequal and -G/--greaterthan.
1853
1854         * madison (usage): -b/--binary-type only takes a single argument.
1855         Document -g/--greaterorequal and -G/--greaterthan.
1856         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1857
1858 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1859
1860         * billie: Cleaned up a load of comments, added /README.non-US to
1861           the verbatim matches list.
1862
1863 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1864
1865         * utils.py (size_type): Make it use real binary megabytes and
1866           kilobytes, instead of the marketing terms used before.
1867
1868 2004-04-07  James Troup  <james@nocrew.org>
1869
1870         * katie.py (Katie.check_dsc_against_db): in the case we're
1871         ignoring an identical-to-existing orig.tar.gz remember the path to
1872         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1873         location.path too to be able to do so.
1874
1875 2004-04-03  James Troup  <james@nocrew.org>
1876
1877         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1878         needed for new utils.rfc2047_encode() function.
1879
1880         * utils.py (re_parse_maintainer): allow whitespace inside the
1881         email address.
1882         (Error): new exception base class.
1883         (ParseMaintError): new exception class.
1884         (force_to_utf8): new function.
1885         (rfc2047_encode): likewise.
1886         (fix_maintainer): rework.  use force_to_utf8() to force name and
1887         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1888         return an rfc2047 value.  Validate the address to catch missing
1889         email addresses and (some) broken ones.
1890
1891         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1892         by adopting foo2047 return value.
1893         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1894         mandatory changes fields.  Promote changes and maintainer822 to
1895         mandatory fields.
1896         (Katie.update_subst): default maintainer2047 rather than
1897         maintainer822.  User foo2047 rather than foo822 when setting
1898         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1899
1900         * jennifer (check_changes): set default changes["maintainer2047"]
1901         and changes["changedby2047"] values rather than their 822
1902         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1903         to new utils.fix_maintainer() - reject on exception and adopt
1904         foo2047 return value.
1905         (check_dsc): if a mandatory field is missing don't do any further
1906         checks and as a result reduce paranoia about dsc[var] existence.
1907         Validate the maintainer field by calling new
1908         utils.fix_maintainer().
1909
1910         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1911         changes fields.  Promote maintainer822 to a mandatory changes
1912         field.  add "pool name" to files fields.
1913
1914         * test/006/test.py: new file - tests for new
1915         utils.fix_maintainer().
1916
1917 2004-04-01  James Troup  <james@nocrew.org>
1918
1919         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1920
1921         * jennifer (get_changelog_versions): create a symlink mirror of
1922         the source files in the temporary directory.
1923         (check_source): if check_dsc_against_db() couldn't find the
1924         orig.tar.gz bail out.
1925
1926         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1927         part of the upload store the path to it in pkg.orig_tar_gz and if
1928         it can't be found set pkg.orig_tar_gz to -1.
1929
1930         Explicitly return the second value as None in the (usual) case
1931         where we don't have to reprocess.  Remove obsolete diagnostic
1932         logs.
1933
1934         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1935
1936         * utils.py (temp_filename): new helper function that wraps around
1937         tempfile.mktemp().
1938
1939         * katie.py (Katie.do_reject): use it and don't import tempfile.
1940         * lisa (prod_maintainer): likewise.
1941         (edit_note): likewise.
1942         (edit_new): likewise.
1943         * lauren (reject): likewise.
1944         * melanie (main): likewise.
1945         * neve (do_sources): likewise.
1946         * rene (main): likewise.
1947         * tea (validate_sources): likewise.
1948
1949 2004-03-31  James Troup  <james@nocrew.org>
1950
1951         * tea (validate_sources): remove unused 's' temporary variable.
1952
1953 2004-03-15  James Troup  <james@nocrew.org>
1954
1955         * jennifer (check_dsc): check changes["architecture"] for
1956         source before we do anything else.
1957
1958 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1959
1960         * billie: Added
1961         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1962
1963 2004-03-12  James Troup  <james@nocrew.org>
1964
1965         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1966
1967         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1968
1969         * katie.py (Katie.accept): add support for DebBugs Version
1970         Tracking by writing out .versions (generated in jennifer's
1971         get_changelog_versions()) and .debinfo (mapping of binary ->
1972         source) files.
1973
1974         * ashley (main): add dsc["bts changelog"].
1975
1976         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1977
1978         * jennifer (check_diff): obsoleted by check_source(), removed.
1979         (check_source): new function: create a temporary directory and
1980         move into it and call get_changelog_versions().
1981         (get_changelog_versions): new function: extract the source package
1982         and optionally parse debian/changelog to obtain the version
1983         history for the BTS.
1984         (process_it): call check_source() rather than check_diff().
1985
1986 2004-03-08  James Troup  <james@nocrew.org>
1987
1988         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1989         listbar" rather than "if listbar.count(varfoo)"' change on
1990         2004-02-24.
1991
1992 2004-03-05  James Troup  <james@nocrew.org>
1993
1994         * alicia (main): don't warn about not closing bugs - we don't
1995         manage overrides through the BTS.
1996
1997 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1998
1999         * docs/README.config: lots of updates and corrections.
2000         * docs/README.first: likewise.
2001
2002         * docs/README.config: drop unused Dir::Queue::Root.
2003         * katie.conf-non-US: likewise.
2004         * katie.conf: likewise.
2005         * katie.conf-security: likewise.
2006
2007 2004-02-27  James Troup  <james@nocrew.org>
2008
2009         * rose (process_tree): use 'if var in [ list ]' rather than long
2010         'if var == foo or var == bar or var == baz'.  Suggested by Martin
2011         Michlmayr.
2012
2013         * jennifer (check_files): reduce 'if var != None' to 'if var' as
2014         suggested by Martin Michlmayr.
2015         * catherine (poolize): likewise.
2016         * charisma (main): likewise.
2017         * halle (check_changes): likewise.
2018         * heidi (main): likewise.
2019         (process_file): likewise.
2020         * kelly (install): likewise.
2021         (stable_install): likewise.
2022         * utils.py (fix_maintainer): likewise.
2023
2024         * apt.conf: add support for debian-installer in testing-proposed-updates.
2025         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
2026         add - set to main.
2027
2028         * mkmaintainers: add "-T15" option to wget of non-US packages file
2029         so that we don't hang cron.daily if non-US is down.
2030
2031         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
2032
2033         * templates/jennifer.bug-close: add Source and Source-Version
2034         pseudo-headers that may be used for BTS Version Tracking someday
2035         [ajt@].
2036
2037         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
2038         (main): likewise.
2039
2040         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
2041
2042 2004-02-25  James Troup  <james@nocrew.org>
2043
2044         * katie.conf (SuiteMappings): don't map testing-security to
2045         proposed-updates.
2046
2047 2004-02-24  James Troup  <james@nocrew.org>
2048
2049         * katie.py (Katie.__init__): remove unused 'values' field.
2050
2051         * utils.py (extract_component_from_section): use 's.find(c) != -1'
2052         rather than 's.count(c) > 0'.
2053
2054         * katie.py (Katie.source_exists): use "if varfoo in listbar"
2055         rather than "if listbar.count(varfoo)".
2056         * halle (check_joey): likewise.
2057         * jeri (check_joey): likewise.
2058         * lisa (edit_index): likewise.
2059         * jenna (stable_dislocation_p): likewise.
2060
2061         * jennifer (main): remove unused global 'nmu'.
2062
2063 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
2064
2065         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
2066           to be ftpmaster@ftp-master.debian.org to bring it into line with how
2067           the dak tools close bugs.
2068
2069 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2070
2071         * katie.conf (Alicia): Added an Alicia section with email address
2072         * templates/alicia.bug-close: Added
2073         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
2074         * alicia (main): Added a -d/--done argument
2075
2076 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2077
2078         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
2079
2080 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2081
2082         * lisa (prod_maintainer): Added function to prod the maintainer without
2083           accepting or rejecting the package
2084         * templates/lisa.prod: Added this template for the prodding mail
2085
2086         * .cvsignore: Added neve-files which turns up in new installations
2087
2088 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
2089
2090         * alicia (usage): Fixed usage message to offer section and priority
2091           as seperately optional arguments.
2092         * alicia (main): Added a % (arg) interpolation needed when only
2093           one of section or priority is provided and it cannot be found.
2094
2095 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2096
2097         * alicia: Added
2098         * docs/alicia.1.sgml: Added
2099         * docs/Makefile: Added alicia to the list of manpages to build
2100         * docs/README.names: Noted what alicia does
2101         * docs/README.first: Noted where alicia is useful
2102
2103 2004-01-21  James Troup  <james@nocrew.org>
2104
2105         * madison (main): add -b/--binary-type.
2106         (usage): likewise.
2107
2108         * denise (main): generate debian-installer overrides for testing
2109         too.
2110         * apt.conf: add support for debian-installer in testing.
2111         * katie.conf (Suite::Testing::UdebComponents): set to main.
2112
2113         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
2114         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
2115         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
2116
2117         * utils.py (parse_changes): don't process data not inside the
2118         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
2119         pointing this out.
2120         * test/005/test.py (main): new test to test for above.
2121
2122 2004-01-04  James Troup  <james@nocrew.org>
2123
2124         * jenna (write_filelists): correct typo, s/Components/Component/
2125         for Options.
2126
2127 2004-01-04  Ryan Murray  <rmurray@debian.org>
2128
2129         * cron.buildd: move update of overrides and Packages file...
2130         * cron.unchecked: to here.
2131         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
2132         * katie.conf-security: likewise
2133
2134 2003-11-20  James Troup  <james@nocrew.org>
2135
2136         * jenna (main): don't use utils.try_with_debug(), it produces way
2137         too much output.
2138
2139         * halle (check_changes): don't error out if a .changes refers to a
2140         non-existent package, just warn and skip the file.
2141
2142         * docs/README.stable-point-release: mention halle and .changes
2143         obsoleted by removal through melanie.  Update for 3.0r2.
2144
2145         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
2146         (Suite::Stable::Description): update for 3.0r2.
2147         (Lauren::MoreInfoURL): likewise.
2148         * katie.conf-non-US (Suite::Stable::Version): likewise.
2149         (Suite::Stable::Description): likewise.
2150         (Lauren::MoreInfoURL): likewise.
2151
2152         * apt.conf.stable (Default): don't define MaxContentsChange.
2153         * apt.conf.stable-non-US (Default): likewise.
2154
2155         * lauren (reject): hack to work around partial replacement of an
2156         upload, i.e. one or more binaries superseded by another source
2157         package.
2158
2159 2003-11-17  James Troup  <james@nocrew.org>
2160
2161         * pseudo-packages.maintainers: point installation-reports at
2162         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
2163         request.
2164
2165         * utils.py (parse_changes): calculate the number of lines once
2166         with len() rather than max().
2167
2168         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2169         files, since check_dsc_against_db() deletes the .orig.tar.gz
2170         entry.
2171
2172 2003-11-13  Ryan Murray  <rmurray@debian.org>
2173
2174         * apt.conf: specify a src override file for debian-installer
2175
2176 2003-11-10  James Troup  <james@nocrew.org>
2177
2178         * fernanda.py (strip_pgp_signature): new function - strips PGP
2179         signature from a file and returns the modified contents of the
2180         file in a string.
2181         (display_changes): use it.
2182         (read_dsc): likewise.
2183
2184 2003-11-09  Ryan Murray  <rmurray@debian.org>
2185
2186         * cron.buildd: export accepted_autobuild table for unstable, and use
2187         it to generate the incoming Packages/Sources rather than having apt
2188         walk the directory.
2189         * apt.conf.buildd: use exported table from cron.buildd to generate
2190         Packages/Sources
2191
2192 2003-11-07  James Troup  <james@nocrew.org>
2193
2194         * kelly: import errno.
2195
2196         * katie.py (Katie.build_summaries): sort override disparities.
2197
2198         * kelly (install): set dsc_component based on the .dsc's component
2199         not a random binaries.
2200
2201 2003-10-29  James Troup  <james@nocrew.org>
2202
2203         * katie.py (Katie.build_summaries): don't assume changes["source"]
2204         exists since it might not.
2205
2206 2003-10-20  James Troup  <james@nocrew.org>
2207
2208         * pseudo-packages.maintainers: update security.d.o to use
2209         team@s.d.o at joy@'s request.
2210
2211 2003-10-17  James Troup  <james@nocrew.org>
2212
2213         * jennifer (check_dsc): use .startswith rather than .find() == 0.
2214
2215 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
2216
2217         * tea (chk_bd_process_dir): use .endswith rather than slice.
2218
2219 2003-10-14  James Troup  <james@nocrew.org>
2220
2221         * tea (check_build_depends): new function.
2222         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
2223         in the archive.
2224         (main): update for new function.
2225         (usage): likewise.
2226
2227         * katie.py (Katie.do_reject): sanitize variable names,
2228         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
2229         os.close() to outside if clause.
2230
2231         * jennifer (check_dsc): check build-depends and
2232         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
2233         Fold the ARRAY check into the same code block and tidy up it's
2234         rejection message.
2235         (check_changes): ensure that the Files field is non-empty.
2236         Suggested by Santiago Vila <sanvila@unex.es>
2237         (check_changes): normalize reject messages.
2238         (check_dsc): instead of doing most of the checks inside a for loop
2239         and an if, find the dsc_filename in a short loop over files first
2240         and then do all the checks.  Add check for more than one .dsc in a
2241         .changes which we can't handle.  Normalize reject messages.
2242
2243 2003-10-13  James Troup  <james@nocrew.org>
2244
2245         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
2246         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
2247
2248         * jennifer (check_files): Set 'has_binaries' and 'has_source'
2249         variables while iterating over 'files'.  Don't regenerate it when
2250         checking for source if source is mentioned.
2251
2252         Reject source only uploads if the config variable
2253         Dinstall::Reject::NoSourceOnly is set.
2254
2255 2003-10-03  James Troup  <james@nocrew.org>
2256
2257         * rene (main): add nasty hardcoded reference to debian-installer
2258         so we detect NBS .udebs.
2259
2260 2003-09-29  James Troup  <james@nocrew.org>
2261
2262         * apt.conf (old-proposed-updates): remove.
2263         * apt.conf-non-US (old-proposed-updates): likewise.
2264
2265 2003-09-24  James Troup  <james@nocrew.org>
2266
2267         * tea (check_files_not_symlinks): new function, ensure files
2268         mentioned in the database aren't symlinks.  Includes code to
2269         update any files that are like this to their real filenames +
2270         location; commented out by though.
2271         (usage): update for new function.
2272         (main): likewise.
2273
2274 2003-09-24  Anthony Towns  <ajt@debian.org>
2275
2276         * vars: external-overrides variable added
2277         * cron.daily: Update testing/unstable Task: overrides from joeyh
2278         managed external source.
2279
2280 2003-09-22  James Troup  <james@nocrew.org>
2281
2282         * kelly (install): if we can't move the .changes into queue/done,
2283         fail don't warn and carry on.  The old behaviour pre-dates NI and
2284         doesn't make much sense now since jennifer checks both
2285         queue/accepted and queue/done for any .changes files it's
2286         processing.
2287
2288         * utils.py (move): don't throw exceptions on existing files or
2289         can't overwrite, instead just fubar out.
2290
2291         * jennifer (check_dsc): also check Build-Depends-Indep for
2292         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
2293
2294 2003-09-18  James Troup  <james@nocrew.org>
2295
2296         * katie.py (Katie.close_bugs): only log the bugs we've closed
2297         once.
2298
2299         * kelly (main): log as 'kelly', not 'katie'.
2300
2301 2003-09-16  James Troup  <james@nocrew.org>
2302
2303         * katie.py (Katie.check_binary_against_db): likewise noramlize.
2304
2305         * jennifer (check_changes): normalize reject message for "changes
2306         file already exists" to be %s: <foo>.
2307         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
2308         produced by broken dpkg-source in 1.10.11.  Tone down and
2309         normalize rejection message for incompatible 'Format' version
2310         numbers.
2311         (check_diff): likewise tone down and normalize.
2312
2313 2003-09-07  James Troup  <james@nocrew.org>
2314
2315         * utils.py (parse_changes): if dsc_whitespace_rules is false,
2316         don't bomb out on bogus empty lines.
2317         (build_file_list): check for changes["files"] earlier.  use Dict
2318         to create files[name] dictionary.
2319         (send_mail): don't bother validating arguments.
2320         (check_signature): minor improvements to some of the rejection
2321         messages including listing the key id of the key that wasn't found
2322         in the keyring.
2323         (wrap): new function.
2324
2325         * tea: add new check 'validate-indices' that ensures all files
2326         mentioned in indices (Packages, Sources) files do in fact exist.
2327
2328         * catherine (poolize): use a local re_isadeb which handles legacy
2329         (i.e. no architecture) style .deb filenames.
2330
2331         * rosamund: new script.
2332
2333         * rhona (check_binaries): when checking for binary packages not in
2334         a suite, don't bother selecting files that already have a
2335         last_used date.
2336         (check_sources): likewise.
2337
2338         * rhona: change all SQL EXISTS sub-query clauses to use the
2339         postgres suggested convention of "SELECT 1 FROM".
2340         * andrea (main): likewise.
2341         * tea (check_override): likewise.
2342         * catherine (main): likewise.
2343
2344         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
2345         entries and in other suites MustBeNewerThan's.
2346         (SuiteMappings): likewise
2347         * katie.conf-non-US: likewise.
2348         * katie.conf-security: likewise.
2349
2350         * apt.conf-security: remove oldstable.
2351         * apt.conf.stable: likewise.
2352         * apt.conf.stable-non-US: likewise.
2353         * cron.buildd-security: likewise.
2354         * cron.daily-security: likewise.
2355         * vars-security (suites): likewise.
2356         * wanna-build/trigger.daily: likewise.
2357
2358         * claire.py (clean_symlink): move...
2359         * utils.py (clean_symlink): here.
2360
2361         * claire.py (find_dislocated_stable): update accordingly.
2362
2363 2003-08-16  Anthony Towns  <ajt@debian.org>
2364
2365         * katie.py (source_exists): expand the list of distributions
2366         the source may exist in to include any suite that's mapped to
2367         the destination suite (even transitively (a->b->c)). This should
2368         unbreak binary uploads to *-proposed-updates.
2369
2370 2003-08-09  Randall Donald  <rdonald@debian.org>
2371
2372         * lisa (recheck): change changes["distribution"].keys() to
2373         Katie.pkg.changes...
2374
2375 2003-08-08  Randall Donald  <rdonald@debian.org>
2376
2377         * katie.py: only tag bugs as fixed-in-experimental for
2378         experimental uploads
2379
2380 2003-07-26  Anthony Towns  <ajt@debian.org>
2381
2382         * katie.py (source_exists): add an extra parameter to limit the
2383         distribution(s) the source must exist in.
2384         * kelly, lisa, jennifer: update to use the new source_exists
2385
2386 2003-07-15  Anthony Towns  <ajt@debian.org>
2387
2388         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
2389         checksums for debian-installer stuff even when it's just a symlink to
2390         another suite
2391
2392         * apt.conf: add the FakeDI line
2393
2394 2003-06-09  James Troup  <james@nocrew.org>
2395
2396         * kelly (check): make sure the 'file' we're looking for in 'files'
2397         hasn't been deleted by katie.check_dsc_against_db().
2398
2399 2003-05-07  James Troup  <james@nocrew.org>
2400
2401         * helena (time_pp): fix s/years/year/ typo.
2402
2403 2003-04-29  James Troup  <james@nocrew.org>
2404
2405         * madison (usage): document -c/--component.
2406
2407         * madison (usage): Fix s/seperated/separated/.
2408         * melanie (usage): likewise.
2409         * jenna (usage): likewise.
2410
2411 2003-04-24  James Troup  <james@nocrew.org>
2412
2413         * cron.daily-non-US: if there's nothing for kelly to install, say
2414         so.
2415
2416         * jennifer (check_timestamps): print sys.exc_value as well as
2417         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
2418         failed' with 'deb contents' to make it clearer what timestamp(s)
2419         are being checked.
2420
2421 2003-04-15  James Troup  <james@nocrew.org>
2422
2423         * cron.daily-non-US: only run kelly if there are some .changes
2424         files in accepted.
2425
2426         * rene: add -m/--mode argument which can be either daily (default)
2427         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
2428         Various changes to make this possible including a poor attempt at
2429         splitting main() up a little.  De-hardcode suite numbers from SQL
2430         queries and return quietly from do_nviu() if experimental doesn't
2431         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
2432         is.
2433
2434         * debian/control (Depends): remove python-zlib as it's obsolete.
2435
2436         * charisma (main): don't slice the \n off strings when we're
2437         strip()-ing it anyway.
2438         * heidi (set_suite): likewise.
2439         (process_file): likewise.
2440         * natalie (process_file): likewise.
2441
2442 2003-04-08  James Troup  <james@nocrew.org>
2443
2444         * katie.py (Katie.check_dsc_against_db): improve the speed of two
2445         slow queries by using one LIKE '%foo%' and then matching against
2446         '%s' or '/%s$' in python.  Also only join location when we need it
2447         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
2448         query, so 6s for each sourceful package.
2449
2450         * cron.daily: invoke rene and send the report to ftpmaster.
2451         * cron.daily-non-US: likewise.
2452
2453 2003-03-14  James Troup  <james@nocrew.org>
2454
2455         * utils.py (send_mail): default filename to blank.
2456         * amber (make_advisory): adapt.
2457         * jennifer (acknowledge_new): likewise.
2458         * katie.py (Katie.close_bugs): likewise.
2459         (Katie.announce): likewise.
2460         (Katie.accept): likewise.
2461         (Katie.check_override): likewise.
2462         (Katie.do_reject): likewise.
2463         * kelly (do_reject): likewise.
2464         (stable_install): likewise.
2465         * lisa (do_bxa_notification): likewise.
2466         * lauren (reject): likewise.
2467         * melanie (main): likewise.
2468
2469         * rene (add_nbs): check any NBS packages against unstable to see
2470         if they haven't been removed already.
2471
2472         * templates/katie.rejected: remove paragraph about rejected files
2473         since they're o-rwx due to c-i-m and the uploader can't do
2474         anything about them and shania will take care of them anyway.
2475
2476         * madison (usage): update usage example to use comma seperation.
2477         * melanie (usage): likewise.
2478
2479         * utils.py (split_args): new function; splits command line
2480         arguments either by space or comma (whichever is used).  Also has
2481         optional-but-default DWIM spurious space detection to avoid
2482         'command -a i386, m68k' problems.
2483         (parse_args): use it.
2484         * melanie (main): likewise.
2485
2486         * melanie (main): force the admin to tell someone if we're not
2487         doing a rene-led removal (or closing a bug, which counts as
2488         telling someone).
2489
2490 2003-03-05  James Troup  <james@nocrew.org>
2491
2492         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
2493         and python sections.
2494         * katie.conf-security (Section): likewise.
2495
2496         * add_constraints.sql: add uid and uid_id_seq to grants.
2497
2498         * lisa (determine_new): also warn about adding overrides to
2499         oldstable.
2500
2501         * madison (main): make the -S/--source-and-binary query obey
2502         -s/--suite restrictions.
2503
2504 2003-03-03  James Troup  <james@nocrew.org>
2505
2506         * madison (main): if the Archive_Maintenance_In_Progress lockfile
2507         exists, warn the user that our output might seem strange.  (People
2508         get confused by multiple versions in a suite which happens
2509         post-kelly but pre-jenna.)
2510
2511 2003-02-21  James Troup  <james@nocrew.org>
2512
2513         * kelly (main): we don't need to worry about StableRejector.
2514
2515         * melanie (main): sort versions with apt_pkg.VersionCompare()
2516         prior to output.
2517
2518         * lauren: new script to manually reject packages from
2519         proposed-updates.  Updated code from pre-NI kelly (nee katie).
2520
2521 2003-02-20  James Troup  <james@nocrew.org>
2522
2523         * kelly (init): remove unused -m/--manual-reject argument.
2524
2525         * katie.py (Katie.force_reject): renamed from force_move to make
2526         it more explicit what this function does.
2527         (Katie.do_reject): update to match.
2528
2529         * utils.py (prefix_multi_line_string): add an optional argument
2530         include_blank_lines which defaults to 0.  If non-zero, blank lines
2531         will be includes in the output.
2532
2533         * katie.py (Katie.do_reject): don't add leading space to each line
2534         of the reject message.  Include blank lines when showing the
2535         message to the user.
2536
2537 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
2538
2539         * utils.py (fix_maintainer): replace pointless re.sub() with
2540         simple string format.
2541
2542 2003-02-11  James Troup  <james@nocrew.org>
2543
2544         * lisa (edit_overrides): only strip-to-one-char and upper-case
2545         non-numeric answers.  Fixes editing of items with indices >= 10;
2546         noticed by Randall.
2547         (edit_overrides): correct order of arguments to "not a valid
2548         index" error message.
2549
2550         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
2551         remove_duplicate_versions(); thanks to aj for the initial
2552         diagnosis.
2553         (remove_duplicate_versions): correct how we return
2554         dominant_versions.
2555         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
2556         a tuple rather than just a tuple.
2557
2558 2003-02-10  James Troup  <james@nocrew.org>
2559
2560         * emilie: new script - sync fingerprint and uid tables with a
2561         debian.org LDAP DB.
2562
2563         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
2564         in 'fingerprint'.
2565
2566         * db_access.py (get_or_set_uid_id): new function.
2567
2568         * jennifer (main): update locking to a) not used FCNTL (deprecated
2569         in python >= 2.2) and b) acknowledge upstream's broken
2570         implementation of lockf (see Debian bug #74777), c) try to acquire
2571         the lock non-blocking.
2572         * kelly (main): likewise.
2573
2574         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
2575
2576         * madison (main): only append the package to new_packages if it's
2577         not already in there; fixes -S/--source-and-binary for cases where
2578         the source builds a binary package of the same name.
2579
2580 2003-02-10  Anthony Towns  <ajt@debian.org>
2581
2582         * madison (main): use explicit JOIN syntax for
2583         -S/--source-and-binary queries to reduce the query's runtime from
2584         >10 seconds to negligible.
2585
2586 2003-02-08  James Troup  <james@nocrew.org>
2587
2588         * rene (main): in the NVIU output, append items to lists, not
2589         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
2590         should be removed.
2591
2592 2003-02-07  James Troup  <james@nocrew.org>
2593
2594         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
2595         Sources [aj].
2596
2597         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
2598         O. Benham/Adam Heath/.
2599
2600         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
2601         (Suite::Stable::Description): update for 3.0r1a.
2602         (Dinstall::SigningKeyIds): update for 2003 key [aj].
2603
2604         * utils.py (gpgv_get_status_output): rename from
2605         get_status_output().
2606
2607         * neve (check_signature): use gpgv_get_status_output and Dict from
2608         utils().  Add missing newline to error message about duplicate tokens.
2609
2610         * saffron (per_arch_space_use): also print space used by source.
2611         (output_format): correct string.join() invocation.
2612
2613         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2614
2615 2003-02-04  James Troup  <james@nocrew.org>
2616
2617         * cron.buildd: correct generation of Packages/Sources and grep out
2618         non-US/non-free as well as non-free.
2619
2620 2003-02-03  Ryan Murray  <rmurray@debian.org>
2621
2622         * cron.buildd: generate quinn-diff output with full Packages/Sources
2623           files to get out-of-date vs. uncompiled right.
2624         * apt.conf.buildd: no longer generate uncompressed files, as they
2625           are generated in cron.buildd instead
2626         * add -i option to quinn-diff to ignore binary-all packages
2627         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2628           aren't in the packages file, the arch that uploaded them will build
2629           them anyways...
2630
2631 2003-01-30  James Troup  <james@nocrew.org>
2632
2633         * rene (main): only print suggested melanie command when there's
2634         some NBS to remove.
2635
2636 2003-01-30  Ryan Murray  <rmurray@debian.org>
2637
2638         * cron.buildd: fix incorrectly inverted lockfile check
2639
2640 2003-01-29  Ryan Murray  <rmurray@debian.org>
2641
2642         * cron.buildd: generate override.sid.all3.src
2643         * apt.conf.buildd: use generated override.sid.all3.src
2644
2645 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2646
2647         * utils.py (get_status_output): moved from jennifer.
2648         (Dict): likewise.
2649         (check_signature): likewise.
2650
2651         * jennifer (get_status_output): moved to utils.py.
2652         (Dict): likewise.
2653         (check_signature): likewise.
2654
2655         * utils.py (check_signature): add an argument to specifiy which
2656         function to call when an error was found.
2657         (check_signature): document this function better.
2658
2659         * jennifer (check_files): pass the reject function as an argument
2660         to utils.check_signature.
2661         (process_it): likewise.
2662
2663 2003-01-20  James Troup  <james@nocrew.org>
2664
2665         * rene (main): lots of changes to improve the output and make it
2666         more useful.
2667
2668         * katie.py (Katie.check_override): make the override messages
2669         clearer (hopefully).
2670
2671 2002-12-26  James Troup  <james@nocrew.org>
2672
2673         * ziyi (usage): document the ability to pass suite(s) as
2674         argument(s).
2675         (main): read apt.conf after checking for -h/--help.
2676
2677         * tea (main): take the check to run as an argument.
2678
2679         * saffron.R: R script to graph daily install runs.
2680
2681         * saffron: new script; various stats functions.
2682
2683         * rhona (main): connect to the database after checking for -h/--help.
2684
2685         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2686
2687         * melanie (main): sort versions with utils.arch_compare_sw().
2688
2689         * madison (usage): alphabetize order of options.
2690         * melanie (usage): likewise.
2691
2692         * kelly (usage): fix usage short description (we aren't dinstall).
2693
2694         * julia (usage): fix usage description and alphabetize order of
2695         options.
2696
2697         * jeri (usage): fix usage short description.
2698
2699         * jennifer (main): move --help and --version checks from here...
2700         (init): to here so that they work with an empty katie.conf.
2701         * kelly: likewise.
2702
2703         * alyson (usage): new function.
2704         (main): use it.
2705         * andrea: likewise.
2706         * ashley: likewise.
2707         * cindy: likewise.
2708         * denise: likewise.
2709         * helena: likewise.
2710         * neve: likewise.
2711         * rene: likewise.
2712         * rose: likewise.
2713         * tea: likewise.
2714
2715         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2716         entry that caused tasks to be omitted from 3.0r1.
2717
2718 2002-12-10  James Troup  <james@nocrew.org>
2719
2720         * jennifer (check_files): sanity check the Depends field to ensure
2721         it's non-empty if present since apt chokes on an empty one.
2722         Thanks to Ryan Murray for the idea.
2723
2724 2002-12-08  James Troup  <james@nocrew.org>
2725
2726         * katie.conf-security (Helena::Directories): new; include accepted
2727         in addition to byhand and new.
2728
2729         * helena (process_changes_files): use utils.arch_compare_sw().
2730         Justify things based on the longest [package, version,
2731         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2732         the commas in architecture and version lists for the same reason.
2733         (main): make directories we process configurable through
2734         Helena::Directories in the config file; if that doesn't exist
2735         default to the old hardcoded values (byhand & new).
2736
2737         * utils.py (arch_compare_sw): moved here from madison.
2738         * madison (main): adjust to compensate.
2739
2740 2002-12-06  James Troup  <james@nocrew.org>
2741
2742         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2743         right filename.
2744
2745 2002-12-05  James Troup  <james@nocrew.org>
2746
2747         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2748
2749 2002-11-28  Randall Donald  <rdonald@debian.org>
2750
2751         * fernanda.py (read_control): fix typo of 'Architecture'.
2752
2753 2002-11-26  James Troup  <james@nocrew.org>
2754
2755         * lisa (check_pkg): call less with '-R' so we see the colour from
2756         Randall's fernanda changes.
2757
2758         * neve (process_sources): if Directory points to a legacy location
2759         but the .dsc isn't there; assume it's broken and look in the pool.
2760         (update_section): new, borroed from alyson.
2761         (do_da_do_da): use it.
2762         (process_packages): add suite_it to the cache key used for
2763         arch_all_cache since otherwise we only add a package to the first
2764         suite it's in and ignore any subsequent ones.
2765
2766         * katie.conf-non-US (Location): fixed to reflect reality (all
2767         suites, except old-proposed-updates (which is legacy-mixed)) are
2768         pool.
2769
2770         * utils.py (try_with_debug): wrapper for print_exc().
2771         * jenna (main): use it.
2772         * neve (main): likewise.
2773
2774 2002-11-25  Randall Donald  <rdonald@debian.org>
2775
2776         * fernanda.py (main): added -R to less command line for raw control
2777         character support to print colours
2778         (check_deb): Instead of running dpkg -I on deb file, call
2779         output_deb_info, the new colourized control reporter.
2780         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2781         of printing out each .dsc line.
2782         (output_deb_info): new function. Outputs each key/value pair from
2783         read_control except in special cases where we highlight section,
2784         maintainer, architecture, depends and recommends.
2785         (create_depends_string): new function. Takes Depends tree and looks
2786         up it's compontent via projectb db, colourizes and constructs a
2787         depends string in original order.
2788         (read_dsc): new function. reads and parses .dsc info via
2789         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2790         colourized.
2791         (read_control): new function. reads and parses control info via
2792         apt_pkg. Depends and Recommends are split in to list structures,
2793         Section and Architecture are colourized. Maintainer is colourized
2794         if it has a localhost.localdomain address.
2795         (split_depends): new function. Creates a list of lists of
2796         dictionaries of depends (package,version relation). Top list is
2797         colected from comma delimited items. Sub lists are | delimited.
2798         (get_comma_list): new function. splits string input among commas
2799         (get_or_list): new function. splits string input among | delimiters
2800         (get_depends_parts): new function. Creates dictionary of package name
2801         and version relation from dependancy string.
2802         Colours for section and depends are per component. Unfound depends
2803         are in bold. Lookups using version info is not supported yet.
2804
2805 2002-11-22  James Troup  <james@nocrew.org>
2806
2807         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2808         'udmsearch'.
2809
2810         * amber (make_advisory): string.atol() is deprecated and hasn't
2811         been ported to string methods.  Use long() instead.
2812
2813         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2814         creating the database since we'll fail badly if it's created with
2815         e.g. UNICODE encoding.
2816
2817         * rose (main): AptCnf is a global.
2818
2819         * neve (get_location_path): new function determines the location
2820         from the the first (left-most) directory of a Filename/Directory.
2821         (process_sources): don't need 'location' anymore.  Use
2822         utils.warn().  Use the Directory: field for each package to find
2823         the .dsc.  Use get_location_path() to determine the location for
2824         each .dsc.
2825         (process_packages): do't need 'location' anymore.  Use
2826         utils.warn().  Use get_location_path().
2827         (do_sources): don't need 'location', drop 'prefix' in favour of
2828         being told the full path to the Sources file, like
2829         process_packages().
2830         (do_da_do_da): main() renamed, so that main can call us in a
2831         try/except.  Adapt for the changes in do_sources() and
2832         process_packages() above.  Assume Sources and Packages file are in
2833         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2834
2835         * katie.conf-security (Location): fixed to reflect reality (all
2836         suites are pool, not legacy).
2837
2838         * utils.py (print_exc): more useful (i.e. much more verbose)
2839         traceback; a recipe from the Python cookbook.
2840         * jenna (main): use it.
2841         * neve (main): likewise.
2842
2843 2002-11-19  James Troup  <james@nocrew.org>
2844
2845         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2846         handling which was FUBAR for multi-suite uploads.  Now we just
2847         make a dictionary of destinations to copy to and iterate over
2848         those.
2849
2850         * fernanda.py (check_deb): run linda as well as lintian.
2851
2852 2002-10-21  James Troup  <james@nocrew.org>
2853
2854         * melanie (main): change X-Melanie to X-Katie and prefix it with
2855         'melanie '.
2856
2857         * lisa (main): prefix X-Katie with 'lisa '.
2858
2859         * jennifer (clean_holding): fix typo in string method changes;
2860         s/file.find(file/file.find(/.
2861
2862         * cron.daily: invoke helena and send the report to ftpmaster.
2863         * cron.daily-non-US: likewise.
2864
2865 2002-10-16  James Troup  <james@nocrew.org>
2866
2867         * kelly (check): call reject() with a blank prefix when parsing
2868         the return of check_dsc_against_db() since it does its own
2869         prefix-ing.
2870
2871         * rose: new script; only handles directory creation initally.
2872
2873         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2874         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2875
2876 2002-10-06  James Troup  <james@nocrew.org>
2877
2878         * rene (main): remove bogus argument handling.
2879
2880         * kelly: katie, renamed.
2881         * cron.daily: adapt for katie being renamed to kelly.
2882         * cron.daily-non-US: likewise.
2883         * amber (main): likewise.
2884
2885         * Changes for python 2.1.
2886
2887         * kelly: time.strftime no longer requires a second argument of
2888         "time.localtime(time.time())".
2889         * logging.py: likewise.
2890         * rhona: likewise.
2891         * shania (init): likewise.
2892
2893         * amber: use augmented assignment.
2894         * catherine (poolize): likewise.
2895         * claire.py (fix_component_section): likewise.
2896         * halle (check_changes): likewise.
2897         * helena: likewise.
2898         * jenna: likewise.
2899         * jennifer: likewise.
2900         * jeri: likewise.
2901         * katie.py: likewise.
2902         * kelly: likewise.
2903         * lisa: likewise.
2904         * madison (main): likewise.
2905         * melanie: likewise.
2906         * natalie: likewise.
2907         * neve: likewise.
2908         * rhona: likewise.
2909         * tea: likewise.
2910         * utils.py: likewise.
2911         * ziyi: likewise.
2912
2913         * amber: use .endswith.
2914         * fernanda.py: likewise.
2915         * halle (main): likewise.
2916         * jennifer: likewise.
2917         * jeri: likewise.
2918         * katie.py: likewise.
2919         * kelly: likewise.
2920         * lisa: likewise.
2921         * neve: likewise.
2922         * shania (main): likewise.
2923         * utils.py: likewise.
2924
2925         * alyson: use string methods.
2926         * amber: likewise.
2927         * andrea: likewise.
2928         * ashley: likewise.
2929         * catherine: likewise.
2930         * charisma: likewise.
2931         * claire.py: likewise.
2932         * db_access.py: likewise.
2933         * denise: likewise.
2934         * halle: likewise.
2935         * heidi: likewise.
2936         * helena: likewise.
2937         * jenna: likewise.
2938         * jennifer: likewise.
2939         * jeri: likewise.
2940         * julia: likewise.
2941         * katie.py: likewise.
2942         * kelly: likewise.
2943         * lisa: likewise.
2944         * logging.py: likewise.
2945         * madison: likewise.
2946         * melanie: likewise.
2947         * natalie: likewise.
2948         * neve: likewise.
2949         * rene: likewise.
2950         * tea: likewise.
2951         * utils.py: likewise.
2952         * ziyi: likewise.
2953
2954 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2955
2956         * utils.py (parse_changes): use <string>.startswith() rather than
2957         string.find().
2958
2959 2002-08-27  Anthony Towns  <ajt@debian.org>
2960
2961         * katie.py (in_override_p): when searching for a source override,
2962         and the dsc query misses, search for both udeb and deb overrides
2963         as well. Should fix the UNACCEPT issues with udebs.
2964
2965 2002-08-24  James Troup  <james@nocrew.org>
2966
2967         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2968         source+binary package finding code which was causing severe
2969         performance degradation with postgres 7.2.
2970
2971 2002-08-14  James Troup  <james@nocrew.org>
2972
2973         * julia (main): use the pwd.getpwall() to get system user info
2974         rather than trying to read a password file.  Add a -n/--no-action
2975         option.
2976
2977         * cron.hourly: julia no longer takes any arguments.
2978         * cron.hourly-non-US: likewise.
2979
2980 2002-08-07  James Troup  <james@nocrew.org>
2981
2982         * katie (install): handle multi-suite uploads when CopyChanges
2983         and/or CopyKatie are in use, ensuring we only copy stuff once.
2984
2985 2002-08-01  Ryan Murray  <rmurray@debian.org>
2986
2987         * wanna-build/trigger.daily: initial commit, with locking
2988         * cron.buildd: add locking against daily run
2989
2990 2002-07-30  James Troup  <james@nocrew.org>
2991
2992         * melanie (main): readd creation of suite_ids_list so melanie is
2993         remotely useful again.
2994
2995         * katie.conf: adopt for woody release; diable
2996         StableDislocationSupport, add oldstable, adjust other suites and
2997         mappings, fix up location.
2998         * katie.conf-non-US: likewise.
2999         * katie.conf-security: likewise.
3000
3001         * apt.conf.stable: adapt for woody release; add oldstable, adjust
3002         stable.
3003         * apt.conf.stable-non-US: likewise.
3004
3005         * apt.conf-security: adapt for woody release; adding oldstable,
3006         oldstable, adjust stable and testing.
3007         * cron.daily-security: likewise.
3008         * cron.buildd-security: likewise.
3009
3010         * apt.conf: adapt for woody release; rename woody-proposed-updates
3011         to testing-proposed-updates and proposed-updates to
3012         old-proposed-updates.
3013         * apt.conf-non-US: likewise.
3014
3015         * vars-non-US (copyoverrides): add sarge.
3016         * vars (copyoverrides): likewise.
3017
3018         * vars-security (suites): add oldstable.
3019
3020 2002-07-22  Ryan Murray  <rmurray@debian.org>
3021
3022         * apt.conf.security-buildd: use suite codenames instead of
3023           distnames.
3024
3025 2002-07-16  James Troup  <james@nocrew.org>
3026
3027         * denise (main): fix filenames for testing override files.
3028
3029 2002-07-14  James Troup  <james@nocrew.org>
3030
3031         * jennifer (process_it): call check_md5sums later so we can check
3032         files in the .dsc too
3033         (check_md5sums): check files in the .dsc too.  Check both md5sum
3034         and size.
3035
3036         * melanie (main): use parse_args() and join_with_commas_and() from
3037         utils.  If there's nothing to do, say so and exit, don't ask for
3038         confirmation etc.
3039
3040         * amber (join_with_commas_and): moved from here to ...
3041         * utils.py (join_with_commas_and): here.
3042
3043 2002-07-13  James Troup  <james@nocrew.org>
3044
3045         * madison (main): use parse_args() from utils.  Support
3046         -c/--component.
3047
3048         * jenna (parse_args): moved from here to ...
3049         * utils.py (parse_args): here.
3050
3051         * katie.conf (Architectures): minor corrections to the description
3052         for arm, mips and mipsel.
3053         * katie.conf-non-US (Architectures): likewise.
3054         * katie.conf-security (Architectures): likewise.
3055
3056         * cron.daily-security: use natalie's new -a/--add functionality to
3057         flesh out the security overrides.
3058
3059 2002-07-12  James Troup  <james@nocrew.org>
3060
3061         * cron.buildd (ARCHS): add arm.
3062
3063         * katie.conf: 2.2r7 was released.
3064         * katie.conf-non-US: likewise.
3065
3066         * utils.py (parse_changes): handle a multi-line field with no
3067         starting line.
3068
3069 2002-06-25  James Troup  <james@nocrew.org>
3070
3071         * templates/amber.advisory (To): add missing email address since
3072         __WHOAMI__ is only a name.
3073
3074         * katie.conf-security (Melane::LogFile): correct to go somewhere
3075         katie has write access to.
3076         (Location::/org/security.debian.org/ftp/dists/::Suites): add
3077         Testing.
3078
3079         * natalie: add support for -a/-add which adds packages only
3080         (ignoring changes and deletions).
3081
3082         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
3083         use FindB, not get.
3084
3085 2002-06-22  James Troup  <james@nocrew.org>
3086
3087         * jennifer (check_files): validate the package name and version
3088         field.  If 'Package', 'Version' or 'Architecture' are missing,
3089         don't try any further checks.
3090         (check_dsc): likewise.
3091
3092         * utils.py (re_taint_free): add '~' as a valid character.
3093
3094 2002-06-20  Anthony Towns  <ajt@debian.org>
3095
3096         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
3097
3098 2002-06-09  James Troup  <james@nocrew.org>
3099
3100         * jennifer (check_files): reduce useless code.
3101
3102         * cron.daily-security: run symlinks -dr on $ftpdir.
3103
3104         * vars-security (ftpdir): add.
3105
3106 2002-06-08  James Troup  <james@nocrew.org>
3107
3108         * neve (update_override_type): transaction is handled higher up in
3109         main().
3110         (update_priority): likewise.
3111         (process_sources): remove code that makes testing a duplicate of
3112         stable.
3113         (process_packages): likewise.
3114
3115         * templates/amber.advisory: add missing mail headers.
3116
3117         * cron.daily-security: also call apt-ftparchive clean for
3118         apt.conf.buildd-security.
3119         * cron.weekly: likewise.
3120
3121         * amber (do_upload): write out a list of source packages (and
3122         their version) uploaded for testing.
3123         (make_advisory): add more Subst mappings for the mail headers.
3124         (spawn): check for suspicious characters in the command and abort
3125         if their found.
3126
3127 2002-06-07  James Troup  <james@nocrew.org>
3128
3129         * ziyi (main): remove the 'nonus'/'security' hacks and use
3130         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
3131         the lower level Release files, even if they don't exist.  fubar
3132         out if we can't open a lower level Release file for writing.
3133
3134         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
3135         ziyi.
3136         * katie.conf-security (Dinstall): likewise.
3137
3138         * amber (do_upload): renamed from get_file_list().  Determine the
3139         upload host from the original component.
3140         (init): Add a -n/--no-action option.  Fix how we get changes_files
3141         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
3142         sys.argv).  Add an Options global.
3143         (make_advisory): support -n/--no-action.
3144         (spawn): likewise.
3145         (main): likewise.
3146         (usage): document -n/--no-action.
3147
3148         * cron.buildd-security: fix path to Packages-arch-specific in
3149         quinn-diff invocation.
3150
3151         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
3152         to proper suite names (i.e. stable, testing) rather than codenames
3153         (potato, woody).
3154         (Dinstall::DefaultSuite): likewise.
3155         (Suite): likewise.
3156         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
3157         * vars-security (suites): likewise.
3158         * apt.conf-security: likewise.
3159
3160         * katie.conf-security (Component): add "updates/" prefix.
3161         (Suite::*::Components): likewise.
3162         (ComponentMappings): new; map all {ftp-master,non-US} components
3163         -> updates/<foo>.
3164
3165         * katie.conf-security (Natalie): removed; the options have
3166         defaults and ComponentPosition is used by alyson which doesn't
3167         work on security.d.o.
3168         (Amber): replace UploadHost and UploadDir with ComponentMappings
3169         which is a mapping of components -> URI.
3170         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
3171         (SuiteMappings): use "silent-map" in preference to "map".
3172
3173         * cron.unchecked-security: fix call to cron.buildd-security.
3174
3175         * cron.daily-security: map local suite (stable) -> override suite
3176         (potato) when fixing overrides.  Correct component in natalie call
3177         to take into account "updates/" prefix.  Fix cut'n'waste in
3178         override.$dist.all3 generation, the old files weren't being
3179         removed, so they were endlessly growing.
3180
3181         * neve (main): don't use .Find for the CodeName since we require
3182         it.  Location::*::Suites is a ValueList.
3183         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
3184         out on expired keys, just warn.
3185         (update_override_type): new function; lifted from alyson.
3186         (update_priority): likewise.
3187         (main): use update_{override_type,priority}().
3188
3189         * jennifer (check_distributions): remove redunant test for
3190         SuiteMappings; ValueList("does-not-exist") returns [] which is
3191         fine.  Add support for a "silent-map" type which doesn't warn
3192         about the mapping to the user.
3193         (check_files): add support for ComponentMappings, similar to
3194         SuiteMappings, but there's no type, just a source and a
3195         destination and the original component is stored in "original
3196         component".
3197         * katie.py (Katie.dump_vars): add "original component" as an
3198         optionsal files[file] dump variable.
3199
3200         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
3201         query.  Add support for section-less legacy locations like current
3202         security.debian.org through YetAnotherConfigBoolean
3203         'LegacyStableHasNoSections'.
3204         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
3205
3206         * utils.py (real_arch): moved here from ziyi.
3207         * ziyi (real_arch): moved to utils.py.
3208         * ziyi (main): likewise.
3209
3210         * claire.py (find_dislocated_stable): use real_arch() with
3211         filter() to strip out source and all.
3212         * neve (main): likewise.
3213         * rene (main): likewise.
3214         * jeri (parse_packages): likewise.
3215
3216 2002-06-06  James Troup  <james@nocrew.org>
3217
3218         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
3219         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
3220         doing.
3221
3222 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3223
3224         * jeri (check_joey): check if the line contains two elements
3225         before accessing the second.  Also, strip trailing spaces as well
3226         as the newline.
3227         * halle (check_joey): likewise.
3228
3229 2002-06-05  James Troup  <james@nocrew.org>
3230
3231         * cron.unchecked-security: new file; like cron.unchecked but if
3232         there's nothing to do exit so we don't call cron.buildd-security.
3233
3234         * apt.conf.buildd-security: new file.
3235
3236         * vars (archs): alphabetize.
3237         * vars-non-US (archs): likewise.
3238
3239         * vars-security: add unchecked.
3240
3241         * madison (main): reduce rather bizarrely verbose and purposeless
3242         code to print arches to a simple string.join.
3243
3244         * katie.conf (Suites::Unstable): add UdebComponents, a new
3245         valuelist of suites, used by jenna to flesh out the list of
3246         <suite>_main-debian-installer-binary-<arch>.list files generated.
3247         (Dinstall): add StableDislocationSupport, a new boolean used by
3248         jenna to enable or disable stable dislocation support
3249         (i.e. claire), as true.
3250
3251         * katie.conf (Dinstall): add StableDislocationSupport, a new
3252         boolean used by jenna to enable or disable stable dislocation
3253         support (i.e. claire), as true.
3254         * katie.conf-non-US: likewise.
3255         * katie.conf-security: likewise.
3256
3257         * cron.daily-security: generate .all3 overrides for the buildd
3258         support.  Freshen a local copy of Packages-arch-specific from
3259         buildd.debian.org.
3260
3261         * claire.py (find_dislocated_stable): disable the support for
3262         files in legacy-mixed locations since none of the Debian archives
3263         have any anymore.
3264
3265         * helena: new script; produces a report on NEW and BYHAND
3266         packages.
3267
3268         * jenna: rewritten from scratch to fix speed problems.  Run time
3269         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
3270         minutes, 105 seconds are the monster query and 70 odd seconds is
3271         claire.
3272
3273         * apt.conf.buildd (Default): remove MaxContentsChange as it's
3274         irrelevant.
3275
3276 2002-06-05  Ryan Murray  <rmurray@debian.org>
3277
3278         * cron.buildd-security: new file.
3279
3280 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
3281
3282         * denise (list): take a file argument and use it.
3283         (main): don't abuse sys.stdout, just write to the file.
3284
3285         * claire.py (usage): Fix misspelling.
3286         (clean_symlink): Simplify.
3287         (find_dislocated_stable): Avoid unnecessary work.
3288
3289 2002-05-29  James Troup  <james@nocrew.org>
3290
3291         * cameron: removed; apt-ftparchive can simply walk the directory.
3292
3293 2002-05-26  Anthony Towns  <ajt@debian.org>
3294
3295         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
3296         for the autobuilders.
3297
3298 2002-05-24  Ryan Murray  <rmurray@debian.org>
3299
3300         * cron.buildd: update override files before running apt-ftparchive
3301
3302 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3303
3304         * amber (main): remove extra space in prompt.
3305
3306         * utils.py (validate_changes_file_arg): use original filename in
3307         error messages.
3308
3309         * jeri (check_joey): close file after use.
3310         (parse_packages): likewise.
3311         (main): setup debug option properly.
3312
3313         * melanie (main): remove unused packages variable and simplify the
3314         code to build up con_packages by using repr().
3315
3316 2002-05-23  James Troup  <james@nocrew.org>
3317
3318         * lisa (recheck): when we reject, also return 0 so the package is
3319         skipped.
3320         (sg_compare): fix note sorting.
3321         (recheck): remove the .katie file after rejection.
3322
3323         * katie.py (Katie.accept): accepted auto-build support take 3;
3324         this time adding support for security.  Security needs a) non-pool
3325         files copied rather than symlinked since accepted is readable only
3326         by katie/security and www-data needs to be able to see the files,
3327         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
3328         AcceptedAutoBuildSuites and is a ValueList containing the suites.
3329         SecurityAcceptedAutoBuild is a new boolean which controls whether
3330         or not normal or security style is used.  The unstable_accepted
3331         table was renamed to accepted_autobuild and a suite column added.
3332         Also fix a bug noticed by Ryan where an existent orig.tar.gz
3333         didn't have it's last_used/in_accepted flags correctly updated.
3334         * katie (install): likewise.
3335         * rhona (clean_accepted_autobuild): likewise.
3336
3337 2002-05-22  James Troup  <james@nocrew.org>
3338
3339         * lisa (sort_changes): new function; sorts changes properly.
3340         Finally.
3341         (sg_compare): new function; helper for sort_changes().  Sorts by
3342         have note and time of oldest upload.
3343         (indiv_sg_compare): new function; helper for sort_changes().
3344         Sorts by source version, have source and filename.
3345         (main): use sort_changes().
3346         (changes_compare): obsoleted; removed.
3347
3348 2002-05-20  James Troup  <james@nocrew.org>
3349
3350         * rhona (clean_accepted_autobuild): don't die if a file we're
3351         trying to remove doesn't exist.  Makes rhona more friendly to
3352         katie/katie.py crashes/bugs without any undue cost.
3353
3354 2002-05-19  James Troup  <james@nocrew.org>
3355
3356         * lisa (main): if sorting a large number of changes give some
3357         feedback.
3358         (recheck): new function, run the same checks (modulo NEW,
3359         obviously) as katie does, if they fail do the standard
3360         reject/skip/quit dance.
3361         (do_pkg): use it.
3362
3363         * katie (install): don't try to unlink the symlink in the
3364         AcceptedAutoBuild support if the destination is not a symlink (or
3365         doesn't exist).  Avoids unnecessary bombs on previous partial
3366         accepts and will still bomb hard if the file exists and isn't a
3367         symlink.
3368
3369         * utils.py: blah, commands _is_ used when the mail stuff isn't
3370         commented out like it is in my test environment.
3371
3372         * lisa (changes_compare): "has note" overrides everything else.
3373         Use .katie files rather than running parse_changes, faster and
3374         allows "has note" to work.  Correct version compare, it was
3375         reversed.  Ctime check should only kick in if the source packages
3376         are not the same.
3377         (print_new): print out and return any note.  Rename 'ret_code' to
3378         'broken'.
3379         (edit_new): renamed from spawn_editor.  Don't leak file
3380         descriptors.  Clean up error message if editor fails.
3381         (edit_note): new function, allows one to edit notes.
3382         (do_new): add note support, editing and removing.
3383         (init): kill -s/--sort; with notes we always want to use our
3384         sorting method.
3385         (usage): likewise.
3386
3387         * katie.py (Katie.dump_vars): add "lisa note" as an optional
3388         changes field.
3389
3390         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
3391         it default to 0.  Adapt tests to assume it's boolean.
3392         * fernanda.py (check_changes): adjust call appropriately.
3393         * halle (check_changes): likewise.
3394         * jennifer (check_changes): likewise.
3395         * jeri (check_changes): likewise.
3396         * shania (flush_orphans): likewise.
3397
3398         * jennifer (check_dsc): pass is_a_dsc by name when calling
3399         build_file_list() for clarity.
3400         * shania (flush_orphans): likewise.
3401         * tea (check_missing_tar_gz_in_dsc): likewise.
3402
3403         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
3404         calling parse_changes() for clarity.
3405         * tea (check_dscs): likewise.
3406
3407         * utils.py (parse_changes): make dsc_whitespace_rules default to
3408         not true.
3409         * halle (check_changes): adjust call appropriately.
3410         * jennifer (check_changes): likewise.
3411         * jeri (check_changes): likewise.
3412         * lisa (changes_compare): likewise.
3413         * utils.py (changes_compare): likewise.
3414         * melanie (main): likewise.
3415         * shania (flush_orphans): likewise.
3416         * fernanda.py (check_changes): likewise.
3417
3418 2002-05-18  James Troup  <james@nocrew.org>
3419
3420         * katie.py (Katie.dump_vars): make the .katie file unreadable,
3421         it's not useful and by and large a duplication of information
3422         available in readable format in other files.
3423
3424 2002-05-16  Ryan Murray  <rmurray@debian.org>
3425
3426         * melanie: Dir::TemplatesDir -> Dir::Templates
3427
3428 2002-05-15  Ryan Murray  <rmurray@debian.org>
3429
3430         * cameron: correct the use of os.path.join
3431
3432 2002-05-15  Anthony Towns  <ajt@debian.org>
3433
3434         * ziyi: Update to match the new format for Architectures/Components
3435         in katie.conf.
3436
3437 2002-05-14  James Troup  <james@nocrew.org>
3438
3439         * amber: new script; 'installer' wrapper script for the security
3440         team.
3441
3442         * katie.py (Katie.announce): remove unused 'dsc' local
3443         variable. (pychecker)
3444
3445         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
3446
3447         * neve: don't import sys, we don't use it. (pychecker)
3448         (check_signature): fix return type mismatch. (pychecker)
3449
3450         * utils.py: don't import commands, we don't use it.  (pychecker)
3451
3452         * katie (install): SpecialAcceptedAutoBuild is a boolean.
3453
3454         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
3455         obsoleted by the change to "othercomponents" handling in jennifer
3456         detailed below.
3457         (Katie.cross_suite_version_check): new function; implements
3458         cross-suite version checking rules specified in the conf file
3459         while also enforcing the standard "must be newer than target
3460         suite" rule.
3461         (Katie.check_binary_against_db): renamed, since it's invoked once
3462         per-binary, "binaries" was inaccurate.  Use
3463         cross_suite_version_check() and don't bother with the "oldfiles"
3464         rubbish as jennifer works out "othercomponents" herself now.
3465         (Katie.check_source_against_db): use cross_suite_version_check().
3466
3467         * katie (check): the version and file overwrite checks
3468         (check_{binary,source,dsc}_against_db) are not per-suite.
3469
3470         * jennifer (check_files): less duplication of
3471         'control.Find("Architecture", "")' by putting it in a local
3472         variable.
3473         (check_files): call check_binary_against_db higher up since it's
3474         not a per-suite check.
3475         (check_files): get "othercomponents" directly rather than having
3476         check_binary_against_db do it for us.
3477
3478         * heidi (main): 'if x:', not 'if x != []:'.
3479         * katie.py (Katie.in_override_p): likewise.
3480         (Katie.check_dsc_against_db): likewise.
3481         * natalie (main): likewise.
3482         * rene (main): likewise.
3483         * ziyi (real_arch): likewise.
3484
3485         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
3486         and OverrideType are now value lists, not lists.
3487         * andrea (main): likewise.
3488         * cindy (main): likewise.
3489         * claire.py (find_dislocated_stable): likewise.
3490         * denise (main): likewise.
3491         * jenna (main): likewise.
3492         * jennifer (check_distributions): likewise.
3493         (check_files): likewise.
3494         (check_urgency): likewise (Urgency::Valid).
3495         * jeri (parse_packages): likewise.
3496         * neve (main): likewise (and Location::%s::Suites).
3497         * rene (main): likewise.
3498
3499 2002-05-13  James Troup  <james@nocrew.org>
3500
3501         * katie.py (Katie.check_source_against_db): correct case of reject
3502         message to be consistent with binary checks.
3503
3504         * jennifer (get_status_output): don't leak 2 file descriptors per
3505         invocation.
3506         (check_signature): add missing '\n' to "duplicate status token"
3507         error message.
3508
3509 2002-05-09  James Troup  <james@nocrew.org>
3510
3511         * utils.py (validate_changes_file_arg): new function; validates an
3512         argument which should be a .changes file.
3513         * ashley (main): use it.
3514         * lisa (main): likewise.
3515
3516         * katie.py (Katie.check_dsc_against_db): since there can be more
3517         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
3518         entry still exists in files.
3519
3520         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
3521         files, since check_dsc_against_db() deletes the .orig.tar.gz
3522         entry.
3523
3524         * cameron: cleanups.
3525
3526         * utils.py (changes_compare): change sort order so that source
3527         name and source version trump 'have source'; this should fix
3528         UNACCEPT problems in katie where -1 hppa+source & i386, -2
3529         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
3530         by Ryan.
3531
3532         * lisa (main): allow the arguments to be .katie files too.
3533
3534 2002-05-07  Ryan Murray  <rmurray@debian.org>
3535
3536         * cron.buildd: add s390 to arch list again
3537
3538 2002-05-05  Ryan Murray  <rmurray@debian.org>
3539
3540         * cron.buildd: new script, update w-b database from unstable_accepted
3541         table
3542         * cameron: new script, take list in unstable_accepted and write out
3543         a file list for apt-ftparchive
3544         * apt.conf.buildd: new apt configuration for Packages/Sources for
3545         unstable_accepted
3546         * vars: add s390 to arch list.
3547
3548 2002-05-03  James Troup  <james@nocrew.org>
3549
3550         * neve (main): don't hard code the calling user as that doesn't
3551         work with modern postgres installs.  Fix psql invocation for
3552         init_pool.sql (database name required).  Dont' hard code the
3553         database name.
3554         (process_sources): add support for fingerprint and install_date.
3555         (process_packages): add support for fingerprint.
3556         (do_sources): pass in the directory, fingerprint support needs it.
3557         (get_status_output): borrowed from jennifer.
3558         (reject): likewise.
3559         (check_signature): likewise.
3560
3561         * katie (install): only try to log urgencies if Urgency_Logger is
3562         defined.
3563         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
3564         defined; only close Urgency_Logger if it's defined.
3565
3566         * catherine (poolize): adapt for Dir rationalization.
3567         * claire.py (find_dislocated_stable): likewise.
3568         * denise (main): likewise.
3569         * halle (check_joey): likewise.
3570         * jenna: likewise.
3571         * jennifer: likewise.
3572         * jeri: likewise.
3573         * katie.py: likewise.
3574         * katie: likewise.
3575         * lisa (do_bxa_notification): likewise.
3576         * logging.py (Logger.__init__): likewise
3577         * rene (main): likewise.
3578         * rhona (clean): likewise.
3579         * shania (init): likewise.
3580         * tea: likewise.
3581         * ziyi: likewise.
3582
3583         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
3584         FindB, not FindI.
3585
3586         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
3587         boolean, use FindB, not get.
3588
3589         * katie.py (Katie.check_dsc_against_db): ignore duplicate
3590         .orig.tar.gz's which are an exact (size/md5sum) match.
3591
3592         * ashley (main): really allow *.katie files as arguments too;
3593         noticed by aj.
3594
3595         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
3596
3597 2002-05-03  Anthony Towns  <ajt@debian.org>
3598
3599         * ziyi: support for security.
3600
3601 2002-05-02  James Troup  <james@nocrew.org>
3602
3603         * jennifer (accept): call Katie.check_override() unconditional as
3604         no-mail check moved into that function.
3605         (do_byhand): likewise.
3606
3607         * katie.py (Katie.check_override): don't do anything if we're a)
3608         not sending mail or b) the override disparity checks have been
3609         disbled via Dinstall::OverrideDisparityCheck.
3610
3611         * jennifer (check_files): don't hard code Unstable as the suite
3612         used to check for architecture validity; use
3613         Dinstall::DefaultSuite instead, if it exists.
3614         (accept): conditionalize
3615
3616         * katie.py (Katie.update_subst): support global maintainer
3617         override with Dinstall::OverrideMaintainer.
3618
3619         * jennifer (check_distributions): new function, Distribution
3620         validation and mapping.  Uses new SuiteMappings variable from
3621         config file to abstract suite mappings.
3622         (check_changes): call it.
3623
3624         * natalie: renamed; nothing imports or likely will for some time.
3625
3626         * denise (main): remove unused natalie import and init().
3627
3628         * natalie.py (init): removed.
3629         (main): initalize here instead and don't hardcode the database
3630         name.
3631
3632 2002-04-30  James Troup  <james@nocrew.org>
3633
3634         * katie.py (Katie.close_bugs): new function, split out from
3635         announce().
3636         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3637         true.
3638         (Katie.close_bugs): new function, split out
3639         (Katie.close_bugs): return immediately if there are no bugs to
3640         close.
3641
3642         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3643         * katie (do_reject): likewise.
3644         (stable_install): likewise.
3645         * katie.py (Katie.announce): likewise.
3646         (Katie.accept): likewise.
3647         (Katie.check_override): likewise.
3648         (Katie.do_reject): likewise.
3649         * lisa (do_bxa_notification): likewise.
3650         * melanie (main): likewise.
3651
3652         * utils.py (TemplateSubst): change second argument to be a
3653         filename rather than a template since every caller opened a file
3654         on the fly which was ugly and leaked file descriptor.
3655
3656 2002-04-29  James Troup  <james@nocrew.org>
3657
3658         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3659         <hertzog@debian.org> to send 'accepted' announce mails to the
3660         PTS. [#128140]
3661
3662 2002-04-24  James Troup  <james@nocrew.org>
3663
3664         * init_pool.sql (unstable_accepted): add two new fields to
3665         unstable_accepted; in_accepted is a boolean indicating whether or
3666         not the file is in accepted and last_used is a timestamp used by
3667         rhona to determine when to remove symlinks for installed packages.
3668
3669         * katie.py (Katie.accept): auto-build support take 2.  Create
3670         symlinks for all files into a seperate directory.  Add files to
3671         unstable_accepted as paths to the new directory; mark them as
3672         being in accepted for cameron.  Properly conditionalize it on a
3673         configuration variable.
3674
3675         * katie (install): likewise.  Update symlinks to point into the
3676         pool; mark the files for later deletion by rhona and mark them as
3677         not being in accepted for cameron.
3678
3679         * rhona (clean_accepted_autobuild): new function.
3680
3681 2002-04-22  James Troup  <james@nocrew.org>
3682
3683         * jennifer (check_files): handle db_access.get_location_id()
3684         returning -1 properly/better.
3685
3686         * rhona (clean_fingerprints): new function.
3687
3688 2002-04-21  James Troup  <james@nocrew.org>
3689
3690         * utils.py (touch_file): unused; remove.
3691         (plural): likewise.
3692
3693         * jennifer (check_files): close file descriptor used to get the
3694         control file.
3695         (check_md5sums): likewise.
3696         (callback): likewise.
3697
3698         * katie.py (Katie.do_reject): handle manual rejects much better;
3699         call the editor first and get confirmation from the user before
3700         proceeding.
3701
3702         * jennifer (check_signature): prefix_multi_line_string() moved to
3703         utils.
3704
3705         * utils.py (prefix_multi_line_string): moved here from jennifer.
3706
3707 2002-04-20  James Troup  <james@nocrew.org>
3708
3709         * lisa (main): handle non-existent files.
3710
3711         * ashley (main): allow *.katie files as arguments too.
3712
3713 2002-04-19  James Troup  <james@nocrew.org>
3714
3715         * katie.py (Katie.accept): add stuff to help auto-building from
3716         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3717         in the pool), create a symlink to it in the accepted directory and
3718         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3719
3720         * katie (install): undo the "auto-building from accepted" stuff
3721         (i.e. remove the .orig.tar.gz symlink and remove the files from
3722         unstable_accepted table).
3723
3724 2002-04-16  James Troup  <james@nocrew.org>
3725
3726         * jennifer (upload_too_new): fix typo which was causing all
3727         timestamp comparisons to be against the .changes file.  Also move
3728         back to the original directory so we do the comparisons against
3729         accurate timestamps.
3730
3731         * tea (check_missing_tar_gz_in_dsc): new function.
3732
3733         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3734         file mentioned in the .dsc.
3735
3736         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3737         way mails reach debian-{devel-,}changes@l.d.o.
3738
3739 2002-04-02  Ryan Murray  <rmurray@debian.org>
3740
3741         * cron.daily: run shania after rhona
3742         * cron.daily-non-US: likewise.
3743
3744 2002-04-01  James Troup  <james@nocrew.org>
3745
3746         * katie: re-add proposed-updates/stable install support.
3747
3748         * katie.py (Katie.dump_vars): add changes["changes"] as an
3749         optional field; should be mandatory later.
3750
3751 2002-03-31  James Troup  <james@nocrew.org>
3752
3753         * katie (install): support a Suite::<foo>::CopyKatie similar to
3754         CopyChanges.  Done seperately because .katie files don't need to
3755         be mirrored and will probably be copied to another directory as a
3756         result.
3757
3758         * halle (main): add missing debug to options.
3759
3760 2002-03-29  James Troup  <james@nocrew.org>
3761
3762         * madison (main): add a -r/--regex option.
3763
3764 2002-03-26  James Troup  <james@nocrew.org>
3765
3766         * lisa: don't trample on changes["distribution"]; make a copy of
3767         it as changes["suite"] instead and use that.
3768
3769 2002-03-16  Anthony Towns  <ajt@debian.org>
3770
3771         * templates/lisa.bxa_notification: Fix some grammatical errors.
3772         Encourage contact via bxa@ftp-master email address.
3773
3774 2002-03-15  James Troup  <james@nocrew.org>
3775
3776         * jennifer (check_timestamps): remove bogus raise in except.
3777
3778 2002-03-15  Anthony Towns  <ajt@debian.org>
3779
3780         * cron.monthly: rotate mail/archive/bxamail as well as
3781         mail/archive/mail. This is for a complete archive of
3782         correspondence with the BXA.
3783
3784 2002-03-14  Anthony Towns  <ajt@debian.org>
3785
3786         * crypto-in-main changes.
3787
3788         * utils.py (move, copy): add an optional perms= parameter to let you
3789         set the resulting permissions of the moved/copied file
3790         * katie.py (force_move): rejected/morgued files should be unreadable
3791         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3792         should be unreadable.
3793
3794 2002-03-07  Ryan Murray  <rmurray@debian.org>
3795
3796         * katie (install): check for existance of "files id" key as well as
3797         it being set to a valid value.
3798         * katie (install): check for existense and valid value for location
3799         id as well
3800
3801 2002-03-05  Ryan Murray  <rmurray@debian.org>
3802
3803         * katie.py (do_reject): reread the reason file after editing it.
3804
3805 2002-02-25  James Troup  <james@nocrew.org>
3806
3807         * jennifer (check_changes): don't enforce sanity in .changes file
3808         names since it doesn't seem to be possible; pcmica-cs and similar
3809         freak show packages in particular cause real problems.
3810
3811         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3812         each dsc_file since the .orig.tar.gz checking code now uses it as
3813         a boolean.  Fixes bizarro rejections which bogusly claimed
3814         .diff.gz md5sum/size was incorrect.
3815
3816 2002-02-24  James Troup  <james@nocrew.org>
3817
3818         * katie (process_it): reset reject_message.
3819
3820 2002-02-22  James Troup  <james@nocrew.org>
3821
3822         * db_access.py(set_files_id): disable use of
3823         currval('files_id_seq') because it was taking 3 seconds on auric
3824         which is insane (most calls take < 0.01) and simply call
3825         get_files_id() for the return value instead.
3826
3827         * katie.py (Katie.do_query): convenience function; unused by
3828         default, useful for profiling.
3829         * db_access.py (do_query): likewise.
3830
3831         * katie (install): fix insert SQL call when binary has no source.
3832
3833         * lisa (determine_new): auto-correct non-US/main to non-US.
3834         (determine_new): add a warning when adding things to stable.
3835         (edit_index): use our_raw_input().
3836         (edit_overrides): likewise.
3837         (do_new): likewise.  Use re.search() not re.match() since the
3838         default answer may not be the first one.
3839         (do_byhand): likewise.
3840         (do_new): Default to 'S'kip and never 'A'dd.
3841
3842         * jennifer (action): pass prompt to our_raw_input().
3843         * melanie (game_over): likewise.
3844         * katie (action): likewise.
3845
3846         * utils.py (our_raw_input): add an optional prompt argument to
3847         make the function more usable as a drop in replacement for
3848         raw_input().
3849
3850         * jennifer (check_files): correct reject() to not double prefix
3851         when using katie.py based functions.
3852         (check_dsc): likewise.
3853
3854         * katie.py (Katie.reject): prepend a new line if appropriate
3855         rathen than appending one to avoid double new lines when caller
3856         adds one of his own.
3857
3858         * lisa (determine_new): warn if the package is also in other
3859         components.
3860
3861 2002-02-20  James Troup  <james@nocrew.org>
3862
3863         * jennifer (check_files): if .changes file lists "source" in
3864         Architecture field, there must be a .dsc.
3865
3866 2002-02-15  James Troup  <james@nocrew.org>
3867
3868         * ashley (main): add some missing fields.
3869
3870         * katie.py (Katie.check_dsc_against_db): fix to take into account
3871         the fact that the .orig.tar.gz might be in byhand, accepted or
3872         new.  Also fix calling of reject().
3873         (Katie.check_binaries_against_db): fix calling of reject().
3874         (Katie.check_source_against_db): likewise.
3875         (Katie.dump_vars): add missing variables used for bug closures.
3876
3877         * lisa (changes_compare_by_time): sort by reverse time.
3878
3879         * katie.py (Katie.accept): log.
3880         (Katie.dump_vars): missing has_key test for optional changes fields.
3881
3882         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3883         (process_it): traceback goes to stderr, not stdout.
3884         (acknowledge_new): log.
3885         (do_byhand): likewise.
3886
3887         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3888
3889         * add_constraints.sql: add grants for the new fingerprint table.
3890
3891 2002-02-13  James Troup  <james@nocrew.org>
3892
3893         * katie (do_reject): basename the .changes filename before trying
3894         to use it to construct the .reason filename.
3895         (process_it): call Katie.update_subst() so do_reject() DTRT with
3896         the mail template.
3897         (do_reject): setup the mail template correctly.
3898
3899 2002-02-12  James Troup  <james@nocrew.org>
3900
3901         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3902         (check_files): don't abuse global dictionaries.
3903         (Ent): use all variables.
3904         (check_timestamps): don't abuse global dictionaries.
3905
3906         * fernanda.py: renamed to .py so lisa can import it.
3907         (check_dsc): remove unused local variables (pychecker).
3908         (display_changes): split off from check_changes.
3909
3910         * katie: rewritten; most of the functionality moves to jennifer;
3911         what's left is the code to install packages once a day from the
3912         'accepted' directory.
3913
3914         * jennifer: new program, processes packages in 'unchecked'
3915         (i.e. most of the non-install functionality of old katie).
3916
3917         * katie.py: common functions shared between the clique of
3918         jennifer, lisa and katie.
3919
3920         * lisa: new program; handles NEW and BYHAND packages.
3921
3922         * jeri (usage): new function.
3923         (main): use it.
3924         (check_package): remove unused local variable (pychecker).
3925
3926         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3927         binaries and source.  Add install_date to source.
3928
3929         * halle (usage): new function.
3930         (main): use it.  Remove unused options.
3931         (check_changes): remove unused local variable (pychecker).
3932
3933         * add_constraints.sql: add fingerprint references.
3934
3935         * db_access.py (get_or_set_fingerprint_id): new function.
3936
3937         * ashley (main): new program; dumps the contents of a .katie file
3938         to stdout.
3939
3940         * alyson (main): remove option handling since we don't actually
3941         support any.
3942         * cindy (main): likewise.
3943
3944         * remove unnecessary imports and pre-define globals (pychecker).
3945
3946 2002-02-11  Anthony Towns  <ajt@debian.org>
3947
3948         * added installation-report and upgrade-report pseudo-packages
3949
3950 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3951
3952         * katie (update_subst): use Dinstall::TrackingServer.
3953         * melanie (main): likewise.
3954
3955 2002-01-27  James Troup  <james@nocrew.org>
3956
3957         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3958         noticing, jgg@ for fix.
3959
3960 2002-01-19  James Troup  <james@nocrew.org>
3961
3962         * utils.py (extract_component_from_section): handle non-US
3963         non-main properly.
3964
3965 2002-01-12  James Troup  <james@nocrew.org>
3966
3967         * madison: add support for -S/--source-and-binary which displays
3968         information for the source package and all it's binary children.
3969
3970 2002-01-13  Anthony Towns  <ajt@debian.org>
3971
3972         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3973         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3974           and 2002 key ids.
3975         * katie.conf-non-US: Likewise.
3976         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3977           multiple keys automatically. This is probably only useful for
3978           transitioning from an expired (or revoked?) key.
3979
3980 2002-01-08  Ryan Murray  <rmurray@debian.org>
3981
3982         * debian/python-dep: new file that prints out python:Depends for
3983           substvars
3984         * debian/control: use python:Depends, build-depend on python
3985           lower Depends: on postgresql to Suggests:
3986         * debian/rules: determine python version, install to the correct
3987           versioned dir
3988
3989 2001-12-18  Anthony Towns  <ajt@debian.org>
3990
3991         * ziyi: unlink Release files before overwriting them (in case they've
3992           been merged)
3993         * ziyi: always include checksums/sizes for the uncompressed versions
3994           of Sources and Packages, even if they're not present on disk
3995
3996 2001-11-26  Ryan Murray  <rmurray@debian.org>
3997
3998         * ziyi (main): add SigningPubKey config option
3999         * katie.conf: use SigningPubKey config option
4000         * katie.conf-non-US: likewise
4001
4002 2001-11-24  James Troup  <james@nocrew.org>
4003
4004         * katie (acknowledge_new): log newness.
4005
4006 2001-11-24  Anthony Towns  <ajt@debian.org>
4007
4008         * ziyi (real_arch): bail out if some moron forgot to reset
4009         untouchable on stable.
4010         (real_arch): source Release files.
4011
4012 2001-11-19  James Troup  <james@nocrew.org>
4013
4014         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
4015         utils.get_conf().
4016         * shania (main): likewise.
4017
4018         * rhona (main): add default options.
4019
4020         * db_access.py (get_archive_id): case independent.
4021
4022         * katie (action): sort files so that ordering is consistent
4023         between mails; noticed/requested by Joey.
4024
4025 2001-11-17  Ryan Murray  <rmurray@debian.org>
4026
4027         * utils.py: add get_conf function, change startup code to read all
4028           config files to the Cnf that get_conf returns
4029           use the component list from the katie conf rather than the hardcoded
4030           list.
4031         * all scripts: use new get_conf function
4032         * shania: fix try/except around changes files
4033         * jenna: only do debian-installer if it is a section in Cnf
4034
4035 2001-11-16  Ryan Murray  <rmurray@debian.org>
4036
4037         * shania (main): Initialize days to a string of a number.
4038                  (main): Initialize Cnf vars before reading in Cnf
4039
4040 2001-11-14  Ryan Murray  <rmurray@debian.org>
4041
4042         * shania (main): Initialize days to a number.
4043
4044 2001-11-04  James Troup  <james@nocrew.org>
4045
4046         * docs/Makefile: use docbook-utils' docbook2man binary.
4047
4048         * Change all "if foo == []" constructs into "if not foo".
4049
4050         * katie (check_changes): when installing into stable from
4051         proposed-updates, remove all non-stable target distributions.
4052         (check_override): don't check for override disparities on stable
4053         installs.
4054         (stable_install): update install_bytes appropriately.
4055         (reject): stable rejection support; i.e. don't remove files when
4056         rejecting files in the pool, rather remove them from the
4057         proposed-update suite instead, rhona will do the rest.
4058         (manual_reject): support for a stable specific template.
4059         (main): setup up stable rejector in subst.
4060
4061 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
4062
4063         * debian/control (Build-Depends): docbook2man has been superseded
4064         by docbook-utils.
4065
4066         * neve (main): exit with a more useful error message.
4067         (update_suites): Suite::<suite>::Version, Origin and Description
4068         are not required, so don't fail if they don't exist.
4069
4070         * db_access.py (get_archive_id): return -1 on error rather than
4071         raise an exception.
4072         (get_location_id): likewise.
4073
4074         * madison (main): don't exit on the first not-found package,
4075         rather exit with an appropriate return code after processing all
4076         packages.
4077
4078 2001-11-03  James Troup  <james@nocrew.org>
4079
4080         * claire.py (find_dislocated_stable): add per-architecture
4081         symlinks for dislocated architecture: all debs.
4082
4083 2001-10-19  Anthony Towns  <ajt@debian.org>
4084
4085         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
4086
4087 2001-10-10  Anthony Towns  <ajt@debian.org>
4088
4089         * claire.py (fix_component_section): do _not_ assign to None under
4090         any circumstances
4091
4092 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
4093
4094         * melanie (main): don't duplicate architectures when removing from
4095         more than one suite.
4096
4097         * heidi (main, process_file, get_list): report suite name not ID.
4098
4099         * naima (nmu_p): be case insensitive.
4100
4101         * naima (action): more list handling clean ups.
4102
4103         * melanie (main): clean up lists handling to use string.join and
4104         IN's.
4105
4106         * madison (main): clean up suite and architecture argument parsing
4107         to use slices less and string.join more.
4108
4109         * utils.py (parse_changes): Use string.find() instead of slices for
4110         string comparisons thereby avoid hardcoding the length of strings.
4111         * ziyi (main): likewise.
4112
4113 2001-10-07  James Troup  <james@nocrew.org>
4114
4115         * Remove mode argument from utils.open_files() calls if it's the
4116         default, i.e. 'r'.
4117
4118 2001-09-27  James Troup  <james@nocrew.org>
4119
4120         * katie (init): new function; options clean up.
4121         (usage): add missing options, remove obsolete ones.
4122         (main): adapt for the two changes above.  If the lock file or
4123         new-ack log file don't exist, create them.  Don't try to open the
4124         new-ack log file except running in new-ack mode.
4125
4126         * alyson (main): initialize all the tables that are based on the
4127         conf file.
4128
4129         * utils.py (touch_file): like touch(1).
4130         (where_am_i): typo.
4131
4132         * catherine (usage): new.
4133         (main): use it.  options cleanup.
4134         * claire.py: likewise.
4135         * fernanda: likewise.
4136         * heidi: likewise.
4137         * jenna: likewise.
4138         * shania: likewise.
4139         * ziyi: likewise.
4140
4141         * andrea: options cleanup.
4142         * charisma: likewise.
4143         * julia: likewise.
4144         * madison: likewise.
4145         * melanie: likewise.
4146         * natalie: likewise.
4147         * rhona: likewise.
4148         * tea: likewise.
4149
4150 2001-09-26  James Troup  <james@nocrew.org>
4151
4152         * utils.py: default to sane config file locations
4153         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
4154         or they can point to the real ones through use of a new Config
4155         section.  Based on an old patch by Adam Heath.
4156         (where_am_i): use the new default config stuff.
4157         (which_conf_file): likewise.
4158         (which_apt_conf_file): likewise.
4159
4160         * charisma (main): output defaults to
4161         `Package~Version\tMaintainer'; input can be of either form.  When
4162         parsing the new format do version comparisons, when parsing the
4163         old format assume anything in the extra file wins.  This fixes the
4164         problem of newer non-US packages being overwhelmed by older
4165         versions still in stable on main.
4166
4167 2001-09-17  James Troup  <james@nocrew.org>
4168
4169         * natalie.py (list): use result_join().
4170
4171         * denise (main): result_join() moved to utils.
4172
4173         * utils.py (result_join): move to utils; add an optional seperator
4174         argument.
4175
4176 2001-09-14  James Troup  <james@nocrew.org>
4177
4178         * heidi (set_suite): new function; does --set like natalie does,
4179         i.e. turns it into a sequence of --add's and --remove's
4180         internally.  This is a major win (~20 minute run time > ~20
4181         seconds) in the common, everday (i.e. testing) case.
4182         (get_id): common code used by set_suite() and process_file().
4183         (process_file): call set_suite() and get_id().
4184         (main): add logging support.
4185
4186         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
4187         files.
4188
4189         * utils.py (parse_changes): use slices or simple string comparison
4190         in favour of regexes where possible.
4191
4192         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
4193         fact that the string VARDATA() points to are not null terminated.
4194
4195         * denise (result_join): new function; like string.join() but
4196         handles None's.
4197         (list): use it.
4198         (main): likewise.
4199
4200         * charisma (main): python-pygresql 7.1 returns None not "".
4201
4202 2001-09-14  Ryan Murray  <rmurray@debian.org>
4203
4204         * natalie.py (list): handle python-pygresql 7.1 returning None.
4205
4206 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
4207
4208         * madison (main): return 1 if no package is found.
4209
4210 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
4211
4212         * madison (main): better error handling for incorrect
4213         -a/--architecture or -s/--suite arguments.
4214         (usage): new.
4215         (main): use it.
4216
4217 2001-09-05  Ryan Murray  <rmurray@debian.org>
4218
4219         * charisma, madison, katie: remove use of ROUser
4220         * katie.conf,katie.conf-non-US: remove defintion of ROUser
4221
4222 2001-08-26  James Troup  <james@nocrew.org>
4223
4224         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
4225         maintained packages at cjwatson@'s request.
4226
4227 2001-08-21  James Troup  <james@nocrew.org>
4228
4229         * madison (main): add -a/--architecture support.
4230
4231         * jenna: use logging instead of being overly verbose on stdout.
4232
4233 2001-08-11  Ryan Murray  <rmurray@debian.org>
4234
4235         * melanie: add functional help option
4236
4237 2001-08-07  Anthony Towns  <ajt@debian.org>
4238
4239         * apt.conf, katie.conf: Add ia64 and hppa to testing.
4240
4241 2001-07-28  James Troup  <james@nocrew.org>
4242
4243         * katie (check_dsc): ensure source version is >> than existing
4244         source in target suite.
4245
4246 2001-07-25  James Troup  <james@nocrew.org>
4247
4248         * natalie.py: add logging support.
4249
4250         * utils.py (open_file): make the second argument optional and
4251         default to read-only.
4252
4253         * rene (main): work around broken source packages that duplicate
4254         arch: all packages with arch: !all packages (no longer allowed
4255         into the archive by katie).
4256
4257 2001-07-13  James Troup  <james@nocrew.org>
4258
4259         * katie (action): don't assume distribution is a dictionary.
4260         (update_subst): don't assume architecture is a dictionary and that
4261         maintainer822 is defined.
4262         (check_changes): recognise nk_format exceptions.
4263         (check_changes): reject on 'testing' only uploads.
4264         (check_files): when checking to ensure all packages are newer
4265         versions check against arch-all packages too.
4266         (check_dsc): enforce the existent of a sane set of mandatory
4267         fields.  Ensure the version number in the .dsc (modulo epoch)
4268         matches the version number in the .changes file.
4269
4270         * utils.py (changes_compare): ignore all exceptions when parsing
4271         the changes files.
4272         (build_file_list): don't UNDEF on a changes file with no format
4273         field.
4274
4275 2001-07-07  James Troup  <james@nocrew.org>
4276
4277         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
4278         rather than 'changedbyname' to avoid false negatives on uploads
4279         with an email-address-only Changed-By field.
4280         (check_dsc): don't overwrite reject_message; append to it.
4281         (check_signature): likewise.
4282         (check_changes): likewise.
4283         (announce): condition logging on 'action'.
4284
4285         * logging.py: new logging module.
4286
4287         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
4288         sub-tree into a separate (global) variable.
4289         (check_dsc): ensure format is 1.0 to retain backwards
4290         compatability with dpkg-source in potato.
4291         (main): only try to obtain the lock when not running in no-action
4292         mode.
4293         Use the new logging module.
4294
4295         * christina: initial version; only partially usable.
4296
4297 2001-06-28  Anthony Towns  <ajt@debian.org>
4298
4299         * apt.conf: Add ExtraOverrides to auric.
4300
4301 2001-06-25  James Troup  <james@nocrew.org>
4302
4303         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
4304         they preferred the name 'Uploaders'.
4305
4306 2001-06-23  James Troup  <james@nocrew.org>
4307
4308         * katie (check_files): fix typo in uncommon rejection message,
4309         s/sourceversion/source version/.
4310
4311         * denise (main): we can't use print because stdout has been
4312         redirected.
4313
4314         * katie (source_exists): new function; moved out of check_files()
4315         and added support for binary-only NMUs of earlier sourceful NMUs.
4316
4317         * rhona (clean): find_next_free has moved.
4318
4319         * utils.py (find_next_free): new function; moved here from rhona.
4320         Change too_many to be an argument with a default value, rather
4321         than a hardcoded variable.
4322
4323         * shania: rewritten to work better; REJECTion reminder mail
4324         handling got lost though.
4325
4326 2001-06-22  James Troup  <james@nocrew.org>
4327
4328         * rhona (main): remove unused override code.
4329
4330         * fernanda (main): remove extraneous \n's from utils.warn calls.
4331         * natalie.py (list): likewise.
4332
4333         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
4334         use utils.{warn,fubar} where appropriate.
4335
4336 2001-06-21  James Troup  <james@nocrew.org>
4337
4338         * katie (nmu_p): new class that encapsulates the "is a nmu?"
4339         functionality.
4340         (nmu_p.is_an_nmu): add support for multiple maintainers specified
4341         by the "Maintainers" field in the .dsc file and maintainer groups.
4342         (nmu_p.__init__): read in the list of group maintainer names.
4343         (announce): use nmu_p.
4344
4345 2001-06-20  James Troup  <james@nocrew.org>
4346
4347         * rene (main): hardcode the suite experimental is compared to by
4348         name rather than number.
4349
4350         * katie (check_files): differentiate between doesn't-exist and
4351         permission-denied in "can not read" rejections; requested by edd@.
4352         (check_dsc): use os.path.exists rather than os.access to allow the
4353         above check to kick in.
4354
4355         * heidi (process_file): read all input before doing anything and
4356         use transactions.
4357
4358 2001-06-15  James Troup  <james@nocrew.org>
4359
4360         * fernanda: new script; replaces old 'check' shell script
4361         nastiness.
4362
4363 2001-06-14  James Troup  <james@nocrew.org>
4364
4365         * katie: actually import traceback module to avoid amusing
4366         infinite loop.
4367
4368 2001-06-10  James Troup  <james@nocrew.org>
4369
4370         * utils.py (extract_component_from_section): fix to handle just
4371         'non-free' and 'contrib'.  Also fix to handle non-US in a
4372         completely case insensitive manner as a component.
4373
4374 2001-06-08  James Troup  <james@nocrew.org>
4375
4376         * madison (arch_compare): sort function that sorts 'source' first
4377         then alphabetically.
4378         (main): use it.
4379
4380 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
4381
4382         * catherine (poolize): explicitly make poolized_size a long so it
4383         doesn't overflow when poolizing e.g. entire archives.
4384
4385 2001-06-01  James Troup  <james@nocrew.org>
4386
4387         * utils.py (send_mail): throw exceptions rather than exiting.
4388
4389         * katie (process_it): catch exceptions and ignore them.
4390
4391 2001-06-01  Michael Beattie  <mjb@debian.org>
4392
4393         * added update-mailingliststxt and update-readmenonus to update
4394         those files, respectively. modified cron.daily{,-non-US} to
4395         use them.
4396
4397 2001-05-31  Anthony Towns  <ajt@debian.org>
4398
4399         * rhona: make StayOfExecution work.
4400
4401 2001-05-31  James Troup  <james@nocrew.org>
4402
4403         * rhona (find_next_free): fixes to not overwrite files but rename
4404         them by appending .<n> instead.
4405         (clean): use find_next_free and use dated sub-directories in the
4406         morgue.
4407
4408         * utils.py (move): don't overwrite files unless forced to.
4409         (copy): likewise.
4410
4411 2001-05-24  James Troup  <james@nocrew.org>
4412
4413         * katie (check_files): determine the source version here instead
4414         of during install().
4415         (check_files): check for existent source with bin-only NMU
4416         support.
4417         (main): sort the list of changes so that the source-must-exist
4418         check Does The Right Thing(tm).
4419
4420         * utils.py (changes_compare): new function; sorts a list of
4421         changes files by 'have-source', source, version.
4422         (cc_fix_changes): helper function.
4423         (parse_changes): use compiled regexes.
4424         (fix_maintainer): likewise.
4425
4426         * rene (main): warn about packages in experimental that are
4427         superseded by newer versions in unstable.
4428
4429 2001-05-21  James Troup  <james@nocrew.org>
4430
4431         * rene (main): add support for checking for ANAIS (Architecture
4432         Not Allowed In Source) packages.
4433
4434 2001-05-17  James Troup  <james@nocrew.org>
4435
4436         * katie (check_changes): initalize `architecture' dictionary in
4437         changes global so that if we can't parse the changes file for
4438         whatever reason we don't undef later on.
4439
4440         * utils.py (parse_changes): fix handling of multi-line fields
4441         where the first line did have data.
4442
4443 2001-05-05  Anthony Towns  <ajt@debian.org>
4444
4445         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
4446         (It should always have been there. Ooopsy.)
4447
4448 2001-05-03  Anthony Towns  <ajt@debian.org>
4449
4450         * jenna: Cleanup packages that move from arch:any to arch:all or
4451         vice-versa.
4452
4453 2001-04-24  Anthony Towns  <ajt@debian.org>
4454
4455         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
4456         cope with debian-installer and boot-floppies' md5sum.txt.
4457
4458 2001-04-16  James Troup  <james@nocrew.org>
4459
4460         * katie (check_changes): add missing %s format string argument.
4461         (stable_install): temporary work around for morgue location to
4462         move installed changes files into.
4463         (stable_install): helps if you actually read in the template.
4464         (manual_reject): fix for editing of reject messages which was
4465         using the wrong variable name.
4466
4467         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
4468
4469 2001-04-13  James Troup  <james@nocrew.org>
4470
4471         * katie (manual_reject): Cc the installer.
4472         (reject): don't.
4473         (check_changes): remove unused maintainer-determination code.
4474         (update_subst): add support for Changed-By when setting the
4475         *MAINTAINER* variables.
4476
4477         * rene (bar): new function to check for packages on architectures
4478         when they shouldn't be.
4479
4480         * natalie.py (main): use fubar() and warn() from utils.
4481
4482         * utils.py (whoami): new mini-function().
4483         * melanie (main): use it.
4484         * katie (manual_reject): likewise.
4485
4486 2001-04-03  James Troup  <james@nocrew.org>
4487
4488         * katie (action): ignore exceptions from os.path.getmtime() so we
4489         don't crash on non-existent changes files (e.g. when they are
4490         moved between the start of the install run in cron.daily and the
4491         time we get round to processing them).
4492
4493         * madison (main): also list source and accept -s/--suite.
4494
4495         * jenna (generate_src_list): missing \n in error message.
4496
4497         * katie (update_subst): add sane defaults for when changes is
4498         skeletal.
4499
4500 2001-03-29  James Troup  <james@nocrew.org>
4501
4502         * melanie (main): use fubar() and warn() from utils.  Remember who
4503         the maintainer for the removed packages are and display that info
4504         to the user.  Readd support for melanie-specific Bcc-ing that got
4505         lost in the TemplateSubst transition.
4506
4507         * utils.py (fubar): new function.
4508         (warn): like wise.
4509
4510         * db_access.py (get_maintainer): as below.
4511
4512         * charisma (get_maintainer): moved the bulk of this function to
4513         db_access so that melanie can use it too.
4514
4515         * claire.py (find_dislocated_stable): restrict the override join
4516         to those entries where the suite is stable; this avoids problems
4517         with packages which have moved to new sections (e.g. science)
4518         between stable and unstable.
4519
4520 2001-03-24  James Troup  <james@nocrew.org>
4521
4522         * catherine (poolize): new function; not really independent of
4523         main() fully, yet.
4524         (main): use it.
4525
4526         * katie (stable_install): __SUITE__ needs to be space prefixed
4527         because buildd's check for 'INSTALLED$'.
4528
4529 2001-03-22  James Troup  <james@nocrew.org>
4530
4531         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
4532
4533         * jenna: rewritten; now does deletions on a per-suite level
4534         instead of a per-suite-component-architecture-type level.  This
4535         allows mutli-component packages to be auto-cleaned (and as a
4536         bonus, reduces the code size and duplication).
4537
4538 2001-03-22  Anthony Towns  <ajt@debian.org>
4539
4540         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
4541         instead of just giving a gpg error.
4542
4543 2001-03-21  James Troup  <james@nocrew.org>
4544
4545         * madison (main): use apt_pkg.VersionCompare to sort versions so
4546         that output is correctly sorted for packages like debhlper.
4547         Noticed by ajt@.
4548
4549         * tea (check_source_in_one_dir): actually find problematic source
4550         packages.
4551
4552         * katie (check_dsc): remember the orig.tar.gz's location ID if
4553         it's not in a legacy suite.
4554         (check_diff): we don't use orig_tar_id.
4555         (install): add code to handle sourceful diff-only upload of
4556         packages which change components by copying the .orig.tar.gz into
4557         the new component, if it doesn't already exist there.
4558         (process_it): reset orig_tar_location (as above).
4559
4560         * melanie (main): use template substiution for the bug closing
4561         emails.
4562         (main): don't hardcode bugs.debian.org or packages.debian.org
4563         either; use configuration items.
4564
4565         * katie: likewise.
4566
4567         * natalie.py (init): use None rather than 'localhost' for the
4568         hostname given to pg.connect.
4569
4570         * utils.py (TemplateSubst): new function; lifted from
4571         userdir-ldap.
4572
4573 2001-03-21  Ryan Murray  <rmurray@debian.org>
4574
4575         * katie (announce): fix the case of non-existent
4576         Suite::$SUITE::Announce.
4577
4578 2001-03-20  Ryan Murray  <rmurray@debian.org>
4579
4580         * debian/rules (binary-indep): install melanie into /usr/bin/ not
4581         /usr/.
4582
4583         * alyson (main): use config variable for database name.
4584         * andrea (main): likewise.
4585         * catherine (main): likewise.
4586         * charisma (main): likewise.
4587         * cindy (main): likewise.
4588         * claire.py (main): likewise.
4589         * denise (main): likewise.
4590         * heidi (main): likewise.
4591         * jenna (main): likewise.
4592         * katie (main): likewise.
4593         * madison (main): likewise.
4594         * melanie (main): likewise.
4595         * neve (main): likewise.
4596         * rhona (main): likewise.
4597         * tea (main): likewise.
4598
4599 2001-03-15  James Troup  <james@nocrew.org>
4600
4601         * rhona (check_sources): fixed evil off by one (letter) error
4602         which was causing only .dsc files to be deleted when cleaning
4603         source packages.
4604
4605         * charisma (get_maintainer_from_source): remove really stupid and
4606         gratuitous IN sub-query and replace with normal inner join.
4607         (main): connect as read-only user nobody.
4608
4609         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4610         with EXISTS.
4611         (check_files): likewise; still disabled by default though.
4612         (clean_binaries): add ' seconds' to the mysterious number in the
4613         output.
4614         (clean): likewise.
4615
4616         * tea (check_files): add missing global declaration on db_files.
4617
4618 2001-03-14  James Troup  <james@nocrew.org>
4619
4620         * rhona: rewritten large chunks. Removed a lot of the silly
4621         selecting into dictionaries and replaced it with 'where exists'
4622         based sub queries.  Added support for StayOfExecution.  Fix the
4623         problem with deleting dsc_files too early and disable cleaning of
4624         unattached files.
4625
4626 2001-03-14  Anthony Towns  <ajt@debian.org>
4627
4628         * katie (announce): also check Changed-By when trying to detect
4629         NMUs.
4630
4631 2001-03-06  Anthony Towns  <ajt@debian.org>
4632
4633         * ziyi (main): Generate Release.gpg files as well, using the key from
4634         Dinstall::SigningKey in katie.conf, if present. That key has to be
4635         passwordless, and hence kept fairly secretly.
4636
4637 2001-03-02  James Troup  <james@nocrew.org>
4638
4639         * utils.py (str_isnum): new function; checks to see if the string
4640         is a number.
4641
4642         * shania (main): fix _hideous_ bug which was causing all files > 2
4643         weeks old to be deleted from incoming, even if they were part of a
4644         valid upload.
4645
4646 2001-02-27  James Troup  <james@nocrew.org>
4647
4648         * melanie (main): accept new argument -C/--carbon-copy which
4649         allows arbitarty carbon-copying of the bug closure messages.
4650         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4651         separate variable.
4652
4653 2001-02-27  Anthony Towns  <ajt@debian.org>
4654
4655         * ziyi: new program; generates Release files.
4656
4657 2001-02-25  James Troup  <james@nocrew.org>
4658
4659         * katie (reject): add missing '\n' to error message.
4660         (manual_reject): likewise.
4661         (install): catch exceptions from moving the changes file into DONE
4662         and ignore them.
4663
4664         * tea (check_md5sums): new function.
4665
4666 2001-02-25  Michael Beattie  <mjb@debian.org>
4667
4668         * melanie: use $EDITOR if available.
4669
4670 2001-02-15  James Troup  <james@nocrew.org>
4671
4672         * utils.py (parse_changes): don't crash and burn on empty .changes
4673         files.  Symptoms noticed by mjb@.
4674
4675 2001-02-15  Adam Heath  <doogie@debian.org>
4676
4677         * denise (main): use an absolute path for the output filename.
4678
4679         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4680         compile errors with postgresql-dev >= 7.0.
4681
4682 2001-02-12  James Troup  <james@nocrew.org>
4683
4684         * rene: initial version.
4685
4686         * andrea: initial version.
4687
4688         * catherine (main): remove obsolete assignment of arguments.
4689
4690 2001-02-09  James Troup  <james@nocrew.org>
4691
4692         * catherine: first working version.
4693
4694 2001-02-06  James Troup  <james@nocrew.org>
4695
4696         * katie (check_files): validate the priority field; i.e. ensure it
4697         doesn't contain a '/' (to catch people prepending the priority
4698         with the component rather than the section).
4699         (check_override): don't warn about source packages; the only check
4700         is on section and we have no GUI tools that would use the Section
4701         field for a Sources file.
4702         (announce): use tags rather than severities for NMUs.  Requested
4703         by Josip Rodin <joy@>. [#78035]
4704
4705 2001-02-04  James Troup  <james@nocrew.org>
4706
4707         * tea (check_override): new function; ensures packages in suites
4708         are also in the override file.  Thanks to bod@ for noticing that
4709         such packages existed.
4710
4711         * katie: move file type compiled regular expressions to utils as
4712         catherine uses them too.
4713         (check_changes): always default maintainer822 to the installer
4714         address so that any bail out won't cause undefs later.
4715         (check_files): update file type re's to match above.
4716         (stable_install): likewise.
4717         (reject): handle any except from moving the changes files.  Fixes
4718         crashes on unreadable changes files.
4719
4720         * melanie (main): add an explanation of why things are not removed
4721         from testing.
4722
4723 2001-01-31  James Troup  <james@nocrew.org>
4724
4725         * melanie (main): ignore a) no message, b) removing from stable or
4726         testing when invoked with -n/--no-action.
4727
4728         * katie (check_override): lower section before checking to see if
4729         we're whining about 'non-US' versus 'non-US/main'.
4730
4731         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4732         function so that we can use inside of PostgreSQL.
4733
4734 2001-01-28  James Troup  <james@nocrew.org>
4735
4736         * katie: updated to pass new flag to parse_changes() and deal with
4737         the exception raised on invalid .dsc's if appropriate.
4738         * shania (main): likewise.
4739         * melanie (main): likewise.
4740
4741         * tea (check_dscs): new function to validate all .dsc files in
4742         unstable.
4743
4744         * utils.py (parse_changes): if passed an additional flag, validate
4745         the .dsc file to ensure it's extractable by dpkg-source.
4746         Requested by Ben Collins <bcollins@>.
4747
4748 2001-01-27  James Troup  <james@nocrew.org>
4749
4750         * madison (main): connect to the DB as nobody.
4751
4752         * katie (check_files): remove support for -r/--no-version-check
4753         since it makes no sense under katie (jenna will automatically
4754         remove the (new) older version) and was evil in any event.
4755         (check_changes): add missing new line to rejection message.
4756         (check_dsc): likewise.
4757         (process_it): reset reject_message here.
4758         (main): not here.  Also remove support for -r.
4759
4760 2001-01-26  James Troup  <james@nocrew.org>
4761
4762         * katie (check_override): don't whine about 'non-US/main' versus
4763         'non-US'.
4764
4765 2001-01-26  Michael Beattie  <mjb@debian.org>
4766
4767         * natalie.py (usage): new function.
4768         (main): use it.
4769
4770 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4771
4772         * update-mirrorlists: Update README.non-US too (request from Joy).
4773
4774 2001-01-25  James Troup  <james@nocrew.org>
4775
4776         * katie (reject): catch any exception from utils.move() and just
4777         pass, we previously only caught can't-overwrite errors and not
4778         can't-read ones.
4779
4780         * jenna (generate_src_list): use ORDER BY in selects to avoid
4781         unnecessary changes to Packages files.
4782         (generate_bin_list): likewise.
4783
4784         * utils.py (extract_component_from_section): separated out from
4785         build_file_list() as it's now used by claire too.
4786
4787         * claire.py (find_dislocated_stable): rewrite the query to extract
4788         section information and handle component-less locations properly.
4789         Thanks to ajt@ for the improved queries.
4790         (fix_component_section): new function to fix components and
4791         sections.
4792
4793 2001-01-23  James Troup  <james@nocrew.org>
4794
4795         * katie (check_files): set file type for (u?)debs first thing, so
4796         that if we continue, other functions which rely on file type
4797         existing don't bomb out.  If apt_pkg or apt_inst raise an
4798         exception when parsing the control file, don't try any other
4799         checks, just drop out.
4800         (check_changes): new test to ensure there is actually a target
4801         distribution.
4802
4803 2001-01-22  James Troup  <james@nocrew.org>
4804
4805         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4806         <grin@>.
4807         (check_changes): when mapping to unstable, remember to actually
4808         add unstable to the suite list and not just remove the invalid
4809         suite.
4810
4811 2001-01-21  James Troup  <james@nocrew.org>
4812
4813         * katie (check_files): catch exceptions from debExtractControl()
4814         and reject packages which raise any.
4815
4816 2001-01-19  James Troup  <james@nocrew.org>
4817
4818         * katie (check_signature): basename() file name in rejection
4819         message.
4820
4821 2001-01-18  James Troup  <james@nocrew.org>
4822
4823         * katie (in_override_p): remember the section and priority from
4824         the override file so we can check them against the package later.
4825         (check_override): new function; checks section and priority (for
4826         binaries) from the package against the override file and mails the
4827         maintainer about any disparities.
4828         (install): call check_override after announcing the upload.
4829
4830 2001-01-16  James Troup  <james@nocrew.org>
4831
4832         * utils.py (build_file_list): catch ValueError's from splitting up
4833         the files field and translate it into a parse error.
4834
4835         * tea: add support for finding unreferenced files.
4836
4837         * katie (in_override_p): add support for suite-aliasing so that
4838         proposed-updates uploads work again.
4839         (check_changes): catch parses errors from utils.build_file_list().
4840         (check_dsc): likewise.
4841         (check_diff): yet more dpkg breakage so we require even newer a
4842         version.
4843
4844         * jenna (generate_bin_list): don't do nasty path munging that's no
4845         longer needed.
4846
4847         * denise (main): support for non-US; and rename testing's override
4848         files so they're based on testing's codename.
4849
4850 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4851
4852         * melanie: add to the bug closing message explaining what happens
4853         (or rather doesn't) with bugs against packages that have been
4854         removed.
4855
4856 2001-01-14  James Troup  <james@nocrew.org>
4857
4858         * charisma (main): fix silly off-by-one error; suite priority
4859         checking was done using "less than" rather than "less than or
4860         equal to" which was causing weird hesienbugs with wrong Maintainer
4861         fields.
4862
4863 2001-01-10  James Troup  <james@nocrew.org>
4864
4865         * katie (in_override_p): adapted to use SQL-based overrides.
4866         read_override_file function disappears.
4867
4868         * db_access.py: add new functions get_section_id, get_priority_id
4869         and get_override_type_id.
4870         (get_architecture_id): return -1 if the architecture is not found.
4871
4872         * heidi: switch %d -> %d in all SQL queries.
4873         (get_list): Use string.join where appropriate.
4874
4875         * rhona (in_override_p): don't die if the override file doesn't
4876         exist.
4877         (main): warn if the override file doesn't exist.
4878
4879         * alyson: new script; will eventually sync the config file and the
4880         SQL database.
4881
4882         * natalie.py: new script; manipulates overrides.
4883
4884         * melanie: new script; removes packages from suites.
4885
4886 2001-01-08  James Troup  <james@nocrew.org>
4887
4888         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4889         anything it just changed the symptom.  Recognise the new breakage
4890         and reject them too.
4891
4892 2001-01-07  James Troup  <james@nocrew.org>
4893
4894         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4895         to the .changes file, be sure to set up files[filename]["type"]
4896         too.
4897
4898 2001-01-06  James Troup  <james@nocrew.org>
4899
4900         * katie (check_diff): new function; detects bad diff files
4901         produced by dpkg 1.8.1 and rejects thems.
4902         (process_it): call check_diff().
4903         (check_dsc): gar.  Add support for multiple versions of the
4904         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4905         and size against all versions and use one which matches if
4906         possible and exclude any that don't from being poolized to avoid
4907         file overwrites.  Thanks to broonie@ for providing the example.
4908         (install): skip any files marked as excluded as above.
4909
4910 2001-01-05  James Troup  <james@nocrew.org>
4911
4912         * heidi (process_file): add missing argument to error message.
4913
4914 2001-01-04  James Troup  <james@nocrew.org>
4915
4916         * heidi (main): fix handling of multiple files by reading all
4917         files not just the first file n times (where n = the number of
4918         files passed as arguments).
4919
4920 2001-01-04  Anthony Towns  <ajt@debian.org>
4921
4922         * katie (check_dsc): proper fix for the code which locates the
4923         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4924
4925 2000-12-20  James Troup  <james@nocrew.org>
4926
4927         * rhona: replace IN's with EXISTS's to make DELETE time for
4928         binaries and source sane on auric.  Add a -n/--no-action flag and
4929         make it stop actions if used.  Fixed a bug in binaries deletion
4930         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4931         -V/--version.  Giving timing info on deletion till I'm sure it's
4932         sane.
4933
4934         * katie (check_changes): map testing to unstable.
4935
4936         * madison: new script; shows versions in different architectures.
4937
4938         * katie (check_dsc): ensure size matches as well as md5sum;
4939         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4940         #69702.
4941
4942 2000-12-19  James Troup  <james@nocrew.org>
4943
4944         * katie (reject): ignore the "can't overwrite file" exception from
4945         utils.move() and leave the files where they are.
4946         (reject): doh! os.access() test was reversed so we only tried to
4947         move files which didn't exist... replaced with os.path.exists()
4948         test the right way round.
4949
4950         * utils.py (move): raise an exception if we can't overwrite the
4951         destination file.
4952         (copy): likewise.
4953
4954 2000-12-18  James Troup  <james@nocrew.org>
4955
4956         * rhona: first working version.
4957
4958         * db_access.py (get_files_id): force both sizes to be integers.
4959
4960         * katie (main): use size_type().
4961
4962         * utils.py (size_type): new function; pretty prints a file size.
4963
4964 2000-12-17  James Troup  <james@nocrew.org>
4965
4966         * charisma (main): do version compares so that older packages do
4967         not override newer ones and process source first as source wins
4968         over binaries in terms of who we think of as the Maintainer.
4969
4970 2000-12-15  James Troup  <james@nocrew.org>
4971
4972         * katie (install): use the files id for the .orig.tar.gz from
4973         check_dsc().
4974         (install): limit select for legacy source to a) source in legacy
4975         or legacy-mixed type locations and b) distinct on files.id.
4976         (install): rather than the bizarre insert new, delete old method
4977         for moving legacy source into the pool, use a simple update of
4978         files.
4979         (process_it): initalize some globals before each process.
4980
4981 2000-12-14  James Troup  <james@nocrew.org>
4982
4983         * katie (in_override_p): index on binary_type too since .udeb
4984         overrides are in a different file.
4985         (read_override_file): likewise.
4986         (check_files): correct filename passed to get_files_id().
4987         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4988         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4989         (check_dsc): remember the files id of the .orig.tar.gz, not the
4990         location id.
4991
4992 2000-12-13  James Troup  <james@nocrew.org>
4993
4994         * utils.py (poolify): force the component to lower case except for
4995         non-US.
4996
4997         * katie (in_override_p): handle .udeb-specific override files.
4998         (check_files): pass the binary type to in_override_p().
4999         (check_dsc): remember the location id of the old .orig.tar.gz in
5000         case it's not in the pool.
5001         (install): use location id from dsc_files; which is where
5002         check_dsc() puts it for old .orig.tar.gz files.
5003         (install): install files after all DB work is complete.
5004         (reject): basename() the changes filename.
5005         (manual_reject): likewise.
5006
5007         * shania: new progam; replaces incomingcleaner.
5008
5009 2000-12-05  James Troup  <james@nocrew.org>
5010
5011         * katie (check_changes): if inside stable and can't find files
5012         from the .changes; assume it's installed in the pool and chdir()
5013         to there.
5014         (check_files): we are not installing for stable installs, so don't
5015         check for overwriting existing files.
5016         (check_dsc): likewise.
5017         (check_dsc): reorder .orig.tar.gz handling so that we search in
5018         the pool first and only then fall back on any .orig.tar.gz in the
5019         cwd; this avoids false positives on the overwrite check when
5020         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
5021         (install): if this is a stable install, bail out to
5022         stable_install() immediately.
5023         (install): dsc_files handling was horribly broken. a) we need to
5024         add files from the .dsc and not the .changes (duh), b) we need to
5025         add the .dsc file itself to dsc_files (to be consistent with neve
5026         if for no other reason).
5027         (stable_install): new function; handles installs from inside
5028         proposed-updates to stable.
5029         (acknowledge_new): basename changes_filename before doing
5030         anything.
5031         (process_it): absolutize the changes filename to avoid the
5032         requirement of being in the same directory as the .changes file.
5033         (process_it): save and restore the cwd as stable installs can
5034         potentially jump into the pool to find files.
5035
5036         * jenna: dislocated_files support using claire.
5037
5038         * heidi (process_file): select package field from binaries
5039         explicitly.
5040
5041         * db_access.py (get_files_id): fix cache key used.
5042
5043         * utils.py (build_file_list): fix 'non-US/non-free' case in
5044         section/component splitting.
5045         (move): use os.path.isdir() rather than stat.
5046         (copy): likewise.
5047
5048         * claire.py: new file; stable in non-stable munger.
5049
5050         * tea: new file; simply ensures all files in the DB exist.
5051
5052 2000-12-01  James Troup  <james@nocrew.org>
5053
5054         * katie (check_dsc): use regex_safe().
5055         (check_changes): typo in changes{} key:
5056         s/distributions/distribution/.
5057         (install): use changes["source"], not files[file]["source"] as the
5058         latter may not exist and the former is used elsewhere.  Commit the
5059         SQL transaction earlier.
5060
5061         * utils.py (regex_safe): new function; escapes characters which
5062         have meaning to SQL's regex comparison operator ('~').
5063
5064 2000-11-30  James Troup  <james@nocrew.org>
5065
5066         * katie (install): pool_location is based on source package name,
5067         not binary package.
5068
5069         * utils.py (move): if dest is a directory, append the filename
5070         before chmod-ing.
5071         (copy): ditto.
5072
5073         * katie (check_files): don't allow overwriting of existing .debs.
5074         (check_dsc): don't allow overwriting of existing source files.
5075
5076 2000-11-27  James Troup  <james@nocrew.org>
5077
5078         * katie (check_signature): don't try to load rsaref; it's
5079         obsolete.
5080         (in_override_p): don't try to lookup override entries for packages
5081         with an invalid suite name.
5082         (announce): don't assume the suite name is valid; use Find() to
5083         lookup the mailing list name for announcements.
5084
5085         * utils.py (where_am_i): typo; hostname is in the first element,
5086         not second.
5087
5088         * db_access.py (get_suite_id): return -1 on an unknown suite.
5089
5090 2000-11-26  James Troup  <james@nocrew.org>
5091
5092         * katie (install): fix CopyChanges handling; typo in in checking
5093         Cnf for CopyChanges flag and was calling non-existent function
5094         copy_file.
5095
5096         * utils.py (copy): new function; clone of move without the
5097         unlink().
5098
5099 2000-11-25  James Troup  <james@nocrew.org>
5100
5101         * utils.py (build_file_list): handle non-US prefixes properly
5102         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
5103         + 'libs' not 'non-US/libs').
5104         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
5105         delays.  This is possibly(/probably) exim speicifc and (like other
5106         sendmail options) needs to be in the config file.
5107
5108 2000-11-24  James Troup  <james@nocrew.org>
5109
5110         * rhona (check_sources): we need file id from dsc_files; not id.
5111         Handle non .dsc source files being re-referenced in dsc_files.
5112
5113         * katie (in_override_p): strip out any 'non-US' prefix.
5114         (check_files): use utils.where_am_i() rather than hardcoding.
5115         (check_files): validate the component.
5116         (install): use utils.where_am_i() rather than hardcoding.
5117         (install): fix mail to go to actual recepient.
5118         (reject): likewise.
5119         (manual_reject): likewise.
5120         (acknowledge_new): likewise.
5121         (announce): likewise.
5122
5123         * db_access.py (get_component_id): ignore case when searching for
5124         the component and don't crash if the component can't be found, but
5125         return -1.
5126         (get_location_id): handle -1 from get_component_id().
5127
5128         * jenna (generate_src_list): don't bring 'suite' into our big
5129         multi-table-joining select as we already know the 'suite_id'.
5130         (generate_bin_list): likewise.
5131
5132         * neve (main): don't quit if not on ftp-master.
5133         (process_packages): remove unused variable 'suite_codename'.
5134
5135         * utils.py (move): actually move the file.
5136         (build_file_list): handle non-US prefixes in the section.
5137
5138         * catherine (main): use which_conf_file().
5139         * charisma (main): likewise.
5140         * heidi (main): likewise.
5141         * jenna (main): likewise.
5142         * katie (main): likewise.
5143         * neve (main): likewise.
5144         * rhona (main): likewise.
5145
5146         * utils.py (where_am_i): new routine; determines the archive as
5147         understood by other 'dak' programs.
5148         (which_conf_file): new routine; determines the conf file to read.
5149
5150 2000-11-17  James Troup  <james@nocrew.org>
5151
5152         * katie (install): fix where .changes files for proposed-updates
5153         go.
5154
5155 2000-11-04  James Troup  <james@nocrew.org>
5156
5157         * jenna (main): handle architecture properly if no
5158         -a/--architecture argument is given, i.e. reset architecture with
5159         the values for the suite for each suite.
5160
5161         * Add apt_pkg.init() to the start of all scripts as it's now
5162         required by python-apt.
5163
5164 2000-10-29  James Troup  <james@nocrew.org>
5165
5166         * jenna (generate_bin_list): take an additional argument 'type'
5167         and use it in the SELECT.
5168         (main): if processing component 'main', process udebs and debs.
5169
5170         * neve (process_packages): set up 'type' in 'binaries' (by
5171         assuming .deb).
5172
5173         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
5174         (check_files): set up files[file]["dbtype"].
5175         (install): use files[file]["dbtype"] to set up the 'type' field in
5176         the 'binaries' table.
5177
5178         * init_pool.sql: add a 'type' field to the 'binaries' table to
5179         distinguisgh between ".udeb" and ".deb" files.
5180
5181         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
5182         dest ? dirname(dest)" type check instead.
5183
5184         * katie (check_dsc): handle the case of an .orig.tar.gz not found
5185         in the pool without crashing.  Also handle the case of being asked
5186         to look for something other than an .orig.tar.gz in the pool.
5187
5188 2000-10-26  James Troup  <james@nocrew.org>
5189
5190         * katie (install): fix filenames put into files table during
5191         poolification of legacy source.
5192
5193         * utils.py (move): work around a bug in os.path.basename() which
5194         cunningly returns '' if there is a trailing slash on the path
5195         passed to it.
5196
5197         * katie (check_dsc): Remove more cruft.  If we find the
5198         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
5199         location, make a note of that so we can fix things in install().
5200         (install): as above.  Move any old source out of legacy locations
5201         so that 'apt-get source' will work.
5202         (process_it): reset the flag that indicates to install that the
5203         source needs moved.
5204
5205         * cron.daily: more.  Nowhere near complete yet though.
5206
5207         * katie (install): don't run os.makedirs, a) utils.move() does
5208         this now, b) we weren't removing the user's umask and were
5209         creating dirs with SNAFU permissions.
5210         (check_dsc): rewrite the .orig.tar.gz handling to take into
5211         account, err, package pools.  i.e. look anywhere in the pool
5212         rather than faffing around with two simple paths.
5213
5214         * neve (process_sources): add the .dsc to dsc_files too.
5215
5216 2000-10-25  James Troup  <james@nocrew.org>
5217
5218         * neve (process_sources): don't duplicate .orig.tar.gz's.
5219
5220 2000-10-23  James Troup  <james@nocrew.org>
5221
5222         * utils.py (re_extract_src_version): moved here.
5223
5224         * neve: move re_extract_src_version to utils.
5225         (process_packages): reflect change.
5226
5227         * katie (install): reflect change.
5228
5229 2000-10-19  James Troup  <james@nocrew.org>
5230
5231         * jenna (generate_src_list): handle locations with null
5232         components.
5233         (generate_bin_list): likewise.
5234