]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Use "import daklib.foo as foo" style
[dak.git] / ChangeLog
1 2008-05-04  Joerg Jaspert  <joerg@debian.org>
2
3         * dak/examine_package.py: remove daklib.queue import, never used
4
5         * dak/check_proposed_updates.py: Import stuff from daklib as
6         "import daklib.foo as foo"
7         * dak/clean_proposed_updates.py: likewise
8         * dak/clean_queues.py: likewise
9         * dak/clean_suites.py: likewise
10         * dak/compare_suites.py: likewise
11         * dak/cruft_report.py: likewise
12         * dak/examine_package.py: likewise
13         * dak/find_null_maintainers.py: likewise
14         * dak/generate_index_diffs.py: likewise
15
16         * dak/check_archive.py (check_files_not_symlinks): Remove
17         long-time unused and commented code. Import stuff from daklib as
18         "import daklib.foo as foo"
19
20 2008-05-03  Joerg Jaspert  <joerg@debian.org>
21
22         * dak/examine_package.py: clean up pychecker warnings (merged with
23         Thomas changes to the NEW display)
24
25 2008-05-03  Mark Hymers <mhy@debian.org>
26
27         * dak/check_archive.py: clean up pychecker warnings
28         * dak/check_overrides.py: likewise
29         * dak/check_proposed_updates.py: likewise
30         * dak/clean_proposed_updates.py: likewise
31         * dak/clean_queues.py: likewise
32         * dak/control_overrides.py: likewise
33         * dak/control_suite.py: likewise
34         * dak/decode_dot_dak.py: likewise
35         * dak/examine_package.py: likewise
36         * dak/process_new.py: likewise
37         * dak/process_unchecked.py: likewise
38         * dak/queue_report.py: likewise
39         * dak/reject_proposed_updates.py: likewise
40         * dak/security_install.py: likewise
41         * dak/show_new.py: likewise
42         * dak/stats.py: likewise
43         * dak/symlink_dists.py: likewise
44         * dak/transitions.py: likewise
45
46 2008-05-03  Joerg Jaspert  <joerg@debian.org>
47
48         * config/debian/cron.daily: Rename to
49         * config/debian/cron.dinstall: this, as its not really something run
50         daily for some time now. And while dinstall is an OLD name, its
51         recognized pretty well within Debian
52         Also add some more timing information
53         Do not allow automated [o-]p-u-new processing to break dinstall
54
55 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
56
57         * web/,web/style.css: add web dir and current style.css
58
59         * dak/examine_package.py, dak/show_new.py: improve NEW html pages,
60         based on mock-up by M. Ferrari.
61         remove Checksums-* from examine-package output
62
63 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
64
65         * dak/process_unchecked.py (check_hashes): Reject on error while
66         parsing Checksums-*.
67
68 2008-05-02  Joerg Jaspert  <joerg@debian.org>
69
70         * config/debian/pseudo-packages*: Removed listarchives, closes #468667
71         added wiki.debian.org (currently pointing to debian-www), closes #194206
72         added security-tracker, closes #436152
73         added release.debian.org, closes #451005
74
75         * config/debian/cron.buildd: Cleanup unreachable code. (If someone
76         still wants it - its in revision control...)
77
78         * config/debian/cron.daily: Modify call to update-ftpstats to only
79         use files log/2*, instead of log/*, so it ignores the new cron/
80         subdir. Makes sure it can't get confused, and is also safe for
81         nearly thousand years. If this code is really in use in year 3000,
82         im sure people can adjust it! :)
83
84         * config/debian/vars: Add logdir as a place for cronjob log output
85
86         * config/debian/cron.daily: Use a logfile and be more verbose of
87         whats going on.
88           Also moved the commented VACUUM ; VACUUM ANALYZE calls over to
89         cron.weekly, ...
90         * config/debian/cron.weekly: likewise,
91           ... and activate those calls again. Once a week, as an
92         additional safety bet to be sure the stuff does get run is ok,
93         even if we have autovacuum by default.
94
95 2008-05-02  Thomas Viehmann  <tv@beamnet.de>
96
97         * dak/process_unchecked.py (check_hashes): fix typo in
98           checksum reject message.
99
100 2008-05-02  Joerg Jaspert  <joerg@debian.org>
101
102         * config/debian/extensions.py: used reindent.py from the python
103         2.x source examples to get all dak code use the same indentation
104         style, no longer a mix of 4 spaces / 1 tab.
105         * dak/check_archive.py: likewise
106         * dak/check_overrides.py: likewise
107         * dak/check_proposed_updates.py: likewise
108         * dak/clean_proposed_updates.py: likewise
109         * dak/clean_queues.py: likewise
110         * dak/clean_suites.py: likewise
111         * dak/compare_suites.py: likewise
112         * dak/control_overrides.py: likewise
113         * dak/control_suite.py: likewise
114         * dak/cruft_report.py: likewise
115         * dak/dak.py: likewise
116         * dak/decode_dot_dak.py: likewise
117         * dak/examine_package.py: likewise
118         * dak/find_null_maintainers.py: likewise
119         * dak/generate_index_diffs.py: likewise
120         * dak/generate_releases.py: likewise
121         * dak/import_archive.py: likewise
122         * dak/import_keyring.py: likewise
123         * dak/import_ldap_fingerprints.py: likewise
124         * dak/import_users_from_passwd.py: likewise
125         * dak/init_db.py: likewise
126         * dak/init_dirs.py: likewise
127         * dak/ls.py: likewise
128         * dak/make_maintainers.py: likewise
129         * dak/make_overrides.py: likewise
130         * dak/make_suite_file_list.py: likewise
131         * dak/mirror_split.py: likewise
132         * dak/new_security_install.py: likewise
133         * dak/override.py: likewise
134         * dak/poolize.py: likewise
135         * dak/process_accepted.py: likewise
136         * dak/process_new.py: likewise
137         * dak/process_unchecked.py: likewise
138         * dak/queue_report.py: likewise
139         * dak/reject_proposed_updates.py: likewise
140         * dak/rm.py: likewise
141         * dak/security_install.py: likewise
142         * dak/show_new.py: likewise
143         * dak/split_done.py: likewise
144         * dak/stats.py: likewise
145         * dak/symlink_dists.py: likewise
146         * dak/test/001/test.py: likewise
147         * dak/test/002/test.py: likewise
148         * dak/transitions.py: likewise
149         * daklib/extensions.py: likewise
150         * daklib/logging.py: likewise
151         * daklib/queue.py: likewise
152         * daklib/utils.py: likewise
153         * scripts/debian/insert_missing_changedby.py: likewise
154
155         * dak/process_new.py (recheck): Make the path check more robust,
156         so we no longer have to keep process_new seperate trees between
157         security and normal archive.
158
159 2008-04-27  Joerg Jaspert  <joerg@debian.org>
160
161         * dak/process_accepted.py (Urgency_Log.__init__): Warn if the
162         configured path does not exist or is not writeable by us. Use a
163         tmp path if so, so we do not lose the urgencies in such cases.
164
165         * config/debian/dak.conf: Changed path for UrgencyLog
166         Same for the ReleaseTransitions file
167
168         * config/debian/cron.daily: Notify qa user on merkel of dinstall
169         start, Remove the britney call
170
171 2008-04-26  Joerg Jaspert  <joerg@debian.org>
172
173         * dak/process_new.py: Call end() whenever we try to leave by
174         pressing Q
175
176         * config/debian/cron.daily: Also report NBS in experimental
177
178 2008-04-25  Joerg Jaspert  <joerg@debian.org>
179
180         * dak/cruft_report.py (main): Make it possible to look at
181         experimental too, especially NBS
182
183         * dak/split_done.py (main): Only move files into their subdirs if
184         they are older than 30 days. That enables us to run this script as
185         part of a cronjob.
186
187         * config/debian/cron.weekly: Run dak split-done
188
189 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
190
191         * dak/process_unchecked.py: add changes["sponsoremail"]
192           for sponsored uploads if desired
193         * daklib/queue.py: add changes["sponsoremail"] to
194           Subst["__MAINTAINER_TO__"] if present
195         * daklib/utils.py: add functions
196           is_email_alias to check which accounts allow email forwarding,
197           which_alias_file to find the alias file, and
198           gpg_get_key_addresses to find uid addresses for a given
199             fingerprint
200
201 2008-04-22  Joerg Jaspert  <joerg@debian.org>
202
203         * setup/init_pool.sql: added a function/aggregate for the release
204         team to base some script on it.
205
206         * config/debian/cron.daily: push katie@merkel to immediately start
207         the sync of projectb there.
208
209 2008-04-21  Joerg Jaspert  <joerg@debian.org>
210
211         * scripts/debian/expire_dumps: New script, expires old database
212         dumps, using a scheme to keep more of the recent dumps.
213
214         * config/debian/cron.daily: Use the new script. Also - compress
215         all files older than 7 days, instead of 30.
216
217         * dak/process_accepted.py (install): Do not break if a
218         source/maintainer combination is already in src_uploaders, "just"
219         warn us.
220
221 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
222
223         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
224         Format lines (ie. those having extra text appended).
225
226 2008-04-19  Joerg Jaspert  <joerg@debian.org>
227
228         * dak/process_unchecked.py (check_files): Sanity check the
229         provides field, which closes #472783
230
231 2008-04-18  Joerg Jaspert  <joerg@debian.org>
232
233         * config/debian/dak.conf: Add mapping stable-proposed-updates
234           -> proposed-updates.
235
236         * dak/transitions.py (load_transitions): Additionally check for
237         invalid package list indentation
238
239 2008-04-17  Joerg Jaspert  <joerg@debian.org>
240
241         * config/debian/dak.conf: Add TempPath statement for the Release
242         Transitions script
243
244         * dak/transitions.py (temp_transitions_file): Use the TempPath
245         (write_transitions_from_file): Check if the file we should get our
246         transitions from is in our TempPath, error out if it isnt
247         (main): Check for TempPath existance
248
249 2008-04-12  James Troup  <troup@debian.org>
250
251         * dak/clean_proposed_updates.py: add support for -s/--suite and
252         -n/--no-action.
253
254 2008-04-11  Anthony Towns  <ajt@debian.org>
255
256         * dak/utils.py: build_file_list() extra parameters so it can
257         build a file list for checksums-foo fields. Don't use float() to
258         compare formats, because Format: 1.10 should compare greater than
259         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
260
261         * dak/process_unchecked.py: check_md5sum becomes check_hashes
262         and check_hash. If changes format is 1.8 or later, also check
263         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
264         and reject on presence/absence of un/expected checksums-* fields.
265
266 2008-04-07  Joerg Jaspert  <joerg@debian.org>
267
268         * daklib/utils.py (build_file_list): Check for dpkg .changes
269         adjusted to reject newer (and right now broken) 1.8 version, until
270         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
271
272 2008-03-22  Joerg Jaspert  <joerg@debian.org>
273
274         * dak/transitions.py (load_transitions): Check if all our keys are
275         defined, if there are only keys defined we want and also the types
276         of the various keys.
277
278 2008-03-22  Anthony Towns  <ajt@debian.org>
279
280         * dak/edit_transitions.py: Add --import option.
281         Add --use-sudo option. Use fcntl locking for writing.
282         Move writing into a function (write_transitions).
283         Reinvoke self using sudo and --import if necessary.
284         Move temporary file creation into a function, use mkstemp.
285         Rename to "dak transitions".
286
287 2008-03-21  Joerg Jaspert  <joerg@debian.org>
288
289         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
290         edited file back in place
291         (check_transitions): Use proper locking and also use sudo to copy
292         the new file in place
293
294 2008-03-21  Anthony Towns <ajt@debian.org>
295
296         * config/debian/extensions.py: Add infrastructure for replacing
297         functions in dak modules; add upload blocking for dpkg.
298
299 2008-03-12  Joerg Jaspert  <joerg@debian.org>
300
301         * dak/edit_transitions.py: Done a number of cleanups to make code
302         working. Also changed the way prompting/answering goes, to not
303         have to import daklib/queue.
304         (edit_transitions): When done with a successful edit - also print
305         a final overview about defined transitions
306
307 2008-03-11  Joerg Jaspert  <joerg@debian.org>
308
309         * dak/process_unchecked.py: Import syck module directly, not "from
310         syck import *"
311         (check_transition): Do the check for sourceful upload in here
312         Also adjust the syck loading commands, rename new_vers to
313         expected, curvers to current, to make it more clear what they mean.
314
315         * daklib/database.py (get_suite_version): Renamed from
316         get_testing_version. Also changed the cache variables name
317
318         * The above changes are based on modifications from Anthony.
319
320         * dak/dak.py (init): Renamed check -> edit transitions
321
322         * dak/edit_transitions.py: Renamed from check_transitions.py
323         (main): Also rename new_vers/curvers to expected/current
324         Basically a nice rewrite, so it now does checks and edit,
325         depending on how you call it. Check also removes old transitions,
326         if user wants it.
327
328 2008-03-02  Joerg Jaspert  <joerg@debian.org>
329
330         * debian/control (Suggests): Add python-syck to Depends:
331
332         * dak/dak.py (init): Tell it about check_transitions
333
334         * dak/check_transitions.py (usage): Added, checks the transitions
335         file (if any)
336
337         * daklib/database.py (get_testing_version): Added. Returns the
338         version for the source in testing, if any
339
340         * dak/process_unchecked.py (check_transition): Added. Checks if a
341         release team member defined a transition, and rejects based on
342         that data.
343         (process_it): Use it.
344         (check_transition): Warn on broken transitions file and return,
345         not doing anything.
346         (check_transition): Moved out of here, into daklib/queue
347         (process_it): Call check_transitions only if
348         changes[architecture] has source included.
349         (check_transition): Now call the database.get_testing_version
350
351 2008-02-09  Christoph Berg <myon@debian.org>
352
353         * daklib/queue.py (get_type): fubar does not exist in global
354         namespace.
355
356         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
357         to source table, and move src_uploaders after source so the REFERNCES
358         clause works.
359         * dak/process_accepted.py (install): Fill the changedby column from
360         the information found in the .changes. This will allow to identify
361         NMUs and sponsored uploads more precisely in tools querying projectb.
362         * scripts/debian/insert_missing_changedby.py: Script to import yet
363         missing fields from filippo's uploads-history DB.
364
365 2008-02-06  Joerg Jaspert  <joerg@debian.org>
366
367         * daklib/utils.py (check_signature): Make variable key available,
368         so we can access it.
369
370 2008-01-07  Joerg Jaspert  <joerg@debian.org>
371
372         * dak/examine_package.py (check_deb): Remove linda call. It
373         provides no added benefit to lintian anymore.
374
375 2008-01-07  Joerg Jaspert  <joerg@debian.org>
376
377         * dak/examine_package.py (check_deb): Remove linda call. It
378         provides no added benefit to lintian anymore.
379
380 2008-01-06  Joerg Jaspert  <joerg@debian.org>
381
382         * dak/examine_package.py (do_lintian): lintian now supports html
383         coloring, so use it.
384         (do_command): Dont escape html chars if param escaped = 1
385
386 2008-01-06  Joerg Jaspert  <joerg@debian.org>
387
388         * dak/examine_package.py (do_lintian): lintian now supports html
389         coloring, so use it.
390         (do_command): Dont escape html chars if param escaped = 1
391
392 2007-12-31  Anthony Towns  <ajt@debian.org>
393
394         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
395         when processing result of check_dsc_against_db so we don't promote
396         warnings to rejections.
397
398 2007-12-31  Anthony Towns  <ajt@debian.org>
399
400         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
401         when processing result of check_dsc_against_db so we don't promote
402         warnings to rejections.
403
404 2007-12-30  Joerg Jaspert  <joerg@debian.org>
405
406         * dak/dak.py (init): add show-new. This is based on a patch
407         submitted by Thomas Viehmann in Bug #408318, but large parts of
408         handling it are rewritten and show-new is done by me.
409
410         * dak/queue_report.py (table_row): Add link to generated html page
411         for NEW package.
412
413         * dak/show_new.py: new file, generates html overview for NEW
414         packages, similar to what we see with examine-package.
415
416         * config/debian/cron.hourly: Add show-new call
417
418         * config/debian/dak.conf: Add HTMLPath for Show-New
419
420         * dak/examine_package.py (print_copyright): ignore stderr when
421         finding copyright file.
422         (main): add html option
423         (html_escape): new function
424         (escape_if_needed): ditto
425         (headline): ditto
426         (colour_output): ditto
427         (print_escaped_text): ditto
428         (print_formatted_text): ditto
429         - use those functions everywhere where we generate output, as they
430         easily know if we want html or not and just DTRT
431         (do_lintian): new function
432         (check_deb): use it
433         (output_deb_info): Use print_escaped_text, not print_formatted_text.
434         Also import daklib.queue, determine_new now lives there
435
436         Also add a variable to see if we want html output. Default is
437         disabled, show_new enables it for its use.
438         Most of html, besides header/footer are in examine_package instead
439         of show_new, as it makes it a whole lot easier to deal with it at
440         the point the info is generated.
441
442
443         * dak/process_new.py (determine_new): Moved out of here.
444         (check_valid): Moved out of here.
445         (get_type): Moved out of here.
446
447         * daklib/queue.py (determine_new): Moved here.
448         (check_valid): Moved here.
449         (get_type): Moved here.
450
451         * dak/init_db.py (do_section): Remove non-US code
452
453         * dak/make_overrides.py (main): ditto
454
455         * dak/process_new.py (determine_new): ditto
456
457         * daklib/queue.py (Upload.in_override_p),
458         (Upload.check_override): ditto
459
460         * daklib/utils.py (extract_component_from_section):,
461         (poolify): ditto
462
463         * dak/import_archive.py (update_section): ditto
464
465         * dak/symlink_dists.py (fix_component_section): ditto
466
467         * scripts/debian/mkmaintainers: ditto
468
469         * scripts/debian/update-mirrorlists (masterlist): ditto
470
471         * config/debian-non-US/*: Remove subdir
472
473         * scripts/debian/update-readmenonus: Removed.
474
475
476 2007-12-30  Joerg Jaspert  <joerg@debian.org>
477
478         * dak/dak.py (init): add show-new. This is based on a patch
479         submitted by Thomas Viehmann in Bug #408318, but large parts of
480         handling it are rewritten and show-new is done by me.
481
482         * dak/queue_report.py (table_row): Add link to generated html page
483         for NEW package.
484
485         * dak/show_new.py: new file, generates html overview for NEW
486         packages, similar to what we see with examine-package.
487
488         * config/debian/cron.hourly: Add show-new call
489
490         * config/debian/dak.conf: Add HTMLPath for Show-New
491
492         * dak/examine_package.py (print_copyright): ignore stderr when
493         finding copyright file.
494         (main): add html option
495         (html_escape): new function
496         (escape_if_needed): ditto
497         (headline): ditto
498         (colour_output): ditto
499         (print_escaped_text): ditto
500         (print_formatted_text): ditto
501         - use those functions everywhere where we generate output, as they
502         easily know if we want html or not and just DTRT
503         (do_lintian): new function
504         (check_deb): use it
505         (output_deb_info): Use print_escaped_text, not print_formatted_text.
506         Also import daklib.queue, determine_new now lives there
507
508         Also add a variable to see if we want html output. Default is
509         disabled, show_new enables it for its use.
510         Most of html, besides header/footer are in examine_package instead
511         of show_new, as it makes it a whole lot easier to deal with it at
512         the point the info is generated.
513
514
515         * dak/process_new.py (determine_new): Moved out of here.
516         (check_valid): Moved out of here.
517         (get_type): Moved out of here.
518
519         * daklib/queue.py (determine_new): Moved here.
520         (check_valid): Moved here.
521         (get_type): Moved here.
522
523         * dak/init_db.py (do_section): Remove non-US code
524
525         * dak/make_overrides.py (main): ditto
526
527         * dak/process_new.py (determine_new): ditto
528
529         * daklib/queue.py (Upload.in_override_p),
530         (Upload.check_override): ditto
531
532         * daklib/utils.py (extract_component_from_section):,
533         (poolify): ditto
534
535         * dak/import_archive.py (update_section): ditto
536
537         * dak/symlink_dists.py (fix_component_section): ditto
538
539         * scripts/debian/mkmaintainers: ditto
540
541         * scripts/debian/update-mirrorlists (masterlist): ditto
542
543         * config/debian-non-US/*: Remove subdir
544
545         * scripts/debian/update-readmenonus: Removed.
546
547
548 2007-12-28  Anthony Towns  <ajt@debian.org>
549
550         * daklib/utils.py (check_signature): add NOTATION_DATA and
551         NOTATION_NAME to known keywords.
552
553         * daklib/queue.py (Upload.check_source_against_db):
554
555         * dak/make_suite_file_list.py: add -f/--force option.
556
557         * dak/generate_releases.py: add -a/--apt-conf=FILE and
558         -f/--force-touch options.  Pull version info from the database.
559         Make suite description optional.
560
561         * config/debian/dak.conf: update
562         Reject-Proposed-Updates::MoreInfoURL.  Comment out
563         Suite::Stable::Version and ::Description.
564
565         * config/debian/apt.conf: Add hurd-i386 to unstable
566         debian-installer stanza.
567
568 2007-12-28  Joerg Jaspert  <joerg@debian.org>
569
570         * KEYEXPIRED is actually a known keyword. We do check it earlier
571         on and reject in case the sig is bad (or unknown)
572
573 2007-12-28  Anthony Towns  <ajt@debian.org>
574
575         * daklib/utils.py (check_signature): add NOTATION_DATA and
576         NOTATION_NAME to known keywords.
577
578         * daklib/queue.py (Upload.check_source_against_db):
579
580         * dak/make_suite_file_list.py: add -f/--force option.
581
582         * dak/generate_releases.py: add -a/--apt-conf=FILE and
583         -f/--force-touch options.  Pull version info from the database.
584         Make suite description optional.
585
586         * config/debian/dak.conf: update
587         Reject-Proposed-Updates::MoreInfoURL.  Comment out
588         Suite::Stable::Version and ::Description.
589
590         * config/debian/apt.conf: Add hurd-i386 to unstable
591         debian-installer stanza.
592
593 2007-12-28  Joerg Jaspert  <joerg@debian.org>
594
595         * KEYEXPIRED is actually a known keyword. We do check it earlier
596         on and reject in case the sig is bad (or unknown)
597
598 2007-12-24  Joerg Jaspert  <joerg@debian.org>
599
600         * Also run lintian on the .dsc file to check the source itself.
601
602         * Fix the direct usage of ar | tar etc to get the copyright file
603         and use dpkg-deb, which is made for this and makes us able to
604         process data.tar.bz2 (or whatever format it will be in the
605         future).
606
607 2007-12-24  Joerg Jaspert  <joerg@debian.org>
608
609         * Also run lintian on the .dsc file to check the source itself.
610
611         * Fix the direct usage of ar | tar etc to get the copyright file
612         and use dpkg-deb, which is made for this and makes us able to
613         process data.tar.bz2 (or whatever format it will be in the
614         future).
615
616 2007-12-21  Joerg Jaspert  <joerg@debian.org>
617
618         * Remove the (now useless) check for a pre-depends on dpkg for
619           binaries that contain bzip2 compressed data tarballs.
620
621 2007-12-21  Joerg Jaspert  <joerg@debian.org>
622
623         * Remove the (now useless) check for a pre-depends on dpkg for
624           binaries that contain bzip2 compressed data tarballs.
625
626 2007-08-28  Anthony Towns  <ajt@debian.org>
627
628         * process_unchecked.py: Add support for automatic BYHAND
629         processing.
630         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
631         processing of tag-overrides.
632         * examine_package.py: Summarise duplicate copyright file entries
633         (same md5sum) with a reference to the previous instance, rather
634         than repeating them.
635         * process_new.py: When rejecting from the p-u-new or o-p-u-new
636         holding queues, don't worry if dak has its own reasons for
637         rejecting the package as well as the SRMs.
638
639 2007-08-28  Anthony Towns  <ajt@debian.org>
640
641         * process_unchecked.py: Add support for automatic BYHAND
642         processing.
643         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
644         processing of tag-overrides.
645         * examine_package.py: Summarise duplicate copyright file entries
646         (same md5sum) with a reference to the previous instance, rather
647         than repeating them.
648         * process_new.py: When rejecting from the p-u-new or o-p-u-new
649         holding queues, don't worry if dak has its own reasons for
650         rejecting the package as well as the SRMs.
651
652 2007-06-19  Anthony Towns  <ajt@debian.org>
653
654         * Add nm.debian.org pseudopackage
655
656 2007-06-19  Anthony Towns  <ajt@debian.org>
657
658         * Add nm.debian.org pseudopackage
659
660 2007-06-18  Anthony Towns  <ajt@debian.org>
661
662         * daklib/logging.py: Set umask to not exclude group-writability
663         so we don't get reminded at the start of each month. Thanks to
664         Random J.
665         * dak/override.py: More changes from Herr von Wifflepuck: warn
666         if section of source is different to binary section; restore
667         functionality on source-only overrides; croak if trying to set
668         priority of a source override; never set priority of source
669         overrides; correct typo in logging (s/priority/section/ at
670         one place)
671
672         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
673         * config/debian/cron.daily: auotmatically accept/reject
674         oldstable-proposed-updates based on COMMENTS directory
675
676 2007-06-18  Anthony Towns  <ajt@debian.org>
677
678         * config/debian/apt.conf, config/debian/apt.conf.stable,
679         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
680         (sarge), support for oldstable-proposed-updates, dropping m68k
681         from etch, creating etch-m68k suite, creating lenny.
682
683         * config/debian/vars: update for lenny
684
685         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
686         drop upload limitations, add release postgres user
687
688         * dak/process_new.py: support for automatically accepting and rejecting
689         packages from proposed-updates holding queues via COMMENTS directory
690         * cron.daily: automatically process COMMENTS-based approvals
691         and rejections for proposed-updates holding queues
692
693         * dak/process_unchecked.py: add support for oldproposedupdates
694         holding queue
695
696         * dak/control_suite.py: allow control-suite to work with etch-m68k
697
698         * dak/generate_releases.py: unlink old Release files before updating
699         them if nlinks > 1 (ie, if two files used to be the same, maybe they
700         shouldn't be when generate-releases is run)
701
702         * dak/generate_releases.py: add a couple of commented lines to make
703         it easier to deal with point releases
704
705         * dak/make_overrides.py: generate overrides for !contrib udebs
706
707         * docs/README.stable-point-release: update docs for doing a
708         point release
709
710 2007-06-18  Anthony Towns  <ajt@debian.org>
711
712         * daklib/logging.py: Set umask to not exclude group-writability
713         so we don't get reminded at the start of each month. Thanks to
714         Random J.
715         * dak/override.py: More changes from Herr von Wifflepuck: warn
716         if section of source is different to binary section; restore
717         functionality on source-only overrides; croak if trying to set
718         priority of a source override; never set priority of source
719         overrides; correct typo in logging (s/priority/section/ at
720         one place)
721
722         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
723         * config/debian/cron.daily: auotmatically accept/reject
724         oldstable-proposed-updates based on COMMENTS directory
725
726 2007-06-18  Anthony Towns  <ajt@debian.org>
727
728         * config/debian/apt.conf, config/debian/apt.conf.stable,
729         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
730         (sarge), support for oldstable-proposed-updates, dropping m68k
731         from etch, creating etch-m68k suite, creating lenny.
732
733         * config/debian/vars: update for lenny
734
735         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
736         drop upload limitations, add release postgres user
737
738         * dak/process_new.py: support for automatically accepting and rejecting
739         packages from proposed-updates holding queues via COMMENTS directory
740         * cron.daily: automatically process COMMENTS-based approvals
741         and rejections for proposed-updates holding queues
742
743         * dak/process_unchecked.py: add support for oldproposedupdates
744         holding queue
745
746         * dak/control_suite.py: allow control-suite to work with etch-m68k
747
748         * dak/generate_releases.py: unlink old Release files before updating
749         them if nlinks > 1 (ie, if two files used to be the same, maybe they
750         shouldn't be when generate-releases is run)
751
752         * dak/generate_releases.py: add a couple of commented lines to make
753         it easier to deal with point releases
754
755         * dak/make_overrides.py: generate overrides for !contrib udebs
756
757         * docs/README.stable-point-release: update docs for doing a
758         point release
759
760 2007-03-05  Anthony Towns  <ajt@debian.org>
761
762         * config/debian/dak.conf: update for 3.1r5.
763         * scripts/debian/ssh-move: add ssh-move script from debbugs
764         * config/debian/cron.unchecked: push version info to debbugs using
765         ssh-move.
766
767 2007-03-05  Anthony Towns  <ajt@debian.org>
768
769         * config/debian/dak.conf: update for 3.1r5.
770         * scripts/debian/ssh-move: add ssh-move script from debbugs
771         * config/debian/cron.unchecked: push version info to debbugs using
772         ssh-move.
773
774 2007-02-14  James Troup  <troup@ries.debian.org>
775
776         * docs/README.config: remove Dinstall::GroupOverrideFilename.
777         * config/debian/dak.conf: likewise.
778         * config/debian-non-US/dak.conf: likewise.
779         * config/debian-security/dak.conf: likewise.
780
781         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
782         experimental differently, just close the bugs and let version
783         tracking sort it out.
784          (nmu_p): remove entire class - now unused.
785          (Upload.__init__): don't use nmu_p.
786
787 2007-02-14  James Troup  <troup@ries.debian.org>
788
789         * docs/README.config: remove Dinstall::GroupOverrideFilename.
790         * config/debian/dak.conf: likewise.
791         * config/debian-non-US/dak.conf: likewise.
792         * config/debian-security/dak.conf: likewise.
793
794         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
795         experimental differently, just close the bugs and let version
796         tracking sort it out.
797          (nmu_p): remove entire class - now unused.
798          (Upload.__init__): don't use nmu_p.
799
800 2007-02-08  Anthony Towns  <ajt@debian.org>
801
802         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
803         signing key.  Drop maximum index diffs down to 14.
804
805         * config/debian/apt.conf: add udeb support for non-free (testing,
806         unstable) and experimental.
807         * config/debian/dak.conf: likewise.
808
809         * dak/generate_releases.py (main): handle udebs in any component.
810
811         * daklib/queue.py (Upload.build_summaries): handle files without a
812         'type' gracefully.
813
814         * dak/generate_releases.py (print_sha256_files): new function.
815         (main): use it.
816
817         * dak/process_accepted.py (stable_install): fix name of template
818         mail.
819
820         * dak/process_unchecked.py (is_stableupdate): fix invocation of
821         database.get_suite_id().
822
823         * templates/process-new.bxa_notification: Update on request
824         of/after discussion with BIS staff.
825
826         * scripts/debian/mkfilesindices: also handle proposed-updates.
827
828 2007-02-08  Ryan Murray  <rmurray@debian.org>
829
830         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
831         group name for chgrp of mail archives.
832
833         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
834         orig.tar.gz's by picking the first one by file id.
835
836         * dak/override.py (main): limit to binary overrides only for now.
837         (usage): update to match.
838
839         * config/debian/cron.daily: track when we have the accepted lock
840         and clean it up on exit if we have it.  Take/check the
841         cron.unchecked lock just before traping to cleanup on exit.
842         Remove potato override handling.  Remove any dangling symlinks in
843         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
844
845         * config/debian/apt.conf: change default compression scheme for
846         both Sources and Packages to gzip and bzip2 rather than
847         uncompressed and gzip (Packages) and gzip (Sources).  Use old
848         defaults for proposed-updates.
849
850         * dak/control_overrides.py (main): refuse to operate on
851         untouchable suites.
852
853         * config/debian/pseudo-packages.maintainers: drop install,
854         installation, boot-floppy, slink-cd, potato-cd and
855         nonus.debian.org.  Update base.
856         * config/debian/pseudo-packages.description: likewise.
857
858         * daklib/utils.py (re_srchasver): new regex.
859         (parse_changes): use regex to split 'Source (Version)' style
860         Source fields into 'source' and 'source-version'.
861
862         * config/debian/cron.daily: use $base instead of hardcoding path
863         name.
864
865         * scripts/debian/mkfilesindices: source 'vars' file and use it's
866         variables instead of hardcoding path names.
867
868         * config/debian/apt.conf: switch from /org to /srv.
869         * config/debian/apt.conf.buildd: likewise.
870         * config/debian/apt.conf.stable: likewise.
871         * config/debian/cron.daily: likewise.
872         * config/debian/cron.hourly: likewise.
873         * config/debian/cron.monthly: likewise.
874         * config/debian/cron.unchecked: likewise.
875         * config/debian/cron.weekly: likewise.
876         * config/debian/dak.conf: likewise.
877         * config/debian/vars: likewise.
878         * scripts/debian/mkfilesindices: likewise.
879
880 2007-02-08  James Troup  <james@nocrew.org>
881
882         * dak/process_unchecked.py (check_signed_by_key): new function to
883         ensure .changes files are signed by an authorized uploader.
884         (process_it): use it.
885
886         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
887         to configure per suite/component/architecture binary upload
888         restrictions.
889
890 2007-02-08  Anthony Towns  <ajt@debian.org>
891
892         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
893         signing key.  Drop maximum index diffs down to 14.
894
895         * config/debian/apt.conf: add udeb support for non-free (testing,
896         unstable) and experimental.
897         * config/debian/dak.conf: likewise.
898
899         * dak/generate_releases.py (main): handle udebs in any component.
900
901         * daklib/queue.py (Upload.build_summaries): handle files without a
902         'type' gracefully.
903
904         * dak/generate_releases.py (print_sha256_files): new function.
905         (main): use it.
906
907         * dak/process_accepted.py (stable_install): fix name of template
908         mail.
909
910         * dak/process_unchecked.py (is_stableupdate): fix invocation of
911         database.get_suite_id().
912
913         * templates/process-new.bxa_notification: Update on request
914         of/after discussion with BIS staff.
915
916         * scripts/debian/mkfilesindices: also handle proposed-updates.
917
918 2007-02-08  Ryan Murray  <rmurray@debian.org>
919
920         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
921         group name for chgrp of mail archives.
922
923         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
924         orig.tar.gz's by picking the first one by file id.
925
926         * dak/override.py (main): limit to binary overrides only for now.
927         (usage): update to match.
928
929         * config/debian/cron.daily: track when we have the accepted lock
930         and clean it up on exit if we have it.  Take/check the
931         cron.unchecked lock just before traping to cleanup on exit.
932         Remove potato override handling.  Remove any dangling symlinks in
933         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
934
935         * config/debian/apt.conf: change default compression scheme for
936         both Sources and Packages to gzip and bzip2 rather than
937         uncompressed and gzip (Packages) and gzip (Sources).  Use old
938         defaults for proposed-updates.
939
940         * dak/control_overrides.py (main): refuse to operate on
941         untouchable suites.
942
943         * config/debian/pseudo-packages.maintainers: drop install,
944         installation, boot-floppy, slink-cd, potato-cd and
945         nonus.debian.org.  Update base.
946         * config/debian/pseudo-packages.description: likewise.
947
948         * daklib/utils.py (re_srchasver): new regex.
949         (parse_changes): use regex to split 'Source (Version)' style
950         Source fields into 'source' and 'source-version'.
951
952         * config/debian/cron.daily: use $base instead of hardcoding path
953         name.
954
955         * scripts/debian/mkfilesindices: source 'vars' file and use it's
956         variables instead of hardcoding path names.
957
958         * config/debian/apt.conf: switch from /org to /srv.
959         * config/debian/apt.conf.buildd: likewise.
960         * config/debian/apt.conf.stable: likewise.
961         * config/debian/cron.daily: likewise.
962         * config/debian/cron.hourly: likewise.
963         * config/debian/cron.monthly: likewise.
964         * config/debian/cron.unchecked: likewise.
965         * config/debian/cron.weekly: likewise.
966         * config/debian/dak.conf: likewise.
967         * config/debian/vars: likewise.
968         * scripts/debian/mkfilesindices: likewise.
969
970 2007-02-08  James Troup  <james@nocrew.org>
971
972         * dak/process_unchecked.py (check_signed_by_key): new function to
973         ensure .changes files are signed by an authorized uploader.
974         (process_it): use it.
975
976         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
977         to configure per suite/component/architecture binary upload
978         restrictions.
979
980 2006-10-09  James Troup  <james.troup@canonical.com>
981
982         * dak/process_unchecked.py (check_timestamps): change match to
983         search as recent versions of python-apt prefix the string with 'E: '.
984
985 2006-10-09  James Troup  <james.troup@canonical.com>
986
987         * dak/process_unchecked.py (check_timestamps): change match to
988         search as recent versions of python-apt prefix the string with 'E: '.
989
990 2006-06-26  Ryan Murray  <rmurray@debian.org>
991
992         * dak/process_unchecked.py (check_files): strip optional source version
993         from Source: field in changes file, and ensure what is left is a valid
994         package name.
995
996 2006-06-26  Ryan Murray  <rmurray@debian.org>
997
998         * dak/process_unchecked.py (check_files): strip optional source version
999         from Source: field in changes file, and ensure what is left is a valid
1000         package name.
1001
1002 2006-06-23  Ryan Murray  <rmurray@debian.org>
1003
1004         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1005         queue for source.
1006
1007 2006-06-23  Ryan Murray  <rmurray@debian.org>
1008
1009         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1010         queue for source.
1011
1012 2006-06-18  Ryan Murray  <rmurray@debian.org>
1013
1014         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1015         the log, too.
1016
1017         * dak/process_unchecked.py (check_files): only check embargoed and
1018         unembargoed queues if the keys are set.
1019
1020         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1021         and bzip2 for etch.
1022
1023 2006-06-18  Ryan Murray  <rmurray@debian.org>
1024
1025         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1026         the log, too.
1027
1028         * dak/process_unchecked.py (check_files): only check embargoed and
1029         unembargoed queues if the keys are set.
1030
1031         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1032         and bzip2 for etch.
1033
1034 2006-06-16  James Troup  <james@nocrew.org>
1035
1036         * dak/dak.py (init): add new-security-install.
1037
1038         * dak/new_security_install.py: cleanups and adapt for new naming
1039         scheme and other changes.
1040
1041 2006-06-16  Anthony Towns  <ajt@debian.org>
1042
1043         * dak/new_security_install.py: initial version imported from
1044         klecker.
1045
1046 2006-06-16  James Troup  <james@nocrew.org>
1047
1048         [Merged changes from klecker - original author unknown.]
1049
1050         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
1051
1052         * dak/security_install.py (do_upload): fix check for oldstable and
1053         upload file list handling.
1054
1055         * dak/process_unchecked.py (check_files): update "check for
1056         source" code to also look in Embargoed and Unembargoed queues.
1057         (is_unembargo): fix handling of Dir::Queue::Disembargo.
1058
1059         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
1060
1061         * config/debian-security/vars (disembargo): add.
1062
1063         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
1064         update.
1065         (Process-Unchecked::AcceptedLockFile): add.
1066         (Suite::Testing): clean up Version and Description.
1067         (SuiteMappings): add silent map from etch-secure to testing.
1068
1069         * config/debian-security/cron.unchecked: add support for
1070         disembargoed queues.
1071
1072         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
1073         files too.
1074
1075         * config/debian-security/apt.conf: add amd64 to architectures for
1076         testing-security.
1077
1078 2006-06-11  James Troup  <troup@spohr.debian.org>
1079
1080         * config/debian/cron.daily: invoke process-accepted not
1081         process-unchecked.
1082
1083         * config/debian/vars (scriptsdir): new variable.
1084         * config/debian/cron.daily: use it.
1085
1086         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
1087         $base/misc/ instead of versioned $masterdir.  Correct 'dak
1088         make-maintainers' invocation to look in $configdir for
1089         pseudo-packages.maintainers.
1090
1091         * daklib/queue.py (Upload.do_reject): use correct name for
1092         rejection template.
1093
1094 2006-06-11  James Troup  <james@nocrew.org>
1095
1096         * dak/override.py (main): temporarily add content of old X-Katie
1097         header back as the PTS apparently filters on it.
1098         * dak/process_accepted.py (main): likewise.
1099         * dak/process_new.py (main): likewise.
1100         * dak/process_unchecked.py (main): likewise.
1101         * dak/reject_proposed_updates.py (main): likewise.
1102         * dak/rm.py (main): likewise.
1103         * daklib/queue.py (Upload.do_reject): likewise.
1104
1105         * config/debian/cron.unchecked: set -u to error out on undefined
1106         variables.  Preset LOCKDAILY to "" accordingly.
1107         * config/debian/cron.hourly: likewise.
1108         * config/debian/cron.monthly: likewise.
1109         * config/debian/cron.weekly: likewise.
1110
1111         * config/debian/vars (configdir): add new variable pointing to
1112         this directory.
1113
1114         * config/debian/cron.daily: use $configdir inplace of $masterdir
1115         when that's what we mean, and don't cd into $masterdir just to run
1116         dak scripts as we don't need to do that anymore.
1117         * config/debian/cron.hourly: likewise.
1118         * config/debian/cron.unchecked: likewise.
1119         * config/debian/cron.weekly: likewise.
1120
1121         * config/debian/dak.conf
1122         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
1123         user back to list of known users as it's non-trivial to entirely
1124         change the owner of a database with postgresql 7.4.
1125
1126         * daklib/queue.py (Upload.source_exists): use string object
1127         methods rather than string module.
1128         (Upload.get_anyversion): likewise.
1129
1130         * daklib/utils.py (validate_changes_file_arg): update filename
1131         slicing to cope with new .dak filenames.
1132
1133         * dak/ls.py (main): add back 'heidi' as a valid argument for
1134         -f/--format as people are using it in scripts and breaking that
1135         without warning seems rude.
1136
1137 2006-05-21  James Troup  <james@nocrew.org>
1138
1139         * dak/rm.py (main): use string .isdigit() rather than
1140         utils.str_isnum().
1141         * dak/process_new.py (edit_overrides): likewise.
1142
1143         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
1144         string import.
1145
1146 2006-05-21  James Troup  <james@nocrew.org>
1147
1148         * dak/check_archive.py (check_indices_files_exist): use list
1149         comprehension instead of map().  No longer need to import
1150         deprecated string module as a side-effect.
1151         * dak/check_overrides.py (process): likewise.
1152         (main): likewise.
1153         * dak/cruft_report.py (do_obsolete_source): likewise.
1154         (main): likewise.
1155         * dak/ls.py (main): likewise.
1156         * dak/make_suite_file_list.py (write_filelists): likewise.
1157         * dak/process_accepted.py (stable_install): likewise.
1158         * dak/rm.py (main): likewise.
1159         * dak/stats.py (number_of_packages): likewise.
1160         * daklib/logging.py (Logger.log): likewise.
1161         * daklib/queue.py (Upload.source_exists): likewise.
1162         (Upload.cross_suite_version_check): likewise.
1163         * daklib/utils.py (parse_args): likewise.
1164
1165 2006-05-21  James Troup  <james@nocrew.org>
1166
1167         * daklib/utils.py (process_gpgv_output): new function, split out
1168         of check_signature().
1169         (check_signature): adapt accordingly.
1170         (retrieve_key): new function that will try to retrieve the key
1171         that signed a given file from a keyserver.
1172         (check_signature): add 'autofetch' argument that if not set
1173         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
1174         If 'autofetch' is true, invoke retrieve_key().
1175
1176         * docs/README.config: document Dinstall::KeyAutoFetch and
1177         Dinstall:KeyServer.
1178
1179 2006-05-20  James Troup  <james@nocrew.org>
1180
1181         * dak/find_null_maintainers.py (main):
1182         s/createtimestamp/createTimestamp/ to make things work with modern
1183         slapd.
1184
1185         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
1186         Stable::Version and Stable::Description for 3.1r2.
1187
1188         * config/debian-non-US/dak.conf: sync with klecker - update
1189         version number of 3.0 and MoreInfoURL.
1190
1191         * docs/README.stable-point-release: Add notes about updating
1192         dak.conf and Reject-Proposed-Updates section in particular.
1193         s/woody/stable/.  Also need to update README.html.
1194
1195         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
1196
1197         * config/debian/apt.conf: Add udeb tree for proposed-updates.
1198
1199 2006-05-20  Ryan Murray  <rmurray@debian.org>
1200
1201         * scripts/debian/update-ftpstats: new script to update daily
1202         architecture size graph data.
1203
1204         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
1205         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
1206         there.
1207
1208         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
1209         before we finish.  Don't push to merkel.
1210
1211         * dak/process_unchecked.py (check_changes): Also look in
1212         ProposedUpdates queue dir.
1213         (check_files): likewise.
1214
1215 2006-05-20  Anthony Towns  <ajt@debian.org>
1216
1217         * scripts/debian/mkfilesindices: new script to generate file
1218         indices used for partial mirroring.
1219
1220         * config/debian/cron.daily: add progress timestamps.
1221
1222         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
1223         amd64 to testing, unstable and experimental.  Drop sh from
1224         experimental.  Move Experimental to dists/experimental.  Add
1225         Dir::ProposedUpdates.  Add Architectures::amd64.
1226
1227         * config/debian/apt.conf: add amd64 to testing, unstable and
1228         experimental.  Drop uncompressed Packages files from testing. Drop
1229         sh from experimental.  Move experimental to dists/experimental/.
1230
1231         * config/debian/vars (archs): add amd64.
1232
1233         * dak/process_unchecked.py (action): Add support for
1234         proposed-updates approval queue.
1235         (is_stableupdate): new function - checks if the upload is targeted
1236         at proposed-updates.
1237         (do_stableupdate): likewise - moves upload to proposed-updates
1238         holding area.
1239
1240         * dak/process_new.py (do_new): warn if original or new target
1241         suite are invalid.
1242
1243         * dak/generate_releases.py (print_md5sha_files): less whitespace
1244         between the hash and size.
1245
1246         * dak/generate_index_diffs.py (genchanges): don't say we're not
1247         doing anything.  Better formatting of other messages.
1248         (main): don't skip experimental and remove some 'doing stuff'
1249         prints.
1250
1251 2006-05-18  James Troup  <james@nocrew.org>
1252
1253         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
1254         query.
1255
1256         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
1257         docstrings, untabify, don't shadow builtins, lowercase non-global
1258         variable names, spaces after commas.  Also bail if given any
1259         arguments since we don't accept any.
1260         * dak/init_db.py: likewise.  Also split large main() into
1261         subfunctions and rename get() to sql_get().
1262
1263         * dak/init_db.py (main): check returned value from
1264         database.get_archive_id().
1265
1266         * dak/dak.py: renamed from shell.py.  Update to support new source
1267         layout.  Created init() and usage() functions.  Various
1268         pylint-inspired cleanups.  Use daklib utils.warn() and
1269         utils.fubar().  Change 'functionality' variable to only have
1270         (command, description) and always invoke main() when running the
1271         module.  Also support -h.
1272
1273 2006-05-17  James Troup  <james@nocrew.org>
1274
1275         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
1276         imports of and calls to daklib modules.  Change script name
1277         everywhere, i.e. in output, mails, comments and configuration tree
1278         + filenames.  Also update references to other renamed scripts,
1279         classes and templates.  Use '.dak' instead of '.katie' for the
1280         queue info storage files.
1281         (Renamed from tea)
1282         * dak/check_overrides.py: likewise.  (Renamed from cindy)
1283         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
1284         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
1285         * dak/clean_queues.py: likewise.  (Renamed from shania)
1286         * dak/clean_suites.py: likewise.  (Renamed from rhona)
1287         * dak/compare_suites.py: likewise.  (Renamed from andrea)
1288         * dak/control_overrides.py: likewise.  (Renamed from natalie)
1289         * dak/control_suite.py: likewise.  (Renamed from heidi)
1290         * dak/cruft_report.py: likewise.  (Renamed from rene)
1291         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
1292         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
1293         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
1294         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
1295         * dak/import_archive.py: likewise.  (Renamed from neve)
1296         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
1297         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
1298         * dak/init_db.py: likewise. (Renamed from alyson)
1299         * dak/init_dirs.py: likewise. (Renamed from rose)
1300         * dak/ls.py: likewise. (Renamed from madison)
1301         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
1302         * dak/make_overrides.py: likewise.  (Renamed from denise)
1303         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
1304         * dak/mirror_split.py: likewise.  (Renamed from billie)
1305         * dak/override.py: likewise.  (Renamed from alicia)
1306         * dak/poolize.py: likewise.  (Renamed from catherine)
1307         * dak/process_accepted.py: likewise.  (Renamed from kelly)
1308         * dak/process_new.py: likewise.  (Renamed from lisa)
1309         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
1310         * dak/queue_report.py: likewise.  (Renamed from helena)
1311         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
1312         * dak/rm.py: likewise.  (Renamed from melanie)
1313         * dak/security_install.py: likewise.  (Renamed from amber)
1314         * dak/split_done.py: likewise.  (Renamed from nina)
1315         * dak/stats.py: likewise.  (Renamed from saffron)
1316         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
1317         * daklib/database.py: likewise.  (Renamed from db_access)
1318         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
1319         * daklib/utils.py: likewise.
1320
1321         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
1322         doesn't need to notify anyone" string.
1323         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
1324
1325         * dak/process_accepted.py (init): drop -V/--version argument.
1326         * dak/process_new.py (init): likewise.
1327         * dak/process_unchecked.py (init): likewise.
1328         * dak/reject_proposed_updates.py (init): likewise
1329
1330         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
1331
1332         * dak/stats.py: in usage() output change STAT to MODE.
1333
1334 2006-05-15  James Troup  <james@nocrew.org>
1335
1336         * dak/queue_report.py: remove unused encodings imports.
1337
1338         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
1339         imports.  Initalize 'Cnf' as a global.
1340         (BillieDB._internal_recurse): fix 'util.' typo.
1341
1342         * dak/import_ldap_fingerprints.py (main): drop unused time import and
1343         commented out time check for LDAP search.
1344
1345 2005-12-16  Ryan Murray  <rmurray@debian.org>
1346
1347         * halle: add support for udebs
1348         * kelly: stable_install: add support for binNMU versions
1349
1350 2005-12-05  Anthony Towns  <aj@erisian.com.au>
1351
1352         * katie.py: Move accept() autobuilding support into separate function 
1353         (queue_build), and generalise to build different queues
1354
1355         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
1356
1357         * jennifer: Initial support for enabling embargo handling with the
1358         Dinstall::SecurityQueueHandling option.
1359         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
1360         functions.
1361
1362         * katie.conf-security: Include embargo options
1363         * katie.conf-security: Add Lock dir
1364         * init_pool.sql-security: Create disembargo table
1365         * init_pool.sql-security: Add constraints for disembargo table
1366
1367 2005-11-26  Anthony Towns  <aj@erisian.com.au>
1368
1369         * Merge of changes from klecker, by various people
1370
1371         * amber: special casing for not passing on amd64 and oldstable updates
1372         * amber: security mirror triggering
1373         * templates/amber.advisory: updated advisory structure
1374         * apt.conf.buildd-security: update for sarge's release
1375         * apt.conf-security: update for sarge's release
1376         * cron.buildd-security: generalise suite support, update for sarge's release
1377         * cron.daily-security: update for sarge's release, add udeb support
1378         * vars-security: update for sarge's release
1379         * katie.conf-security: update for sarge's release, add amd64 support,
1380         update signing key
1381
1382         * docs/README.names, docs/README.quotes: include the additions
1383
1384 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1385
1386         * Changed accepted_autobuild to queue_build everywhere.
1387         * Add a queue table.
1388         * Add a "queue" field in the queue_build table (currently always 0)
1389
1390         * jennifer: Restructure to make it easier to support special
1391         purpose queues between unchecked and accepted.
1392
1393 2005-11-25  Anthony Towns  <aj@erisian.com.au>
1394
1395         * Finishing merge of changes from spohr, by various people still
1396
1397         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
1398         works
1399         * jennifer: Re-enable .deb ar format checking
1400         * katie.py: Convert to +bX binNMU special casing
1401         * rhona: Add some debug output when deleting binaries
1402         * cron.daily: Add emilie
1403         * cron.unchecked: Add lock files
1404
1405 2005-11-15  Anthony Towns  <aj@erisian.com.au>
1406
1407         * Merge of changes from spohr, by various people.
1408
1409         * tiffani: new script to do patches to Packages, Sources and Contents
1410         files for quicker downloads.
1411         * ziyi: update to authenticate tiffani generated files
1412
1413         * dak: new script to provide a single binary with less arbitrary names
1414         for access to dak functionality.
1415
1416         * cindy: script implemented
1417
1418         * saffron: cope with suites that don't have a Priority specified
1419         * heidi: use get_suite_id()
1420         * denise: don't hardcode stable and unstable, or limit udebs to unstable
1421         * denise: remove override munging for testing (now done by cindy)
1422         * helena: expanded help, added new, sort and age options, and fancy headers
1423         * jennifer: require description, add a reject for missing dsc file
1424         * jennifer: change lock file
1425         * kelly: propogation support
1426         * lisa: honour accepted lock, use mtime not ctime, add override type_id
1427         * madison: don't say "dep-retry"
1428         * melanie: bug fix in output (missing %)
1429         * natalie: cope with maintainer_override == None; add type_id for overrides
1430         * nina: use mtime, not ctime
1431
1432         * katie.py: propogation bug fixes
1433         * logging.py: add debugging support, use | as the logfile separator
1434
1435         * katie.conf: updated signing key (4F368D5D)
1436         * katie.conf: changed lockfile to dinstall.lock
1437         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
1438         * katie.conf: added tiffani, cindy support
1439         * katie.conf: updated to match 3.0r6 release
1440         * katie.conf: updated to match sarge's release
1441
1442         * apt.conf: update for sarge's release
1443         * apt.conf.stable: update for sarge's release
1444         * apt.conf: bump daily max Contents change to 25MB from 12MB
1445
1446         * cron.daily: add accepted lock and invoke cindy
1447         * cron.daily: add daily.lock
1448         * cron.daily: invoke tiffani
1449         * cron.daily: rebuild accepted buildd stuff
1450         * cron.daily: save rene-daily output on the web site
1451         * cron.daily: disable billie
1452         * cron.daily: add stats pr0n
1453
1454         * cron.hourly: invoke helena
1455
1456         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
1457         * vars: add lockdir, add etch to copyoverrides
1458         * Makefile: add -Ipostgresql/server to CXXFLAGS
1459
1460         * docs/: added README.quotes
1461         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
1462         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
1463
1464         * TODO: correct spelling of "conflicts"
1465
1466 2005-05-28  James Troup  <james@nocrew.org>
1467
1468         * helena (process_changes_files): use MTIME rather than CTIME (the
1469         C's not for 'creation', stupid).
1470         * lisa (sort_changes): likewise.
1471
1472         * jennifer (check_distributions): use has_key rather than an 'in'
1473         test which doesn't work with python2.1.  [Probably by AJ]
1474
1475 2005-03-19  James Troup  <james@nocrew.org>
1476
1477         * rene (main): use Suite::<suite>::UdebComponents to determine
1478         what components have udebs rather than assuming only 'main' does.
1479
1480 2005-03-18  James Troup  <james@nocrew.org>
1481
1482         * utils.py (rfc2047_encode): use codecs.lookup() rather than
1483         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
1484         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
1485         <andrew@ubuntu.com>.
1486
1487 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
1488
1489         * helena: add -n/--new HTML output option and improved sorting
1490         options.
1491
1492 2005-03-06  Ryan Murray  <rmurray@debian.org>
1493
1494         * shania(main): use Cnf::Dir::Reject instead of REJECT
1495
1496 2005-02-08  James Troup  <james@nocrew.org>
1497
1498         * rene (main): add partial NBS support by checking that binary
1499         packages are built by their real parent and not some random
1500         stranger.
1501         (do_partial_nbs): likewise.
1502
1503 2005-01-18  James Troup  <james@nocrew.org>
1504
1505         * katie.py (Katie.build_summaries): avoid leaking file handle when
1506         extracting package description.
1507         (Katie.force_reject): remember and close each file descriptor we
1508         use.
1509         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
1510         s/reason_file/reason_fd/ because it's a file descriptor.
1511         (Katie.check_dsc_against_db): avoid leaking file handle whenever
1512         invoking apt_pkg.md5sum().
1513
1514         * jennifer (check_deb_ar): new function: sanity check the ar
1515         contents of a .deb.
1516         (check_files): use it.
1517         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
1518         found.
1519         (check_files): accept 'raw-installer' as an alias for 'byhand'.
1520
1521 2005-01-14  Anthony Towns  <ajt@debian.org>
1522
1523         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
1524
1525         * propup stuff (thanks to Andreas Barth)
1526         * katie.conf: add stable MustBeOlderThan testing, add -security
1527           propup
1528         * jennifer: set distribution-version in .katie if propup may be needed
1529         * katie.py: add propogation to cross_suite_version_check
1530
1531 2004-11-27  James Troup  <james@nocrew.org>
1532
1533         * nina: new script to split monolithic queue/done into date-based
1534         hierarchy.
1535
1536         * rene (usage): document -s/--suite.
1537         (add_nbs): use .setdefault().
1538         (do_anais): likewise.
1539         (do_nbs): don't set a string to "" and then += it.
1540         (do_obsolete_source): new function - looks for obsolete source
1541         packages (i.e source packages whose binary packages are ALL a)
1542         claimed by someone else and b) newer when built from the other
1543         source package).
1544         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
1545         and 'full' check modes.  Check for obsolete source packages.
1546         linux-wlan-ng has been fixed - remove hideous bodge.
1547
1548         * jennifer (check_distributions): support 'reject' suite map type.
1549
1550         * utils.py (validate_changes_file_arg): s/file/filename/.
1551         s/fatal/require_changes/.  If require_changes is -1, ignore errors
1552         and return the .changes filename regardless.
1553         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
1554         (re_no_revision): don't escape '-', it's not a special character.
1555         s/\*/+/ as there must be at least one non-dash character after the
1556         dash in a revision.  Thanks to Christian Reis for noticing both of
1557         these.
1558
1559         * ashley (main): pass require_changes=-1 to
1560         utils.validate_changes_file_arg().
1561
1562         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
1563         Team <debian-kernel@lists.debian.org>'.
1564
1565         * katie.py (Katie.in_override_p): fix .startswith() usage.
1566
1567         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
1568         (Lauren::MoreInfoURL): update to 3.0r3.
1569         (Suite::Stable::Version): likewise.
1570         (Suite::Stable::Description): likewise.
1571
1572         * cron.daily: disable automatic task override generation.
1573
1574         * cindy (process): restrict "find all packages" queries by
1575         component.  Respect Options["No-Action"].
1576         (main): add -n/--no-action support.  Only run on unstable.  Rename
1577         type to otype (pychecker).
1578
1579 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
1580
1581         * katie.conf (Billie::BasicTrees): add all architectures.
1582         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
1583         'everything'.
1584
1585         * cron.daily: Update a 'current' symlink when creating the
1586         post-daily-cron-job database backup to aid mirroring to merkel.
1587         Run billie.
1588
1589         * billie (BillieTarget.poolish_match): handle .udeb too.
1590
1591 2004-10-13  Ryan Murray  <rmurray@debian.org>
1592
1593         * amber (do_upload): Sort changes files in "katie" order so that
1594           source always arrives before binary-only rebuilds
1595
1596 2004-10-05  James Troup  <james@nocrew.org>
1597
1598         * jennifer (check_dsc): correct reject message on invalid
1599         Maintainer field.
1600
1601 2004-09-20  James Troup  <james@nocrew.org>
1602
1603         * alicia: remove unused 'pwd' import.
1604
1605         * tea (check_override): underline suite name in output properly.
1606
1607         * rene (main): read a compressed Packages file.
1608         * tea (validate_packages): likewise.
1609
1610         * katie.py (re_fdnic): add 'r' prefix.
1611         (re_bin_only_nmu_of_mu): likewise.
1612         (re_bin_only_nmu_of_nmu): likewise.
1613
1614         * madison (main): retrieve component information too and display
1615         it if it's not 'main'.
1616         * melanie (reverse_depends_check): likewise.
1617
1618         * utils.py (pp_dep): renamed...
1619         (pp_deps): ... to this.
1620         * jeri (check_dep): update calls to utils.pp_deps().
1621         * melanie (reverse_depends_check): likewise.
1622
1623         * jennifer (check_changes): move initalization of email variables
1624         from here...
1625         (process_it): ...to here as we no longer always run
1626         check_changes().  Don't bother to initialize
1627         changes["architecture"].
1628
1629         * denise (list): renamed to...
1630         (do_list): ...this to avoid name clash with builtin 'list'.
1631         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
1632         for dictionaries.
1633         (main): Likewise for name clash avoidance and also
1634         s/override_type/suffix/.  Adjust call to do_list().
1635
1636 2004-09-01  Ryan Murray  <rmurray@debian.org>
1637
1638         * tea (check_files): check the pool/ directory instead of dists/
1639
1640 2004-08-04  James Troup  <james@nocrew.org>
1641
1642         * jenna (cleanup): use .setdefault() for dictionaries.
1643         (write_filelists): likewise.
1644
1645         (write_filelists): Use utils.split_args() not split() to split
1646         command line arguments.
1647         (stable_dislocation_p): likewise.
1648
1649         (write_filelists): Add support for mapping side of suite-based
1650         "Arch: all mapping".
1651         (do_da_do_da): ensure that if we're not doing all suites that we
1652         process enough to be able correct map arch: all packages.
1653
1654         * utils.py (cant_open_exc): correct exception string,
1655         s/read/open/, s/.$//.
1656
1657         * templates/amber.advisory: update to match reality a little
1658         better.
1659
1660         * melanie (reverse_depends_check): read Packages.gz rather than
1661         Packages.
1662
1663         * jennifer (check_files): check for unknown component before
1664         checking for NEWness.
1665
1666         * katie.py (Katie.in_override_p): use .startswith in favour of a
1667         slice.
1668
1669         * docs/melanie.1.sgml: document -R/--rdep-check.
1670
1671 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1672
1673         * billie (main): Make the verbatim lists include all the README
1674           elements.
1675         * docs/README.names: Add billie in (correcting oversight)
1676
1677 2004-07-01  James Troup  <james@nocrew.org>
1678
1679         * emilie (main): handle woody's case-sensitive python-ldap,
1680         s/keyfingerprint/keyFingerPrint/.
1681
1682 2004-06-25  James Troup  <james@nocrew.org>
1683
1684         * debian/control (Depends): add dpkg-dev since jennifer uses
1685         dpkg-source.
1686
1687 2004-06-24  James Troup  <james@nocrew.org>
1688
1689         * melanie (main): s/file/temp_file/ and close file handle before
1690         removing the temporary file.
1691         (main): don't warn about needing a --carbon-copy if in no-action
1692         mode.
1693
1694         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
1695         (main): likewise.
1696
1697         * test/006/test.py (main): check bracketed email-only form.
1698
1699         * utils.py (fix_maintainer): if the Maintainer string is bracketed
1700         email-only, strip the brackets so we don't end up with
1701         <<james@nocrew.org>>.
1702
1703 2004-06-20  James Troup  <james@nocrew.org>
1704
1705         * jennifer (process_it): only run check_changes() if
1706         check_signature() returns something.  (Likewise)
1707
1708         * utils.py (changes_compare): if there's no changes["version"] use
1709         "0" rather than None.  (Avoids a crash on unsigned changes file.)
1710
1711 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
1712
1713         * jeri (pp_dep): moved from here to ...
1714         * utils.py (pp_dep): here.
1715
1716         * melanie (main): add reverse dependency checking.
1717
1718 2004-06-17  James Troup  <james@nocrew.org>
1719
1720         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
1721         * tea (check_dscs): likewise.
1722
1723         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
1724         change from boolean to a variable with 3 possible values, 0 and 1
1725         as before, -1 means don't require a signature.  Makes
1726         parse_changes() useful for parsing arbitary RFC822-style files,
1727         e.g. 'Release' files.
1728         (check_signature): add support for detached signatures by passing
1729         the files the signature is for as an optional third argument.
1730         s/filename/sig_filename/g.  Add a fourth optional argument to
1731         choose the keyring(s) to use.  Don't os.path.basename() the
1732         sig_filename before checking it for taint.
1733         (re_taint_free): allow '/'.
1734
1735 2004-06-11  James Troup  <james@nocrew.org>
1736
1737         * tea (check_files): make override.unreadable optional.
1738         (validate_sources): close the Sources file handle.
1739
1740         * docs/README.first: clarify that 'alyson' and running
1741         add_constraints.sql by hand is something you only want to do if
1742         you're not running 'neve'.
1743
1744         * docs/README.config (Location::$LOCATION::Suites): document.
1745
1746         * db_access.py (do_query): also print out the result of the query.
1747
1748 2004-06-10  James Troup  <james@nocrew.org>
1749
1750         * katie.py (Katie.cross_suite_version_check): post-woody versions
1751         of python-apt's apt_pkg.VersionCompare() function apparently
1752         returns variable integers for less than or greater than results -
1753         update our result checking to match.
1754         * jenna (resolve_arch_all_vs_any): likewise.
1755         * charisma (main): likewise.
1756
1757 2004-06-09  James Troup  <james@nocrew.org>
1758
1759         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
1760         valid_dsc_p and don't run check_source() if check_dsc() failed.
1761         (check_dsc): on fatal failures return 0 so check_source() isn't
1762         run (since it makes fatal assumptions about the presence of
1763         mandatory .dsc fields).
1764         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
1765
1766 2004-05-07  James Troup  <james@nocrew.org>
1767
1768         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
1769         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
1770
1771         * katie.conf (Dir::Override): remove duplicate definition.
1772
1773         * neve (get_or_set_files_id): add an always-NULL last_used column
1774         to output.
1775
1776 2004-04-27  James Troup  <james@nocrew.org>
1777
1778         * apt.conf-security (tree "dists/stable/updates"): add
1779         ExtraOverride - noticed by Joey Hess (#246050).
1780         (tree "dists/testing/updates"): likewise.
1781
1782 2004-04-20  James Troup  <james@nocrew.org>
1783
1784         * jennifer (check_files): check for existing .changes or .katie
1785         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
1786         directories.
1787
1788 2004-04-19  James Troup  <james@nocrew.org>
1789
1790         * jennifer (check_source): handle failure to remove the temporary
1791          directory (used for source tree extraction) better, specifically:
1792          if we fail with -EACCES, chmod -R u+rwx the temporary directory
1793          and try again and if that works, REJECT the package.
1794
1795 2004-04-17  James Troup  <james@nocrew.org>
1796
1797         * docs/madison.1.sgml: document -b/--binary-type,
1798         -g/--greaterorequal and -G/--greaterthan.
1799
1800         * madison (usage): -b/--binary-type only takes a single argument.
1801         Document -g/--greaterorequal and -G/--greaterthan.
1802         (main): add support for -g/--greaterorequal and -G/--greaterthan.
1803
1804 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
1805
1806         * billie: Cleaned up a load of comments, added /README.non-US to
1807           the verbatim matches list.
1808
1809 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
1810
1811         * utils.py (size_type): Make it use real binary megabytes and
1812           kilobytes, instead of the marketing terms used before.
1813
1814 2004-04-07  James Troup  <james@nocrew.org>
1815
1816         * katie.py (Katie.check_dsc_against_db): in the case we're
1817         ignoring an identical-to-existing orig.tar.gz remember the path to
1818         the existent version in pkg.orig_tar_gz.  Adjust query to grab
1819         location.path too to be able to do so.
1820
1821 2004-04-03  James Troup  <james@nocrew.org>
1822
1823         * debian/control (Depends): add python2.1-email | python (>= 2.2)
1824         needed for new utils.rfc2047_encode() function.
1825
1826         * utils.py (re_parse_maintainer): allow whitespace inside the
1827         email address.
1828         (Error): new exception base class.
1829         (ParseMaintError): new exception class.
1830         (force_to_utf8): new function.
1831         (rfc2047_encode): likewise.
1832         (fix_maintainer): rework.  use force_to_utf8() to force name and
1833         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
1834         return an rfc2047 value.  Validate the address to catch missing
1835         email addresses and (some) broken ones.
1836
1837         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
1838         by adopting foo2047 return value.
1839         (Katie.dump_vars): add changedby2047 and maintainer2047 as
1840         mandatory changes fields.  Promote changes and maintainer822 to
1841         mandatory fields.
1842         (Katie.update_subst): default maintainer2047 rather than
1843         maintainer822.  User foo2047 rather than foo822 when setting
1844         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1845
1846         * jennifer (check_changes): set default changes["maintainer2047"]
1847         and changes["changedby2047"] values rather than their 822
1848         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1849         to new utils.fix_maintainer() - reject on exception and adopt
1850         foo2047 return value.
1851         (check_dsc): if a mandatory field is missing don't do any further
1852         checks and as a result reduce paranoia about dsc[var] existence.
1853         Validate the maintainer field by calling new
1854         utils.fix_maintainer().
1855
1856         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1857         changes fields.  Promote maintainer822 to a mandatory changes
1858         field.  add "pool name" to files fields.
1859
1860         * test/006/test.py: new file - tests for new
1861         utils.fix_maintainer().
1862
1863 2004-04-01  James Troup  <james@nocrew.org>
1864
1865         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1866
1867         * jennifer (get_changelog_versions): create a symlink mirror of
1868         the source files in the temporary directory.
1869         (check_source): if check_dsc_against_db() couldn't find the
1870         orig.tar.gz bail out.
1871
1872         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1873         part of the upload store the path to it in pkg.orig_tar_gz and if
1874         it can't be found set pkg.orig_tar_gz to -1.
1875
1876         Explicitly return the second value as None in the (usual) case
1877         where we don't have to reprocess.  Remove obsolete diagnostic
1878         logs.
1879
1880         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1881
1882         * utils.py (temp_filename): new helper function that wraps around
1883         tempfile.mktemp().
1884
1885         * katie.py (Katie.do_reject): use it and don't import tempfile.
1886         * lisa (prod_maintainer): likewise.
1887         (edit_note): likewise.
1888         (edit_new): likewise.
1889         * lauren (reject): likewise.
1890         * melanie (main): likewise.
1891         * neve (do_sources): likewise.
1892         * rene (main): likewise.
1893         * tea (validate_sources): likewise.
1894
1895 2004-03-31  James Troup  <james@nocrew.org>
1896
1897         * tea (validate_sources): remove unused 's' temporary variable.
1898
1899 2004-03-15  James Troup  <james@nocrew.org>
1900
1901         * jennifer (check_dsc): check changes["architecture"] for
1902         source before we do anything else.
1903
1904 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1905
1906         * billie: Added
1907         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1908
1909 2004-03-12  James Troup  <james@nocrew.org>
1910
1911         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1912
1913         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1914
1915         * katie.py (Katie.accept): add support for DebBugs Version
1916         Tracking by writing out .versions (generated in jennifer's
1917         get_changelog_versions()) and .debinfo (mapping of binary ->
1918         source) files.
1919
1920         * ashley (main): add dsc["bts changelog"].
1921
1922         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1923
1924         * jennifer (check_diff): obsoleted by check_source(), removed.
1925         (check_source): new function: create a temporary directory and
1926         move into it and call get_changelog_versions().
1927         (get_changelog_versions): new function: extract the source package
1928         and optionally parse debian/changelog to obtain the version
1929         history for the BTS.
1930         (process_it): call check_source() rather than check_diff().
1931
1932 2004-03-08  James Troup  <james@nocrew.org>
1933
1934         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1935         listbar" rather than "if listbar.count(varfoo)"' change on
1936         2004-02-24.
1937
1938 2004-03-05  James Troup  <james@nocrew.org>
1939
1940         * alicia (main): don't warn about not closing bugs - we don't
1941         manage overrides through the BTS.
1942
1943 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1944
1945         * docs/README.config: lots of updates and corrections.
1946         * docs/README.first: likewise.
1947
1948         * docs/README.config: drop unused Dir::Queue::Root.
1949         * katie.conf-non-US: likewise.
1950         * katie.conf: likewise.
1951         * katie.conf-security: likewise.
1952
1953 2004-02-27  James Troup  <james@nocrew.org>
1954
1955         * rose (process_tree): use 'if var in [ list ]' rather than long
1956         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1957         Michlmayr.
1958
1959         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1960         suggested by Martin Michlmayr.
1961         * catherine (poolize): likewise.
1962         * charisma (main): likewise.
1963         * halle (check_changes): likewise.
1964         * heidi (main): likewise.
1965         (process_file): likewise.
1966         * kelly (install): likewise.
1967         (stable_install): likewise.
1968         * utils.py (fix_maintainer): likewise.
1969
1970         * apt.conf: add support for debian-installer in testing-proposed-updates.
1971         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1972         add - set to main.
1973
1974         * mkmaintainers: add "-T15" option to wget of non-US packages file
1975         so that we don't hang cron.daily if non-US is down.
1976
1977         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1978
1979         * templates/jennifer.bug-close: add Source and Source-Version
1980         pseudo-headers that may be used for BTS Version Tracking someday
1981         [ajt@].
1982
1983         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1984         (main): likewise.
1985
1986         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1987
1988 2004-02-25  James Troup  <james@nocrew.org>
1989
1990         * katie.conf (SuiteMappings): don't map testing-security to
1991         proposed-updates.
1992
1993 2004-02-24  James Troup  <james@nocrew.org>
1994
1995         * katie.py (Katie.__init__): remove unused 'values' field.
1996
1997         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1998         rather than 's.count(c) > 0'.
1999
2000         * katie.py (Katie.source_exists): use "if varfoo in listbar"
2001         rather than "if listbar.count(varfoo)".
2002         * halle (check_joey): likewise.
2003         * jeri (check_joey): likewise.
2004         * lisa (edit_index): likewise.
2005         * jenna (stable_dislocation_p): likewise.
2006
2007         * jennifer (main): remove unused global 'nmu'.
2008
2009 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
2010
2011         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
2012           to be ftpmaster@ftp-master.debian.org to bring it into line with how
2013           the dak tools close bugs.
2014
2015 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2016
2017         * katie.conf (Alicia): Added an Alicia section with email address
2018         * templates/alicia.bug-close: Added
2019         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
2020         * alicia (main): Added a -d/--done argument
2021
2022 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2023
2024         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
2025
2026 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2027
2028         * lisa (prod_maintainer): Added function to prod the maintainer without
2029           accepting or rejecting the package
2030         * templates/lisa.prod: Added this template for the prodding mail
2031
2032         * .cvsignore: Added neve-files which turns up in new installations
2033
2034 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
2035
2036         * alicia (usage): Fixed usage message to offer section and priority
2037           as seperately optional arguments.
2038         * alicia (main): Added a % (arg) interpolation needed when only
2039           one of section or priority is provided and it cannot be found.
2040
2041 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2042
2043         * alicia: Added
2044         * docs/alicia.1.sgml: Added
2045         * docs/Makefile: Added alicia to the list of manpages to build
2046         * docs/README.names: Noted what alicia does
2047         * docs/README.first: Noted where alicia is useful
2048
2049 2004-01-21  James Troup  <james@nocrew.org>
2050
2051         * madison (main): add -b/--binary-type.
2052         (usage): likewise.
2053
2054         * denise (main): generate debian-installer overrides for testing
2055         too.
2056         * apt.conf: add support for debian-installer in testing.
2057         * katie.conf (Suite::Testing::UdebComponents): set to main.
2058
2059         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
2060         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
2061         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
2062
2063         * utils.py (parse_changes): don't process data not inside the
2064         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
2065         pointing this out.
2066         * test/005/test.py (main): new test to test for above.
2067
2068 2004-01-04  James Troup  <james@nocrew.org>
2069
2070         * jenna (write_filelists): correct typo, s/Components/Component/
2071         for Options.
2072
2073 2004-01-04  Ryan Murray  <rmurray@debian.org>
2074
2075         * cron.buildd: move update of overrides and Packages file...
2076         * cron.unchecked: to here.
2077         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
2078         * katie.conf-security: likewise
2079
2080 2003-11-20  James Troup  <james@nocrew.org>
2081
2082         * jenna (main): don't use utils.try_with_debug(), it produces way
2083         too much output.
2084
2085         * halle (check_changes): don't error out if a .changes refers to a
2086         non-existent package, just warn and skip the file.
2087
2088         * docs/README.stable-point-release: mention halle and .changes
2089         obsoleted by removal through melanie.  Update for 3.0r2.
2090
2091         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
2092         (Suite::Stable::Description): update for 3.0r2.
2093         (Lauren::MoreInfoURL): likewise.
2094         * katie.conf-non-US (Suite::Stable::Version): likewise.
2095         (Suite::Stable::Description): likewise.
2096         (Lauren::MoreInfoURL): likewise.
2097
2098         * apt.conf.stable (Default): don't define MaxContentsChange.
2099         * apt.conf.stable-non-US (Default): likewise.
2100
2101         * lauren (reject): hack to work around partial replacement of an
2102         upload, i.e. one or more binaries superseded by another source
2103         package.
2104
2105 2003-11-17  James Troup  <james@nocrew.org>
2106
2107         * pseudo-packages.maintainers: point installation-reports at
2108         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
2109         request.
2110
2111         * utils.py (parse_changes): calculate the number of lines once
2112         with len() rather than max().
2113
2114         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2115         files, since check_dsc_against_db() deletes the .orig.tar.gz
2116         entry.
2117
2118 2003-11-13  Ryan Murray  <rmurray@debian.org>
2119
2120         * apt.conf: specify a src override file for debian-installer
2121
2122 2003-11-10  James Troup  <james@nocrew.org>
2123
2124         * fernanda.py (strip_pgp_signature): new function - strips PGP
2125         signature from a file and returns the modified contents of the
2126         file in a string.
2127         (display_changes): use it.
2128         (read_dsc): likewise.
2129
2130 2003-11-09  Ryan Murray  <rmurray@debian.org>
2131
2132         * cron.buildd: export accepted_autobuild table for unstable, and use
2133         it to generate the incoming Packages/Sources rather than having apt
2134         walk the directory.
2135         * apt.conf.buildd: use exported table from cron.buildd to generate
2136         Packages/Sources
2137
2138 2003-11-07  James Troup  <james@nocrew.org>
2139
2140         * kelly: import errno.
2141
2142         * katie.py (Katie.build_summaries): sort override disparities.
2143
2144         * kelly (install): set dsc_component based on the .dsc's component
2145         not a random binaries.
2146
2147 2003-10-29  James Troup  <james@nocrew.org>
2148
2149         * katie.py (Katie.build_summaries): don't assume changes["source"]
2150         exists since it might not.
2151
2152 2003-10-20  James Troup  <james@nocrew.org>
2153
2154         * pseudo-packages.maintainers: update security.d.o to use
2155         team@s.d.o at joy@'s request.
2156
2157 2003-10-17  James Troup  <james@nocrew.org>
2158
2159         * jennifer (check_dsc): use .startswith rather than .find() == 0.
2160
2161 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
2162
2163         * tea (chk_bd_process_dir): use .endswith rather than slice.
2164
2165 2003-10-14  James Troup  <james@nocrew.org>
2166
2167         * tea (check_build_depends): new function.
2168         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
2169         in the archive.
2170         (main): update for new function.
2171         (usage): likewise.
2172
2173         * katie.py (Katie.do_reject): sanitize variable names,
2174         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
2175         os.close() to outside if clause.
2176
2177         * jennifer (check_dsc): check build-depends and
2178         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
2179         Fold the ARRAY check into the same code block and tidy up it's
2180         rejection message.
2181         (check_changes): ensure that the Files field is non-empty.
2182         Suggested by Santiago Vila <sanvila@unex.es>
2183         (check_changes): normalize reject messages.
2184         (check_dsc): instead of doing most of the checks inside a for loop
2185         and an if, find the dsc_filename in a short loop over files first
2186         and then do all the checks.  Add check for more than one .dsc in a
2187         .changes which we can't handle.  Normalize reject messages.
2188
2189 2003-10-13  James Troup  <james@nocrew.org>
2190
2191         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
2192         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
2193
2194         * jennifer (check_files): Set 'has_binaries' and 'has_source'
2195         variables while iterating over 'files'.  Don't regenerate it when
2196         checking for source if source is mentioned.
2197
2198         Reject source only uploads if the config variable
2199         Dinstall::Reject::NoSourceOnly is set.
2200
2201 2003-10-03  James Troup  <james@nocrew.org>
2202
2203         * rene (main): add nasty hardcoded reference to debian-installer
2204         so we detect NBS .udebs.
2205
2206 2003-09-29  James Troup  <james@nocrew.org>
2207
2208         * apt.conf (old-proposed-updates): remove.
2209         * apt.conf-non-US (old-proposed-updates): likewise.
2210
2211 2003-09-24  James Troup  <james@nocrew.org>
2212
2213         * tea (check_files_not_symlinks): new function, ensure files
2214         mentioned in the database aren't symlinks.  Includes code to
2215         update any files that are like this to their real filenames +
2216         location; commented out by though.
2217         (usage): update for new function.
2218         (main): likewise.
2219
2220 2003-09-24  Anthony Towns  <ajt@debian.org>
2221
2222         * vars: external-overrides variable added
2223         * cron.daily: Update testing/unstable Task: overrides from joeyh
2224         managed external source.
2225
2226 2003-09-22  James Troup  <james@nocrew.org>
2227
2228         * kelly (install): if we can't move the .changes into queue/done,
2229         fail don't warn and carry on.  The old behaviour pre-dates NI and
2230         doesn't make much sense now since jennifer checks both
2231         queue/accepted and queue/done for any .changes files it's
2232         processing.
2233
2234         * utils.py (move): don't throw exceptions on existing files or
2235         can't overwrite, instead just fubar out.
2236
2237         * jennifer (check_dsc): also check Build-Depends-Indep for
2238         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
2239
2240 2003-09-18  James Troup  <james@nocrew.org>
2241
2242         * katie.py (Katie.close_bugs): only log the bugs we've closed
2243         once.
2244
2245         * kelly (main): log as 'kelly', not 'katie'.
2246
2247 2003-09-16  James Troup  <james@nocrew.org>
2248
2249         * katie.py (Katie.check_binary_against_db): likewise noramlize.
2250
2251         * jennifer (check_changes): normalize reject message for "changes
2252         file already exists" to be %s: <foo>.
2253         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
2254         produced by broken dpkg-source in 1.10.11.  Tone down and
2255         normalize rejection message for incompatible 'Format' version
2256         numbers.
2257         (check_diff): likewise tone down and normalize.
2258
2259 2003-09-07  James Troup  <james@nocrew.org>
2260
2261         * utils.py (parse_changes): if dsc_whitespace_rules is false,
2262         don't bomb out on bogus empty lines.
2263         (build_file_list): check for changes["files"] earlier.  use Dict
2264         to create files[name] dictionary.
2265         (send_mail): don't bother validating arguments.
2266         (check_signature): minor improvements to some of the rejection
2267         messages including listing the key id of the key that wasn't found
2268         in the keyring.
2269         (wrap): new function.
2270
2271         * tea: add new check 'validate-indices' that ensures all files
2272         mentioned in indices (Packages, Sources) files do in fact exist.
2273
2274         * catherine (poolize): use a local re_isadeb which handles legacy
2275         (i.e. no architecture) style .deb filenames.
2276
2277         * rosamund: new script.
2278
2279         * rhona (check_binaries): when checking for binary packages not in
2280         a suite, don't bother selecting files that already have a
2281         last_used date.
2282         (check_sources): likewise.
2283
2284         * rhona: change all SQL EXISTS sub-query clauses to use the
2285         postgres suggested convention of "SELECT 1 FROM".
2286         * andrea (main): likewise.
2287         * tea (check_override): likewise.
2288         * catherine (main): likewise.
2289
2290         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
2291         entries and in other suites MustBeNewerThan's.
2292         (SuiteMappings): likewise
2293         * katie.conf-non-US: likewise.
2294         * katie.conf-security: likewise.
2295
2296         * apt.conf-security: remove oldstable.
2297         * apt.conf.stable: likewise.
2298         * apt.conf.stable-non-US: likewise.
2299         * cron.buildd-security: likewise.
2300         * cron.daily-security: likewise.
2301         * vars-security (suites): likewise.
2302         * wanna-build/trigger.daily: likewise.
2303
2304         * claire.py (clean_symlink): move...
2305         * utils.py (clean_symlink): here.
2306
2307         * claire.py (find_dislocated_stable): update accordingly.
2308
2309 2003-08-16  Anthony Towns  <ajt@debian.org>
2310
2311         * katie.py (source_exists): expand the list of distributions
2312         the source may exist in to include any suite that's mapped to
2313         the destination suite (even transitively (a->b->c)). This should
2314         unbreak binary uploads to *-proposed-updates.
2315
2316 2003-08-09  Randall Donald  <rdonald@debian.org>
2317
2318         * lisa (recheck): change changes["distribution"].keys() to
2319         Katie.pkg.changes...
2320
2321 2003-08-08  Randall Donald  <rdonald@debian.org>
2322
2323         * katie.py: only tag bugs as fixed-in-experimental for
2324         experimental uploads
2325
2326 2003-07-26  Anthony Towns  <ajt@debian.org>
2327
2328         * katie.py (source_exists): add an extra parameter to limit the
2329         distribution(s) the source must exist in.
2330         * kelly, lisa, jennifer: update to use the new source_exists
2331
2332 2003-07-15  Anthony Towns  <ajt@debian.org>
2333
2334         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
2335         checksums for debian-installer stuff even when it's just a symlink to
2336         another suite
2337
2338         * apt.conf: add the FakeDI line
2339
2340 2003-06-09  James Troup  <james@nocrew.org>
2341
2342         * kelly (check): make sure the 'file' we're looking for in 'files'
2343         hasn't been deleted by katie.check_dsc_against_db().
2344
2345 2003-05-07  James Troup  <james@nocrew.org>
2346
2347         * helena (time_pp): fix s/years/year/ typo.
2348
2349 2003-04-29  James Troup  <james@nocrew.org>
2350
2351         * madison (usage): document -c/--component.
2352
2353         * madison (usage): Fix s/seperated/separated/.
2354         * melanie (usage): likewise.
2355         * jenna (usage): likewise.
2356
2357 2003-04-24  James Troup  <james@nocrew.org>
2358
2359         * cron.daily-non-US: if there's nothing for kelly to install, say
2360         so.
2361
2362         * jennifer (check_timestamps): print sys.exc_value as well as
2363         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
2364         failed' with 'deb contents' to make it clearer what timestamp(s)
2365         are being checked.
2366
2367 2003-04-15  James Troup  <james@nocrew.org>
2368
2369         * cron.daily-non-US: only run kelly if there are some .changes
2370         files in accepted.
2371
2372         * rene: add -m/--mode argument which can be either daily (default)
2373         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
2374         Various changes to make this possible including a poor attempt at
2375         splitting main() up a little.  De-hardcode suite numbers from SQL
2376         queries and return quietly from do_nviu() if experimental doesn't
2377         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
2378         is.
2379
2380         * debian/control (Depends): remove python-zlib as it's obsolete.
2381
2382         * charisma (main): don't slice the \n off strings when we're
2383         strip()-ing it anyway.
2384         * heidi (set_suite): likewise.
2385         (process_file): likewise.
2386         * natalie (process_file): likewise.
2387
2388 2003-04-08  James Troup  <james@nocrew.org>
2389
2390         * katie.py (Katie.check_dsc_against_db): improve the speed of two
2391         slow queries by using one LIKE '%foo%' and then matching against
2392         '%s' or '/%s$' in python.  Also only join location when we need it
2393         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
2394         query, so 6s for each sourceful package.
2395
2396         * cron.daily: invoke rene and send the report to ftpmaster.
2397         * cron.daily-non-US: likewise.
2398
2399 2003-03-14  James Troup  <james@nocrew.org>
2400
2401         * utils.py (send_mail): default filename to blank.
2402         * amber (make_advisory): adapt.
2403         * jennifer (acknowledge_new): likewise.
2404         * katie.py (Katie.close_bugs): likewise.
2405         (Katie.announce): likewise.
2406         (Katie.accept): likewise.
2407         (Katie.check_override): likewise.
2408         (Katie.do_reject): likewise.
2409         * kelly (do_reject): likewise.
2410         (stable_install): likewise.
2411         * lisa (do_bxa_notification): likewise.
2412         * lauren (reject): likewise.
2413         * melanie (main): likewise.
2414
2415         * rene (add_nbs): check any NBS packages against unstable to see
2416         if they haven't been removed already.
2417
2418         * templates/katie.rejected: remove paragraph about rejected files
2419         since they're o-rwx due to c-i-m and the uploader can't do
2420         anything about them and shania will take care of them anyway.
2421
2422         * madison (usage): update usage example to use comma seperation.
2423         * melanie (usage): likewise.
2424
2425         * utils.py (split_args): new function; splits command line
2426         arguments either by space or comma (whichever is used).  Also has
2427         optional-but-default DWIM spurious space detection to avoid
2428         'command -a i386, m68k' problems.
2429         (parse_args): use it.
2430         * melanie (main): likewise.
2431
2432         * melanie (main): force the admin to tell someone if we're not
2433         doing a rene-led removal (or closing a bug, which counts as
2434         telling someone).
2435
2436 2003-03-05  James Troup  <james@nocrew.org>
2437
2438         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
2439         and python sections.
2440         * katie.conf-security (Section): likewise.
2441
2442         * add_constraints.sql: add uid and uid_id_seq to grants.
2443
2444         * lisa (determine_new): also warn about adding overrides to
2445         oldstable.
2446
2447         * madison (main): make the -S/--source-and-binary query obey
2448         -s/--suite restrictions.
2449
2450 2003-03-03  James Troup  <james@nocrew.org>
2451
2452         * madison (main): if the Archive_Maintenance_In_Progress lockfile
2453         exists, warn the user that our output might seem strange.  (People
2454         get confused by multiple versions in a suite which happens
2455         post-kelly but pre-jenna.)
2456
2457 2003-02-21  James Troup  <james@nocrew.org>
2458
2459         * kelly (main): we don't need to worry about StableRejector.
2460
2461         * melanie (main): sort versions with apt_pkg.VersionCompare()
2462         prior to output.
2463
2464         * lauren: new script to manually reject packages from
2465         proposed-updates.  Updated code from pre-NI kelly (nee katie).
2466
2467 2003-02-20  James Troup  <james@nocrew.org>
2468
2469         * kelly (init): remove unused -m/--manual-reject argument.
2470
2471         * katie.py (Katie.force_reject): renamed from force_move to make
2472         it more explicit what this function does.
2473         (Katie.do_reject): update to match.
2474
2475         * utils.py (prefix_multi_line_string): add an optional argument
2476         include_blank_lines which defaults to 0.  If non-zero, blank lines
2477         will be includes in the output.
2478
2479         * katie.py (Katie.do_reject): don't add leading space to each line
2480         of the reject message.  Include blank lines when showing the
2481         message to the user.
2482
2483 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
2484
2485         * utils.py (fix_maintainer): replace pointless re.sub() with
2486         simple string format.
2487
2488 2003-02-11  James Troup  <james@nocrew.org>
2489
2490         * lisa (edit_overrides): only strip-to-one-char and upper-case
2491         non-numeric answers.  Fixes editing of items with indices >= 10;
2492         noticed by Randall.
2493         (edit_overrides): correct order of arguments to "not a valid
2494         index" error message.
2495
2496         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
2497         remove_duplicate_versions(); thanks to aj for the initial
2498         diagnosis.
2499         (remove_duplicate_versions): correct how we return
2500         dominant_versions.
2501         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
2502         a tuple rather than just a tuple.
2503
2504 2003-02-10  James Troup  <james@nocrew.org>
2505
2506         * emilie: new script - sync fingerprint and uid tables with a
2507         debian.org LDAP DB.
2508
2509         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
2510         in 'fingerprint'.
2511
2512         * db_access.py (get_or_set_uid_id): new function.
2513
2514         * jennifer (main): update locking to a) not used FCNTL (deprecated
2515         in python >= 2.2) and b) acknowledge upstream's broken
2516         implementation of lockf (see Debian bug #74777), c) try to acquire
2517         the lock non-blocking.
2518         * kelly (main): likewise.
2519
2520         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
2521
2522         * madison (main): only append the package to new_packages if it's
2523         not already in there; fixes -S/--source-and-binary for cases where
2524         the source builds a binary package of the same name.
2525
2526 2003-02-10  Anthony Towns  <ajt@debian.org>
2527
2528         * madison (main): use explicit JOIN syntax for
2529         -S/--source-and-binary queries to reduce the query's runtime from
2530         >10 seconds to negligible.
2531
2532 2003-02-08  James Troup  <james@nocrew.org>
2533
2534         * rene (main): in the NVIU output, append items to lists, not
2535         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
2536         should be removed.
2537
2538 2003-02-07  James Troup  <james@nocrew.org>
2539
2540         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
2541         Sources [aj].
2542
2543         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
2544         O. Benham/Adam Heath/.
2545
2546         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
2547         (Suite::Stable::Description): update for 3.0r1a.
2548         (Dinstall::SigningKeyIds): update for 2003 key [aj].
2549
2550         * utils.py (gpgv_get_status_output): rename from
2551         get_status_output().
2552
2553         * neve (check_signature): use gpgv_get_status_output and Dict from
2554         utils().  Add missing newline to error message about duplicate tokens.
2555
2556         * saffron (per_arch_space_use): also print space used by source.
2557         (output_format): correct string.join() invocation.
2558
2559         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
2560
2561 2003-02-04  James Troup  <james@nocrew.org>
2562
2563         * cron.buildd: correct generation of Packages/Sources and grep out
2564         non-US/non-free as well as non-free.
2565
2566 2003-02-03  Ryan Murray  <rmurray@debian.org>
2567
2568         * cron.buildd: generate quinn-diff output with full Packages/Sources
2569           files to get out-of-date vs. uncompiled right.
2570         * apt.conf.buildd: no longer generate uncompressed files, as they
2571           are generated in cron.buildd instead
2572         * add -i option to quinn-diff to ignore binary-all packages
2573         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
2574           aren't in the packages file, the arch that uploaded them will build
2575           them anyways...
2576
2577 2003-01-30  James Troup  <james@nocrew.org>
2578
2579         * rene (main): only print suggested melanie command when there's
2580         some NBS to remove.
2581
2582 2003-01-30  Ryan Murray  <rmurray@debian.org>
2583
2584         * cron.buildd: fix incorrectly inverted lockfile check
2585
2586 2003-01-29  Ryan Murray  <rmurray@debian.org>
2587
2588         * cron.buildd: generate override.sid.all3.src
2589         * apt.conf.buildd: use generated override.sid.all3.src
2590
2591 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
2592
2593         * utils.py (get_status_output): moved from jennifer.
2594         (Dict): likewise.
2595         (check_signature): likewise.
2596
2597         * jennifer (get_status_output): moved to utils.py.
2598         (Dict): likewise.
2599         (check_signature): likewise.
2600
2601         * utils.py (check_signature): add an argument to specifiy which
2602         function to call when an error was found.
2603         (check_signature): document this function better.
2604
2605         * jennifer (check_files): pass the reject function as an argument
2606         to utils.check_signature.
2607         (process_it): likewise.
2608
2609 2003-01-20  James Troup  <james@nocrew.org>
2610
2611         * rene (main): lots of changes to improve the output and make it
2612         more useful.
2613
2614         * katie.py (Katie.check_override): make the override messages
2615         clearer (hopefully).
2616
2617 2002-12-26  James Troup  <james@nocrew.org>
2618
2619         * ziyi (usage): document the ability to pass suite(s) as
2620         argument(s).
2621         (main): read apt.conf after checking for -h/--help.
2622
2623         * tea (main): take the check to run as an argument.
2624
2625         * saffron.R: R script to graph daily install runs.
2626
2627         * saffron: new script; various stats functions.
2628
2629         * rhona (main): connect to the database after checking for -h/--help.
2630
2631         * neve (do_da_do_da): if no -a/--action option is given, bail out.
2632
2633         * melanie (main): sort versions with utils.arch_compare_sw().
2634
2635         * madison (usage): alphabetize order of options.
2636         * melanie (usage): likewise.
2637
2638         * kelly (usage): fix usage short description (we aren't dinstall).
2639
2640         * julia (usage): fix usage description and alphabetize order of
2641         options.
2642
2643         * jeri (usage): fix usage short description.
2644
2645         * jennifer (main): move --help and --version checks from here...
2646         (init): to here so that they work with an empty katie.conf.
2647         * kelly: likewise.
2648
2649         * alyson (usage): new function.
2650         (main): use it.
2651         * andrea: likewise.
2652         * ashley: likewise.
2653         * cindy: likewise.
2654         * denise: likewise.
2655         * helena: likewise.
2656         * neve: likewise.
2657         * rene: likewise.
2658         * rose: likewise.
2659         * tea: likewise.
2660
2661         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
2662         entry that caused tasks to be omitted from 3.0r1.
2663
2664 2002-12-10  James Troup  <james@nocrew.org>
2665
2666         * jennifer (check_files): sanity check the Depends field to ensure
2667         it's non-empty if present since apt chokes on an empty one.
2668         Thanks to Ryan Murray for the idea.
2669
2670 2002-12-08  James Troup  <james@nocrew.org>
2671
2672         * katie.conf-security (Helena::Directories): new; include accepted
2673         in addition to byhand and new.
2674
2675         * helena (process_changes_files): use utils.arch_compare_sw().
2676         Justify things based on the longest [package, version,
2677         architecture].  Reduce '[note]' to '[N]' to save space, and remove
2678         the commas in architecture and version lists for the same reason.
2679         (main): make directories we process configurable through
2680         Helena::Directories in the config file; if that doesn't exist
2681         default to the old hardcoded values (byhand & new).
2682
2683         * utils.py (arch_compare_sw): moved here from madison.
2684         * madison (main): adjust to compensate.
2685
2686 2002-12-06  James Troup  <james@nocrew.org>
2687
2688         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
2689         right filename.
2690
2691 2002-12-05  James Troup  <james@nocrew.org>
2692
2693         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
2694
2695 2002-11-28  Randall Donald  <rdonald@debian.org>
2696
2697         * fernanda.py (read_control): fix typo of 'Architecture'.
2698
2699 2002-11-26  James Troup  <james@nocrew.org>
2700
2701         * lisa (check_pkg): call less with '-R' so we see the colour from
2702         Randall's fernanda changes.
2703
2704         * neve (process_sources): if Directory points to a legacy location
2705         but the .dsc isn't there; assume it's broken and look in the pool.
2706         (update_section): new, borroed from alyson.
2707         (do_da_do_da): use it.
2708         (process_packages): add suite_it to the cache key used for
2709         arch_all_cache since otherwise we only add a package to the first
2710         suite it's in and ignore any subsequent ones.
2711
2712         * katie.conf-non-US (Location): fixed to reflect reality (all
2713         suites, except old-proposed-updates (which is legacy-mixed)) are
2714         pool.
2715
2716         * utils.py (try_with_debug): wrapper for print_exc().
2717         * jenna (main): use it.
2718         * neve (main): likewise.
2719
2720 2002-11-25  Randall Donald  <rdonald@debian.org>
2721
2722         * fernanda.py (main): added -R to less command line for raw control
2723         character support to print colours
2724         (check_deb): Instead of running dpkg -I on deb file, call
2725         output_deb_info, the new colourized control reporter.
2726         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
2727         of printing out each .dsc line.
2728         (output_deb_info): new function. Outputs each key/value pair from
2729         read_control except in special cases where we highlight section,
2730         maintainer, architecture, depends and recommends.
2731         (create_depends_string): new function. Takes Depends tree and looks
2732         up it's compontent via projectb db, colourizes and constructs a
2733         depends string in original order.
2734         (read_dsc): new function. reads and parses .dsc info via
2735         utils.parse_changes. Build-Depends and Build-Depends-Indep are
2736         colourized.
2737         (read_control): new function. reads and parses control info via
2738         apt_pkg. Depends and Recommends are split in to list structures,
2739         Section and Architecture are colourized. Maintainer is colourized
2740         if it has a localhost.localdomain address.
2741         (split_depends): new function. Creates a list of lists of
2742         dictionaries of depends (package,version relation). Top list is
2743         colected from comma delimited items. Sub lists are | delimited.
2744         (get_comma_list): new function. splits string input among commas
2745         (get_or_list): new function. splits string input among | delimiters
2746         (get_depends_parts): new function. Creates dictionary of package name
2747         and version relation from dependancy string.
2748         Colours for section and depends are per component. Unfound depends
2749         are in bold. Lookups using version info is not supported yet.
2750
2751 2002-11-22  James Troup  <james@nocrew.org>
2752
2753         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
2754         'udmsearch'.
2755
2756         * amber (make_advisory): string.atol() is deprecated and hasn't
2757         been ported to string methods.  Use long() instead.
2758
2759         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
2760         creating the database since we'll fail badly if it's created with
2761         e.g. UNICODE encoding.
2762
2763         * rose (main): AptCnf is a global.
2764
2765         * neve (get_location_path): new function determines the location
2766         from the the first (left-most) directory of a Filename/Directory.
2767         (process_sources): don't need 'location' anymore.  Use
2768         utils.warn().  Use the Directory: field for each package to find
2769         the .dsc.  Use get_location_path() to determine the location for
2770         each .dsc.
2771         (process_packages): do't need 'location' anymore.  Use
2772         utils.warn().  Use get_location_path().
2773         (do_sources): don't need 'location', drop 'prefix' in favour of
2774         being told the full path to the Sources file, like
2775         process_packages().
2776         (do_da_do_da): main() renamed, so that main can call us in a
2777         try/except.  Adapt for the changes in do_sources() and
2778         process_packages() above.  Assume Sources and Packages file are in
2779         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
2780
2781         * katie.conf-security (Location): fixed to reflect reality (all
2782         suites are pool, not legacy).
2783
2784         * utils.py (print_exc): more useful (i.e. much more verbose)
2785         traceback; a recipe from the Python cookbook.
2786         * jenna (main): use it.
2787         * neve (main): likewise.
2788
2789 2002-11-19  James Troup  <james@nocrew.org>
2790
2791         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
2792         handling which was FUBAR for multi-suite uploads.  Now we just
2793         make a dictionary of destinations to copy to and iterate over
2794         those.
2795
2796         * fernanda.py (check_deb): run linda as well as lintian.
2797
2798 2002-10-21  James Troup  <james@nocrew.org>
2799
2800         * melanie (main): change X-Melanie to X-Katie and prefix it with
2801         'melanie '.
2802
2803         * lisa (main): prefix X-Katie with 'lisa '.
2804
2805         * jennifer (clean_holding): fix typo in string method changes;
2806         s/file.find(file/file.find(/.
2807
2808         * cron.daily: invoke helena and send the report to ftpmaster.
2809         * cron.daily-non-US: likewise.
2810
2811 2002-10-16  James Troup  <james@nocrew.org>
2812
2813         * kelly (check): call reject() with a blank prefix when parsing
2814         the return of check_dsc_against_db() since it does its own
2815         prefix-ing.
2816
2817         * rose: new script; only handles directory creation initally.
2818
2819         * katie.conf (Dinstall::NewAckList): obsolete, removed.
2820         * katie.conf-non-US (Dinstall::NewAckList): likewise.
2821
2822 2002-10-06  James Troup  <james@nocrew.org>
2823
2824         * rene (main): remove bogus argument handling.
2825
2826         * kelly: katie, renamed.
2827         * cron.daily: adapt for katie being renamed to kelly.
2828         * cron.daily-non-US: likewise.
2829         * amber (main): likewise.
2830
2831         * Changes for python 2.1.
2832
2833         * kelly: time.strftime no longer requires a second argument of
2834         "time.localtime(time.time())".
2835         * logging.py: likewise.
2836         * rhona: likewise.
2837         * shania (init): likewise.
2838
2839         * amber: use augmented assignment.
2840         * catherine (poolize): likewise.
2841         * claire.py (fix_component_section): likewise.
2842         * halle (check_changes): likewise.
2843         * helena: likewise.
2844         * jenna: likewise.
2845         * jennifer: likewise.
2846         * jeri: likewise.
2847         * katie.py: likewise.
2848         * kelly: likewise.
2849         * lisa: likewise.
2850         * madison (main): likewise.
2851         * melanie: likewise.
2852         * natalie: likewise.
2853         * neve: likewise.
2854         * rhona: likewise.
2855         * tea: likewise.
2856         * utils.py: likewise.
2857         * ziyi: likewise.
2858
2859         * amber: use .endswith.
2860         * fernanda.py: likewise.
2861         * halle (main): likewise.
2862         * jennifer: likewise.
2863         * jeri: likewise.
2864         * katie.py: likewise.
2865         * kelly: likewise.
2866         * lisa: likewise.
2867         * neve: likewise.
2868         * shania (main): likewise.
2869         * utils.py: likewise.
2870
2871         * alyson: use string methods.
2872         * amber: likewise.
2873         * andrea: likewise.
2874         * ashley: likewise.
2875         * catherine: likewise.
2876         * charisma: likewise.
2877         * claire.py: likewise.
2878         * db_access.py: likewise.
2879         * denise: likewise.
2880         * halle: likewise.
2881         * heidi: likewise.
2882         * helena: likewise.
2883         * jenna: likewise.
2884         * jennifer: likewise.
2885         * jeri: likewise.
2886         * julia: likewise.
2887         * katie.py: likewise.
2888         * kelly: likewise.
2889         * lisa: likewise.
2890         * logging.py: likewise.
2891         * madison: likewise.
2892         * melanie: likewise.
2893         * natalie: likewise.
2894         * neve: likewise.
2895         * rene: likewise.
2896         * tea: likewise.
2897         * utils.py: likewise.
2898         * ziyi: likewise.
2899
2900 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2901
2902         * utils.py (parse_changes): use <string>.startswith() rather than
2903         string.find().
2904
2905 2002-08-27  Anthony Towns  <ajt@debian.org>
2906
2907         * katie.py (in_override_p): when searching for a source override,
2908         and the dsc query misses, search for both udeb and deb overrides
2909         as well. Should fix the UNACCEPT issues with udebs.
2910
2911 2002-08-24  James Troup  <james@nocrew.org>
2912
2913         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2914         source+binary package finding code which was causing severe
2915         performance degradation with postgres 7.2.
2916
2917 2002-08-14  James Troup  <james@nocrew.org>
2918
2919         * julia (main): use the pwd.getpwall() to get system user info
2920         rather than trying to read a password file.  Add a -n/--no-action
2921         option.
2922
2923         * cron.hourly: julia no longer takes any arguments.
2924         * cron.hourly-non-US: likewise.
2925
2926 2002-08-07  James Troup  <james@nocrew.org>
2927
2928         * katie (install): handle multi-suite uploads when CopyChanges
2929         and/or CopyKatie are in use, ensuring we only copy stuff once.
2930
2931 2002-08-01  Ryan Murray  <rmurray@debian.org>
2932
2933         * wanna-build/trigger.daily: initial commit, with locking
2934         * cron.buildd: add locking against daily run
2935
2936 2002-07-30  James Troup  <james@nocrew.org>
2937
2938         * melanie (main): readd creation of suite_ids_list so melanie is
2939         remotely useful again.
2940
2941         * katie.conf: adopt for woody release; diable
2942         StableDislocationSupport, add oldstable, adjust other suites and
2943         mappings, fix up location.
2944         * katie.conf-non-US: likewise.
2945         * katie.conf-security: likewise.
2946
2947         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2948         stable.
2949         * apt.conf.stable-non-US: likewise.
2950
2951         * apt.conf-security: adapt for woody release; adding oldstable,
2952         oldstable, adjust stable and testing.
2953         * cron.daily-security: likewise.
2954         * cron.buildd-security: likewise.
2955
2956         * apt.conf: adapt for woody release; rename woody-proposed-updates
2957         to testing-proposed-updates and proposed-updates to
2958         old-proposed-updates.
2959         * apt.conf-non-US: likewise.
2960
2961         * vars-non-US (copyoverrides): add sarge.
2962         * vars (copyoverrides): likewise.
2963
2964         * vars-security (suites): add oldstable.
2965
2966 2002-07-22  Ryan Murray  <rmurray@debian.org>
2967
2968         * apt.conf.security-buildd: use suite codenames instead of
2969           distnames.
2970
2971 2002-07-16  James Troup  <james@nocrew.org>
2972
2973         * denise (main): fix filenames for testing override files.
2974
2975 2002-07-14  James Troup  <james@nocrew.org>
2976
2977         * jennifer (process_it): call check_md5sums later so we can check
2978         files in the .dsc too
2979         (check_md5sums): check files in the .dsc too.  Check both md5sum
2980         and size.
2981
2982         * melanie (main): use parse_args() and join_with_commas_and() from
2983         utils.  If there's nothing to do, say so and exit, don't ask for
2984         confirmation etc.
2985
2986         * amber (join_with_commas_and): moved from here to ...
2987         * utils.py (join_with_commas_and): here.
2988
2989 2002-07-13  James Troup  <james@nocrew.org>
2990
2991         * madison (main): use parse_args() from utils.  Support
2992         -c/--component.
2993
2994         * jenna (parse_args): moved from here to ...
2995         * utils.py (parse_args): here.
2996
2997         * katie.conf (Architectures): minor corrections to the description
2998         for arm, mips and mipsel.
2999         * katie.conf-non-US (Architectures): likewise.
3000         * katie.conf-security (Architectures): likewise.
3001
3002         * cron.daily-security: use natalie's new -a/--add functionality to
3003         flesh out the security overrides.
3004
3005 2002-07-12  James Troup  <james@nocrew.org>
3006
3007         * cron.buildd (ARCHS): add arm.
3008
3009         * katie.conf: 2.2r7 was released.
3010         * katie.conf-non-US: likewise.
3011
3012         * utils.py (parse_changes): handle a multi-line field with no
3013         starting line.
3014
3015 2002-06-25  James Troup  <james@nocrew.org>
3016
3017         * templates/amber.advisory (To): add missing email address since
3018         __WHOAMI__ is only a name.
3019
3020         * katie.conf-security (Melane::LogFile): correct to go somewhere
3021         katie has write access to.
3022         (Location::/org/security.debian.org/ftp/dists/::Suites): add
3023         Testing.
3024
3025         * natalie: add support for -a/-add which adds packages only
3026         (ignoring changes and deletions).
3027
3028         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
3029         use FindB, not get.
3030
3031 2002-06-22  James Troup  <james@nocrew.org>
3032
3033         * jennifer (check_files): validate the package name and version
3034         field.  If 'Package', 'Version' or 'Architecture' are missing,
3035         don't try any further checks.
3036         (check_dsc): likewise.
3037
3038         * utils.py (re_taint_free): add '~' as a valid character.
3039
3040 2002-06-20  Anthony Towns  <ajt@debian.org>
3041
3042         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
3043
3044 2002-06-09  James Troup  <james@nocrew.org>
3045
3046         * jennifer (check_files): reduce useless code.
3047
3048         * cron.daily-security: run symlinks -dr on $ftpdir.
3049
3050         * vars-security (ftpdir): add.
3051
3052 2002-06-08  James Troup  <james@nocrew.org>
3053
3054         * neve (update_override_type): transaction is handled higher up in
3055         main().
3056         (update_priority): likewise.
3057         (process_sources): remove code that makes testing a duplicate of
3058         stable.
3059         (process_packages): likewise.
3060
3061         * templates/amber.advisory: add missing mail headers.
3062
3063         * cron.daily-security: also call apt-ftparchive clean for
3064         apt.conf.buildd-security.
3065         * cron.weekly: likewise.
3066
3067         * amber (do_upload): write out a list of source packages (and
3068         their version) uploaded for testing.
3069         (make_advisory): add more Subst mappings for the mail headers.
3070         (spawn): check for suspicious characters in the command and abort
3071         if their found.
3072
3073 2002-06-07  James Troup  <james@nocrew.org>
3074
3075         * ziyi (main): remove the 'nonus'/'security' hacks and use
3076         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
3077         the lower level Release files, even if they don't exist.  fubar
3078         out if we can't open a lower level Release file for writing.
3079
3080         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
3081         ziyi.
3082         * katie.conf-security (Dinstall): likewise.
3083
3084         * amber (do_upload): renamed from get_file_list().  Determine the
3085         upload host from the original component.
3086         (init): Add a -n/--no-action option.  Fix how we get changes_files
3087         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
3088         sys.argv).  Add an Options global.
3089         (make_advisory): support -n/--no-action.
3090         (spawn): likewise.
3091         (main): likewise.
3092         (usage): document -n/--no-action.
3093
3094         * cron.buildd-security: fix path to Packages-arch-specific in
3095         quinn-diff invocation.
3096
3097         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
3098         to proper suite names (i.e. stable, testing) rather than codenames
3099         (potato, woody).
3100         (Dinstall::DefaultSuite): likewise.
3101         (Suite): likewise.
3102         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
3103         * vars-security (suites): likewise.
3104         * apt.conf-security: likewise.
3105
3106         * katie.conf-security (Component): add "updates/" prefix.
3107         (Suite::*::Components): likewise.
3108         (ComponentMappings): new; map all {ftp-master,non-US} components
3109         -> updates/<foo>.
3110
3111         * katie.conf-security (Natalie): removed; the options have
3112         defaults and ComponentPosition is used by alyson which doesn't
3113         work on security.d.o.
3114         (Amber): replace UploadHost and UploadDir with ComponentMappings
3115         which is a mapping of components -> URI.
3116         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
3117         (SuiteMappings): use "silent-map" in preference to "map".
3118
3119         * cron.unchecked-security: fix call to cron.buildd-security.
3120
3121         * cron.daily-security: map local suite (stable) -> override suite
3122         (potato) when fixing overrides.  Correct component in natalie call
3123         to take into account "updates/" prefix.  Fix cut'n'waste in
3124         override.$dist.all3 generation, the old files weren't being
3125         removed, so they were endlessly growing.
3126
3127         * neve (main): don't use .Find for the CodeName since we require
3128         it.  Location::*::Suites is a ValueList.
3129         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
3130         out on expired keys, just warn.
3131         (update_override_type): new function; lifted from alyson.
3132         (update_priority): likewise.
3133         (main): use update_{override_type,priority}().
3134
3135         * jennifer (check_distributions): remove redunant test for
3136         SuiteMappings; ValueList("does-not-exist") returns [] which is
3137         fine.  Add support for a "silent-map" type which doesn't warn
3138         about the mapping to the user.
3139         (check_files): add support for ComponentMappings, similar to
3140         SuiteMappings, but there's no type, just a source and a
3141         destination and the original component is stored in "original
3142         component".
3143         * katie.py (Katie.dump_vars): add "original component" as an
3144         optionsal files[file] dump variable.
3145
3146         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
3147         query.  Add support for section-less legacy locations like current
3148         security.debian.org through YetAnotherConfigBoolean
3149         'LegacyStableHasNoSections'.
3150         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
3151
3152         * utils.py (real_arch): moved here from ziyi.
3153         * ziyi (real_arch): moved to utils.py.
3154         * ziyi (main): likewise.
3155
3156         * claire.py (find_dislocated_stable): use real_arch() with
3157         filter() to strip out source and all.
3158         * neve (main): likewise.
3159         * rene (main): likewise.
3160         * jeri (parse_packages): likewise.
3161
3162 2002-06-06  James Troup  <james@nocrew.org>
3163
3164         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
3165         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
3166         doing.
3167
3168 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3169
3170         * jeri (check_joey): check if the line contains two elements
3171         before accessing the second.  Also, strip trailing spaces as well
3172         as the newline.
3173         * halle (check_joey): likewise.
3174
3175 2002-06-05  James Troup  <james@nocrew.org>
3176
3177         * cron.unchecked-security: new file; like cron.unchecked but if
3178         there's nothing to do exit so we don't call cron.buildd-security.
3179
3180         * apt.conf.buildd-security: new file.
3181
3182         * vars (archs): alphabetize.
3183         * vars-non-US (archs): likewise.
3184
3185         * vars-security: add unchecked.
3186
3187         * madison (main): reduce rather bizarrely verbose and purposeless
3188         code to print arches to a simple string.join.
3189
3190         * katie.conf (Suites::Unstable): add UdebComponents, a new
3191         valuelist of suites, used by jenna to flesh out the list of
3192         <suite>_main-debian-installer-binary-<arch>.list files generated.
3193         (Dinstall): add StableDislocationSupport, a new boolean used by
3194         jenna to enable or disable stable dislocation support
3195         (i.e. claire), as true.
3196
3197         * katie.conf (Dinstall): add StableDislocationSupport, a new
3198         boolean used by jenna to enable or disable stable dislocation
3199         support (i.e. claire), as true.
3200         * katie.conf-non-US: likewise.
3201         * katie.conf-security: likewise.
3202
3203         * cron.daily-security: generate .all3 overrides for the buildd
3204         support.  Freshen a local copy of Packages-arch-specific from
3205         buildd.debian.org.
3206
3207         * claire.py (find_dislocated_stable): disable the support for
3208         files in legacy-mixed locations since none of the Debian archives
3209         have any anymore.
3210
3211         * helena: new script; produces a report on NEW and BYHAND
3212         packages.
3213
3214         * jenna: rewritten from scratch to fix speed problems.  Run time
3215         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
3216         minutes, 105 seconds are the monster query and 70 odd seconds is
3217         claire.
3218
3219         * apt.conf.buildd (Default): remove MaxContentsChange as it's
3220         irrelevant.
3221
3222 2002-06-05  Ryan Murray  <rmurray@debian.org>
3223
3224         * cron.buildd-security: new file.
3225
3226 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
3227
3228         * denise (list): take a file argument and use it.
3229         (main): don't abuse sys.stdout, just write to the file.
3230
3231         * claire.py (usage): Fix misspelling.
3232         (clean_symlink): Simplify.
3233         (find_dislocated_stable): Avoid unnecessary work.
3234
3235 2002-05-29  James Troup  <james@nocrew.org>
3236
3237         * cameron: removed; apt-ftparchive can simply walk the directory.
3238
3239 2002-05-26  Anthony Towns  <ajt@debian.org>
3240
3241         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
3242         for the autobuilders.
3243
3244 2002-05-24  Ryan Murray  <rmurray@debian.org>
3245
3246         * cron.buildd: update override files before running apt-ftparchive
3247
3248 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3249
3250         * amber (main): remove extra space in prompt.
3251
3252         * utils.py (validate_changes_file_arg): use original filename in
3253         error messages.
3254
3255         * jeri (check_joey): close file after use.
3256         (parse_packages): likewise.
3257         (main): setup debug option properly.
3258
3259         * melanie (main): remove unused packages variable and simplify the
3260         code to build up con_packages by using repr().
3261
3262 2002-05-23  James Troup  <james@nocrew.org>
3263
3264         * lisa (recheck): when we reject, also return 0 so the package is
3265         skipped.
3266         (sg_compare): fix note sorting.
3267         (recheck): remove the .katie file after rejection.
3268
3269         * katie.py (Katie.accept): accepted auto-build support take 3;
3270         this time adding support for security.  Security needs a) non-pool
3271         files copied rather than symlinked since accepted is readable only
3272         by katie/security and www-data needs to be able to see the files,
3273         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
3274         AcceptedAutoBuildSuites and is a ValueList containing the suites.
3275         SecurityAcceptedAutoBuild is a new boolean which controls whether
3276         or not normal or security style is used.  The unstable_accepted
3277         table was renamed to accepted_autobuild and a suite column added.
3278         Also fix a bug noticed by Ryan where an existent orig.tar.gz
3279         didn't have it's last_used/in_accepted flags correctly updated.
3280         * katie (install): likewise.
3281         * rhona (clean_accepted_autobuild): likewise.
3282
3283 2002-05-22  James Troup  <james@nocrew.org>
3284
3285         * lisa (sort_changes): new function; sorts changes properly.
3286         Finally.
3287         (sg_compare): new function; helper for sort_changes().  Sorts by
3288         have note and time of oldest upload.
3289         (indiv_sg_compare): new function; helper for sort_changes().
3290         Sorts by source version, have source and filename.
3291         (main): use sort_changes().
3292         (changes_compare): obsoleted; removed.
3293
3294 2002-05-20  James Troup  <james@nocrew.org>
3295
3296         * rhona (clean_accepted_autobuild): don't die if a file we're
3297         trying to remove doesn't exist.  Makes rhona more friendly to
3298         katie/katie.py crashes/bugs without any undue cost.
3299
3300 2002-05-19  James Troup  <james@nocrew.org>
3301
3302         * lisa (main): if sorting a large number of changes give some
3303         feedback.
3304         (recheck): new function, run the same checks (modulo NEW,
3305         obviously) as katie does, if they fail do the standard
3306         reject/skip/quit dance.
3307         (do_pkg): use it.
3308
3309         * katie (install): don't try to unlink the symlink in the
3310         AcceptedAutoBuild support if the destination is not a symlink (or
3311         doesn't exist).  Avoids unnecessary bombs on previous partial
3312         accepts and will still bomb hard if the file exists and isn't a
3313         symlink.
3314
3315         * utils.py: blah, commands _is_ used when the mail stuff isn't
3316         commented out like it is in my test environment.
3317
3318         * lisa (changes_compare): "has note" overrides everything else.
3319         Use .katie files rather than running parse_changes, faster and
3320         allows "has note" to work.  Correct version compare, it was
3321         reversed.  Ctime check should only kick in if the source packages
3322         are not the same.
3323         (print_new): print out and return any note.  Rename 'ret_code' to
3324         'broken'.
3325         (edit_new): renamed from spawn_editor.  Don't leak file
3326         descriptors.  Clean up error message if editor fails.
3327         (edit_note): new function, allows one to edit notes.
3328         (do_new): add note support, editing and removing.
3329         (init): kill -s/--sort; with notes we always want to use our
3330         sorting method.
3331         (usage): likewise.
3332
3333         * katie.py (Katie.dump_vars): add "lisa note" as an optional
3334         changes field.
3335
3336         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
3337         it default to 0.  Adapt tests to assume it's boolean.
3338         * fernanda.py (check_changes): adjust call appropriately.
3339         * halle (check_changes): likewise.
3340         * jennifer (check_changes): likewise.
3341         * jeri (check_changes): likewise.
3342         * shania (flush_orphans): likewise.
3343
3344         * jennifer (check_dsc): pass is_a_dsc by name when calling
3345         build_file_list() for clarity.
3346         * shania (flush_orphans): likewise.
3347         * tea (check_missing_tar_gz_in_dsc): likewise.
3348
3349         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
3350         calling parse_changes() for clarity.
3351         * tea (check_dscs): likewise.
3352
3353         * utils.py (parse_changes): make dsc_whitespace_rules default to
3354         not true.
3355         * halle (check_changes): adjust call appropriately.
3356         * jennifer (check_changes): likewise.
3357         * jeri (check_changes): likewise.
3358         * lisa (changes_compare): likewise.
3359         * utils.py (changes_compare): likewise.
3360         * melanie (main): likewise.
3361         * shania (flush_orphans): likewise.
3362         * fernanda.py (check_changes): likewise.
3363
3364 2002-05-18  James Troup  <james@nocrew.org>
3365
3366         * katie.py (Katie.dump_vars): make the .katie file unreadable,
3367         it's not useful and by and large a duplication of information
3368         available in readable format in other files.
3369
3370 2002-05-16  Ryan Murray  <rmurray@debian.org>
3371
3372         * melanie: Dir::TemplatesDir -> Dir::Templates
3373
3374 2002-05-15  Ryan Murray  <rmurray@debian.org>
3375
3376         * cameron: correct the use of os.path.join
3377
3378 2002-05-15  Anthony Towns  <ajt@debian.org>
3379
3380         * ziyi: Update to match the new format for Architectures/Components
3381         in katie.conf.
3382
3383 2002-05-14  James Troup  <james@nocrew.org>
3384
3385         * amber: new script; 'installer' wrapper script for the security
3386         team.
3387
3388         * katie.py (Katie.announce): remove unused 'dsc' local
3389         variable. (pychecker)
3390
3391         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
3392
3393         * neve: don't import sys, we don't use it. (pychecker)
3394         (check_signature): fix return type mismatch. (pychecker)
3395
3396         * utils.py: don't import commands, we don't use it.  (pychecker)
3397
3398         * katie (install): SpecialAcceptedAutoBuild is a boolean.
3399
3400         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
3401         obsoleted by the change to "othercomponents" handling in jennifer
3402         detailed below.
3403         (Katie.cross_suite_version_check): new function; implements
3404         cross-suite version checking rules specified in the conf file
3405         while also enforcing the standard "must be newer than target
3406         suite" rule.
3407         (Katie.check_binary_against_db): renamed, since it's invoked once
3408         per-binary, "binaries" was inaccurate.  Use
3409         cross_suite_version_check() and don't bother with the "oldfiles"
3410         rubbish as jennifer works out "othercomponents" herself now.
3411         (Katie.check_source_against_db): use cross_suite_version_check().
3412
3413         * katie (check): the version and file overwrite checks
3414         (check_{binary,source,dsc}_against_db) are not per-suite.
3415
3416         * jennifer (check_files): less duplication of
3417         'control.Find("Architecture", "")' by putting it in a local
3418         variable.
3419         (check_files): call check_binary_against_db higher up since it's
3420         not a per-suite check.
3421         (check_files): get "othercomponents" directly rather than having
3422         check_binary_against_db do it for us.
3423
3424         * heidi (main): 'if x:', not 'if x != []:'.
3425         * katie.py (Katie.in_override_p): likewise.
3426         (Katie.check_dsc_against_db): likewise.
3427         * natalie (main): likewise.
3428         * rene (main): likewise.
3429         * ziyi (real_arch): likewise.
3430
3431         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
3432         and OverrideType are now value lists, not lists.
3433         * andrea (main): likewise.
3434         * cindy (main): likewise.
3435         * claire.py (find_dislocated_stable): likewise.
3436         * denise (main): likewise.
3437         * jenna (main): likewise.
3438         * jennifer (check_distributions): likewise.
3439         (check_files): likewise.
3440         (check_urgency): likewise (Urgency::Valid).
3441         * jeri (parse_packages): likewise.
3442         * neve (main): likewise (and Location::%s::Suites).
3443         * rene (main): likewise.
3444
3445 2002-05-13  James Troup  <james@nocrew.org>
3446
3447         * katie.py (Katie.check_source_against_db): correct case of reject
3448         message to be consistent with binary checks.
3449
3450         * jennifer (get_status_output): don't leak 2 file descriptors per
3451         invocation.
3452         (check_signature): add missing '\n' to "duplicate status token"
3453         error message.
3454
3455 2002-05-09  James Troup  <james@nocrew.org>
3456
3457         * utils.py (validate_changes_file_arg): new function; validates an
3458         argument which should be a .changes file.
3459         * ashley (main): use it.
3460         * lisa (main): likewise.
3461
3462         * katie.py (Katie.check_dsc_against_db): since there can be more
3463         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
3464         entry still exists in files.
3465
3466         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
3467         files, since check_dsc_against_db() deletes the .orig.tar.gz
3468         entry.
3469
3470         * cameron: cleanups.
3471
3472         * utils.py (changes_compare): change sort order so that source
3473         name and source version trump 'have source'; this should fix
3474         UNACCEPT problems in katie where -1 hppa+source & i386, -2
3475         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
3476         by Ryan.
3477
3478         * lisa (main): allow the arguments to be .katie files too.
3479
3480 2002-05-07  Ryan Murray  <rmurray@debian.org>
3481
3482         * cron.buildd: add s390 to arch list again
3483
3484 2002-05-05  Ryan Murray  <rmurray@debian.org>
3485
3486         * cron.buildd: new script, update w-b database from unstable_accepted
3487         table
3488         * cameron: new script, take list in unstable_accepted and write out
3489         a file list for apt-ftparchive
3490         * apt.conf.buildd: new apt configuration for Packages/Sources for
3491         unstable_accepted
3492         * vars: add s390 to arch list.
3493
3494 2002-05-03  James Troup  <james@nocrew.org>
3495
3496         * neve (main): don't hard code the calling user as that doesn't
3497         work with modern postgres installs.  Fix psql invocation for
3498         init_pool.sql (database name required).  Dont' hard code the
3499         database name.
3500         (process_sources): add support for fingerprint and install_date.
3501         (process_packages): add support for fingerprint.
3502         (do_sources): pass in the directory, fingerprint support needs it.
3503         (get_status_output): borrowed from jennifer.
3504         (reject): likewise.
3505         (check_signature): likewise.
3506
3507         * katie (install): only try to log urgencies if Urgency_Logger is
3508         defined.
3509         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
3510         defined; only close Urgency_Logger if it's defined.
3511
3512         * catherine (poolize): adapt for Dir rationalization.
3513         * claire.py (find_dislocated_stable): likewise.
3514         * denise (main): likewise.
3515         * halle (check_joey): likewise.
3516         * jenna: likewise.
3517         * jennifer: likewise.
3518         * jeri: likewise.
3519         * katie.py: likewise.
3520         * katie: likewise.
3521         * lisa (do_bxa_notification): likewise.
3522         * logging.py (Logger.__init__): likewise
3523         * rene (main): likewise.
3524         * rhona (clean): likewise.
3525         * shania (init): likewise.
3526         * tea: likewise.
3527         * ziyi: likewise.
3528
3529         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
3530         FindB, not FindI.
3531
3532         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
3533         boolean, use FindB, not get.
3534
3535         * katie.py (Katie.check_dsc_against_db): ignore duplicate
3536         .orig.tar.gz's which are an exact (size/md5sum) match.
3537
3538         * ashley (main): really allow *.katie files as arguments too;
3539         noticed by aj.
3540
3541         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
3542
3543 2002-05-03  Anthony Towns  <ajt@debian.org>
3544
3545         * ziyi: support for security.
3546
3547 2002-05-02  James Troup  <james@nocrew.org>
3548
3549         * jennifer (accept): call Katie.check_override() unconditional as
3550         no-mail check moved into that function.
3551         (do_byhand): likewise.
3552
3553         * katie.py (Katie.check_override): don't do anything if we're a)
3554         not sending mail or b) the override disparity checks have been
3555         disbled via Dinstall::OverrideDisparityCheck.
3556
3557         * jennifer (check_files): don't hard code Unstable as the suite
3558         used to check for architecture validity; use
3559         Dinstall::DefaultSuite instead, if it exists.
3560         (accept): conditionalize
3561
3562         * katie.py (Katie.update_subst): support global maintainer
3563         override with Dinstall::OverrideMaintainer.
3564
3565         * jennifer (check_distributions): new function, Distribution
3566         validation and mapping.  Uses new SuiteMappings variable from
3567         config file to abstract suite mappings.
3568         (check_changes): call it.
3569
3570         * natalie: renamed; nothing imports or likely will for some time.
3571
3572         * denise (main): remove unused natalie import and init().
3573
3574         * natalie.py (init): removed.
3575         (main): initalize here instead and don't hardcode the database
3576         name.
3577
3578 2002-04-30  James Troup  <james@nocrew.org>
3579
3580         * katie.py (Katie.close_bugs): new function, split out from
3581         announce().
3582         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
3583         true.
3584         (Katie.close_bugs): new function, split out
3585         (Katie.close_bugs): return immediately if there are no bugs to
3586         close.
3587
3588         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
3589         * katie (do_reject): likewise.
3590         (stable_install): likewise.
3591         * katie.py (Katie.announce): likewise.
3592         (Katie.accept): likewise.
3593         (Katie.check_override): likewise.
3594         (Katie.do_reject): likewise.
3595         * lisa (do_bxa_notification): likewise.
3596         * melanie (main): likewise.
3597
3598         * utils.py (TemplateSubst): change second argument to be a
3599         filename rather than a template since every caller opened a file
3600         on the fly which was ugly and leaked file descriptor.
3601
3602 2002-04-29  James Troup  <james@nocrew.org>
3603
3604         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
3605         <hertzog@debian.org> to send 'accepted' announce mails to the
3606         PTS. [#128140]
3607
3608 2002-04-24  James Troup  <james@nocrew.org>
3609
3610         * init_pool.sql (unstable_accepted): add two new fields to
3611         unstable_accepted; in_accepted is a boolean indicating whether or
3612         not the file is in accepted and last_used is a timestamp used by
3613         rhona to determine when to remove symlinks for installed packages.
3614
3615         * katie.py (Katie.accept): auto-build support take 2.  Create
3616         symlinks for all files into a seperate directory.  Add files to
3617         unstable_accepted as paths to the new directory; mark them as
3618         being in accepted for cameron.  Properly conditionalize it on a
3619         configuration variable.
3620
3621         * katie (install): likewise.  Update symlinks to point into the
3622         pool; mark the files for later deletion by rhona and mark them as
3623         not being in accepted for cameron.
3624
3625         * rhona (clean_accepted_autobuild): new function.
3626
3627 2002-04-22  James Troup  <james@nocrew.org>
3628
3629         * jennifer (check_files): handle db_access.get_location_id()
3630         returning -1 properly/better.
3631
3632         * rhona (clean_fingerprints): new function.
3633
3634 2002-04-21  James Troup  <james@nocrew.org>
3635
3636         * utils.py (touch_file): unused; remove.
3637         (plural): likewise.
3638
3639         * jennifer (check_files): close file descriptor used to get the
3640         control file.
3641         (check_md5sums): likewise.
3642         (callback): likewise.
3643
3644         * katie.py (Katie.do_reject): handle manual rejects much better;
3645         call the editor first and get confirmation from the user before
3646         proceeding.
3647
3648         * jennifer (check_signature): prefix_multi_line_string() moved to
3649         utils.
3650
3651         * utils.py (prefix_multi_line_string): moved here from jennifer.
3652
3653 2002-04-20  James Troup  <james@nocrew.org>
3654
3655         * lisa (main): handle non-existent files.
3656
3657         * ashley (main): allow *.katie files as arguments too.
3658
3659 2002-04-19  James Troup  <james@nocrew.org>
3660
3661         * katie.py (Katie.accept): add stuff to help auto-building from
3662         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
3663         in the pool), create a symlink to it in the accepted directory and
3664         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
3665
3666         * katie (install): undo the "auto-building from accepted" stuff
3667         (i.e. remove the .orig.tar.gz symlink and remove the files from
3668         unstable_accepted table).
3669
3670 2002-04-16  James Troup  <james@nocrew.org>
3671
3672         * jennifer (upload_too_new): fix typo which was causing all
3673         timestamp comparisons to be against the .changes file.  Also move
3674         back to the original directory so we do the comparisons against
3675         accurate timestamps.
3676
3677         * tea (check_missing_tar_gz_in_dsc): new function.
3678
3679         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
3680         file mentioned in the .dsc.
3681
3682         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
3683         way mails reach debian-{devel-,}changes@l.d.o.
3684
3685 2002-04-02  Ryan Murray  <rmurray@debian.org>
3686
3687         * cron.daily: run shania after rhona
3688         * cron.daily-non-US: likewise.
3689
3690 2002-04-01  James Troup  <james@nocrew.org>
3691
3692         * katie: re-add proposed-updates/stable install support.
3693
3694         * katie.py (Katie.dump_vars): add changes["changes"] as an
3695         optional field; should be mandatory later.
3696
3697 2002-03-31  James Troup  <james@nocrew.org>
3698
3699         * katie (install): support a Suite::<foo>::CopyKatie similar to
3700         CopyChanges.  Done seperately because .katie files don't need to
3701         be mirrored and will probably be copied to another directory as a
3702         result.
3703
3704         * halle (main): add missing debug to options.
3705
3706 2002-03-29  James Troup  <james@nocrew.org>
3707
3708         * madison (main): add a -r/--regex option.
3709
3710 2002-03-26  James Troup  <james@nocrew.org>
3711
3712         * lisa: don't trample on changes["distribution"]; make a copy of
3713         it as changes["suite"] instead and use that.
3714
3715 2002-03-16  Anthony Towns  <ajt@debian.org>
3716
3717         * templates/lisa.bxa_notification: Fix some grammatical errors.
3718         Encourage contact via bxa@ftp-master email address.
3719
3720 2002-03-15  James Troup  <james@nocrew.org>
3721
3722         * jennifer (check_timestamps): remove bogus raise in except.
3723
3724 2002-03-15  Anthony Towns  <ajt@debian.org>
3725
3726         * cron.monthly: rotate mail/archive/bxamail as well as
3727         mail/archive/mail. This is for a complete archive of
3728         correspondence with the BXA.
3729
3730 2002-03-14  Anthony Towns  <ajt@debian.org>
3731
3732         * crypto-in-main changes.
3733
3734         * utils.py (move, copy): add an optional perms= parameter to let you
3735         set the resulting permissions of the moved/copied file
3736         * katie.py (force_move): rejected/morgued files should be unreadable
3737         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
3738         should be unreadable.
3739
3740 2002-03-07  Ryan Murray  <rmurray@debian.org>
3741
3742         * katie (install): check for existance of "files id" key as well as
3743         it being set to a valid value.
3744         * katie (install): check for existense and valid value for location
3745         id as well
3746
3747 2002-03-05  Ryan Murray  <rmurray@debian.org>
3748
3749         * katie.py (do_reject): reread the reason file after editing it.
3750
3751 2002-02-25  James Troup  <james@nocrew.org>
3752
3753         * jennifer (check_changes): don't enforce sanity in .changes file
3754         names since it doesn't seem to be possible; pcmica-cs and similar
3755         freak show packages in particular cause real problems.
3756
3757         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
3758         each dsc_file since the .orig.tar.gz checking code now uses it as
3759         a boolean.  Fixes bizarro rejections which bogusly claimed
3760         .diff.gz md5sum/size was incorrect.
3761
3762 2002-02-24  James Troup  <james@nocrew.org>
3763
3764         * katie (process_it): reset reject_message.
3765
3766 2002-02-22  James Troup  <james@nocrew.org>
3767
3768         * db_access.py(set_files_id): disable use of
3769         currval('files_id_seq') because it was taking 3 seconds on auric
3770         which is insane (most calls take < 0.01) and simply call
3771         get_files_id() for the return value instead.
3772
3773         * katie.py (Katie.do_query): convenience function; unused by
3774         default, useful for profiling.
3775         * db_access.py (do_query): likewise.
3776
3777         * katie (install): fix insert SQL call when binary has no source.
3778
3779         * lisa (determine_new): auto-correct non-US/main to non-US.
3780         (determine_new): add a warning when adding things to stable.
3781         (edit_index): use our_raw_input().
3782         (edit_overrides): likewise.
3783         (do_new): likewise.  Use re.search() not re.match() since the
3784         default answer may not be the first one.
3785         (do_byhand): likewise.
3786         (do_new): Default to 'S'kip and never 'A'dd.
3787
3788         * jennifer (action): pass prompt to our_raw_input().
3789         * melanie (game_over): likewise.
3790         * katie (action): likewise.
3791
3792         * utils.py (our_raw_input): add an optional prompt argument to
3793         make the function more usable as a drop in replacement for
3794         raw_input().
3795
3796         * jennifer (check_files): correct reject() to not double prefix
3797         when using katie.py based functions.
3798         (check_dsc): likewise.
3799
3800         * katie.py (Katie.reject): prepend a new line if appropriate
3801         rathen than appending one to avoid double new lines when caller
3802         adds one of his own.
3803
3804         * lisa (determine_new): warn if the package is also in other
3805         components.
3806
3807 2002-02-20  James Troup  <james@nocrew.org>
3808
3809         * jennifer (check_files): if .changes file lists "source" in
3810         Architecture field, there must be a .dsc.
3811
3812 2002-02-15  James Troup  <james@nocrew.org>
3813
3814         * ashley (main): add some missing fields.
3815
3816         * katie.py (Katie.check_dsc_against_db): fix to take into account
3817         the fact that the .orig.tar.gz might be in byhand, accepted or
3818         new.  Also fix calling of reject().
3819         (Katie.check_binaries_against_db): fix calling of reject().
3820         (Katie.check_source_against_db): likewise.
3821         (Katie.dump_vars): add missing variables used for bug closures.
3822
3823         * lisa (changes_compare_by_time): sort by reverse time.
3824
3825         * katie.py (Katie.accept): log.
3826         (Katie.dump_vars): missing has_key test for optional changes fields.
3827
3828         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
3829         (process_it): traceback goes to stderr, not stdout.
3830         (acknowledge_new): log.
3831         (do_byhand): likewise.
3832
3833         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
3834
3835         * add_constraints.sql: add grants for the new fingerprint table.
3836
3837 2002-02-13  James Troup  <james@nocrew.org>
3838
3839         * katie (do_reject): basename the .changes filename before trying
3840         to use it to construct the .reason filename.
3841         (process_it): call Katie.update_subst() so do_reject() DTRT with
3842         the mail template.
3843         (do_reject): setup the mail template correctly.
3844
3845 2002-02-12  James Troup  <james@nocrew.org>
3846
3847         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3848         (check_files): don't abuse global dictionaries.
3849         (Ent): use all variables.
3850         (check_timestamps): don't abuse global dictionaries.
3851
3852         * fernanda.py: renamed to .py so lisa can import it.
3853         (check_dsc): remove unused local variables (pychecker).
3854         (display_changes): split off from check_changes.
3855
3856         * katie: rewritten; most of the functionality moves to jennifer;
3857         what's left is the code to install packages once a day from the
3858         'accepted' directory.
3859
3860         * jennifer: new program, processes packages in 'unchecked'
3861         (i.e. most of the non-install functionality of old katie).
3862
3863         * katie.py: common functions shared between the clique of
3864         jennifer, lisa and katie.
3865
3866         * lisa: new program; handles NEW and BYHAND packages.
3867
3868         * jeri (usage): new function.
3869         (main): use it.
3870         (check_package): remove unused local variable (pychecker).
3871
3872         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3873         binaries and source.  Add install_date to source.
3874
3875         * halle (usage): new function.
3876         (main): use it.  Remove unused options.
3877         (check_changes): remove unused local variable (pychecker).
3878
3879         * add_constraints.sql: add fingerprint references.
3880
3881         * db_access.py (get_or_set_fingerprint_id): new function.
3882
3883         * ashley (main): new program; dumps the contents of a .katie file
3884         to stdout.
3885
3886         * alyson (main): remove option handling since we don't actually
3887         support any.
3888         * cindy (main): likewise.
3889
3890         * remove unnecessary imports and pre-define globals (pychecker).
3891
3892 2002-02-11  Anthony Towns  <ajt@debian.org>
3893
3894         * added installation-report and upgrade-report pseudo-packages
3895
3896 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3897
3898         * katie (update_subst): use Dinstall::TrackingServer.
3899         * melanie (main): likewise.
3900
3901 2002-01-27  James Troup  <james@nocrew.org>
3902
3903         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3904         noticing, jgg@ for fix.
3905
3906 2002-01-19  James Troup  <james@nocrew.org>
3907
3908         * utils.py (extract_component_from_section): handle non-US
3909         non-main properly.
3910
3911 2002-01-12  James Troup  <james@nocrew.org>
3912
3913         * madison: add support for -S/--source-and-binary which displays
3914         information for the source package and all it's binary children.
3915
3916 2002-01-13  Anthony Towns  <ajt@debian.org>
3917
3918         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3919         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3920           and 2002 key ids.
3921         * katie.conf-non-US: Likewise.
3922         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3923           multiple keys automatically. This is probably only useful for
3924           transitioning from an expired (or revoked?) key.
3925
3926 2002-01-08  Ryan Murray  <rmurray@debian.org>
3927
3928         * debian/python-dep: new file that prints out python:Depends for
3929           substvars
3930         * debian/control: use python:Depends, build-depend on python
3931           lower Depends: on postgresql to Suggests:
3932         * debian/rules: determine python version, install to the correct
3933           versioned dir
3934
3935 2001-12-18  Anthony Towns  <ajt@debian.org>
3936
3937         * ziyi: unlink Release files before overwriting them (in case they've
3938           been merged)
3939         * ziyi: always include checksums/sizes for the uncompressed versions
3940           of Sources and Packages, even if they're not present on disk
3941
3942 2001-11-26  Ryan Murray  <rmurray@debian.org>
3943
3944         * ziyi (main): add SigningPubKey config option
3945         * katie.conf: use SigningPubKey config option
3946         * katie.conf-non-US: likewise
3947
3948 2001-11-24  James Troup  <james@nocrew.org>
3949
3950         * katie (acknowledge_new): log newness.
3951
3952 2001-11-24  Anthony Towns  <ajt@debian.org>
3953
3954         * ziyi (real_arch): bail out if some moron forgot to reset
3955         untouchable on stable.
3956         (real_arch): source Release files.
3957
3958 2001-11-19  James Troup  <james@nocrew.org>
3959
3960         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3961         utils.get_conf().
3962         * shania (main): likewise.
3963
3964         * rhona (main): add default options.
3965
3966         * db_access.py (get_archive_id): case independent.
3967
3968         * katie (action): sort files so that ordering is consistent
3969         between mails; noticed/requested by Joey.
3970
3971 2001-11-17  Ryan Murray  <rmurray@debian.org>
3972
3973         * utils.py: add get_conf function, change startup code to read all
3974           config files to the Cnf that get_conf returns
3975           use the component list from the katie conf rather than the hardcoded
3976           list.
3977         * all scripts: use new get_conf function
3978         * shania: fix try/except around changes files
3979         * jenna: only do debian-installer if it is a section in Cnf
3980
3981 2001-11-16  Ryan Murray  <rmurray@debian.org>
3982
3983         * shania (main): Initialize days to a string of a number.
3984                  (main): Initialize Cnf vars before reading in Cnf
3985
3986 2001-11-14  Ryan Murray  <rmurray@debian.org>
3987
3988         * shania (main): Initialize days to a number.
3989
3990 2001-11-04  James Troup  <james@nocrew.org>
3991
3992         * docs/Makefile: use docbook-utils' docbook2man binary.
3993
3994         * Change all "if foo == []" constructs into "if not foo".
3995
3996         * katie (check_changes): when installing into stable from
3997         proposed-updates, remove all non-stable target distributions.
3998         (check_override): don't check for override disparities on stable
3999         installs.
4000         (stable_install): update install_bytes appropriately.
4001         (reject): stable rejection support; i.e. don't remove files when
4002         rejecting files in the pool, rather remove them from the
4003         proposed-update suite instead, rhona will do the rest.
4004         (manual_reject): support for a stable specific template.
4005         (main): setup up stable rejector in subst.
4006
4007 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
4008
4009         * debian/control (Build-Depends): docbook2man has been superseded
4010         by docbook-utils.
4011
4012         * neve (main): exit with a more useful error message.
4013         (update_suites): Suite::<suite>::Version, Origin and Description
4014         are not required, so don't fail if they don't exist.
4015
4016         * db_access.py (get_archive_id): return -1 on error rather than
4017         raise an exception.
4018         (get_location_id): likewise.
4019
4020         * madison (main): don't exit on the first not-found package,
4021         rather exit with an appropriate return code after processing all
4022         packages.
4023
4024 2001-11-03  James Troup  <james@nocrew.org>
4025
4026         * claire.py (find_dislocated_stable): add per-architecture
4027         symlinks for dislocated architecture: all debs.
4028
4029 2001-10-19  Anthony Towns  <ajt@debian.org>
4030
4031         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
4032
4033 2001-10-10  Anthony Towns  <ajt@debian.org>
4034
4035         * claire.py (fix_component_section): do _not_ assign to None under
4036         any circumstances
4037
4038 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
4039
4040         * melanie (main): don't duplicate architectures when removing from
4041         more than one suite.
4042
4043         * heidi (main, process_file, get_list): report suite name not ID.
4044
4045         * naima (nmu_p): be case insensitive.
4046
4047         * naima (action): more list handling clean ups.
4048
4049         * melanie (main): clean up lists handling to use string.join and
4050         IN's.
4051
4052         * madison (main): clean up suite and architecture argument parsing
4053         to use slices less and string.join more.
4054
4055         * utils.py (parse_changes): Use string.find() instead of slices for
4056         string comparisons thereby avoid hardcoding the length of strings.
4057         * ziyi (main): likewise.
4058
4059 2001-10-07  James Troup  <james@nocrew.org>
4060
4061         * Remove mode argument from utils.open_files() calls if it's the
4062         default, i.e. 'r'.
4063
4064 2001-09-27  James Troup  <james@nocrew.org>
4065
4066         * katie (init): new function; options clean up.
4067         (usage): add missing options, remove obsolete ones.
4068         (main): adapt for the two changes above.  If the lock file or
4069         new-ack log file don't exist, create them.  Don't try to open the
4070         new-ack log file except running in new-ack mode.
4071
4072         * alyson (main): initialize all the tables that are based on the
4073         conf file.
4074
4075         * utils.py (touch_file): like touch(1).
4076         (where_am_i): typo.
4077
4078         * catherine (usage): new.
4079         (main): use it.  options cleanup.
4080         * claire.py: likewise.
4081         * fernanda: likewise.
4082         * heidi: likewise.
4083         * jenna: likewise.
4084         * shania: likewise.
4085         * ziyi: likewise.
4086
4087         * andrea: options cleanup.
4088         * charisma: likewise.
4089         * julia: likewise.
4090         * madison: likewise.
4091         * melanie: likewise.
4092         * natalie: likewise.
4093         * rhona: likewise.
4094         * tea: likewise.
4095
4096 2001-09-26  James Troup  <james@nocrew.org>
4097
4098         * utils.py: default to sane config file locations
4099         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
4100         or they can point to the real ones through use of a new Config
4101         section.  Based on an old patch by Adam Heath.
4102         (where_am_i): use the new default config stuff.
4103         (which_conf_file): likewise.
4104         (which_apt_conf_file): likewise.
4105
4106         * charisma (main): output defaults to
4107         `Package~Version\tMaintainer'; input can be of either form.  When
4108         parsing the new format do version comparisons, when parsing the
4109         old format assume anything in the extra file wins.  This fixes the
4110         problem of newer non-US packages being overwhelmed by older
4111         versions still in stable on main.
4112
4113 2001-09-17  James Troup  <james@nocrew.org>
4114
4115         * natalie.py (list): use result_join().
4116
4117         * denise (main): result_join() moved to utils.
4118
4119         * utils.py (result_join): move to utils; add an optional seperator
4120         argument.
4121
4122 2001-09-14  James Troup  <james@nocrew.org>
4123
4124         * heidi (set_suite): new function; does --set like natalie does,
4125         i.e. turns it into a sequence of --add's and --remove's
4126         internally.  This is a major win (~20 minute run time > ~20
4127         seconds) in the common, everday (i.e. testing) case.
4128         (get_id): common code used by set_suite() and process_file().
4129         (process_file): call set_suite() and get_id().
4130         (main): add logging support.
4131
4132         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
4133         files.
4134
4135         * utils.py (parse_changes): use slices or simple string comparison
4136         in favour of regexes where possible.
4137
4138         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
4139         fact that the string VARDATA() points to are not null terminated.
4140
4141         * denise (result_join): new function; like string.join() but
4142         handles None's.
4143         (list): use it.
4144         (main): likewise.
4145
4146         * charisma (main): python-pygresql 7.1 returns None not "".
4147
4148 2001-09-14  Ryan Murray  <rmurray@debian.org>
4149
4150         * natalie.py (list): handle python-pygresql 7.1 returning None.
4151
4152 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
4153
4154         * madison (main): return 1 if no package is found.
4155
4156 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
4157
4158         * madison (main): better error handling for incorrect
4159         -a/--architecture or -s/--suite arguments.
4160         (usage): new.
4161         (main): use it.
4162
4163 2001-09-05  Ryan Murray  <rmurray@debian.org>
4164
4165         * charisma, madison, katie: remove use of ROUser
4166         * katie.conf,katie.conf-non-US: remove defintion of ROUser
4167
4168 2001-08-26  James Troup  <james@nocrew.org>
4169
4170         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
4171         maintained packages at cjwatson@'s request.
4172
4173 2001-08-21  James Troup  <james@nocrew.org>
4174
4175         * madison (main): add -a/--architecture support.
4176
4177         * jenna: use logging instead of being overly verbose on stdout.
4178
4179 2001-08-11  Ryan Murray  <rmurray@debian.org>
4180
4181         * melanie: add functional help option
4182
4183 2001-08-07  Anthony Towns  <ajt@debian.org>
4184
4185         * apt.conf, katie.conf: Add ia64 and hppa to testing.
4186
4187 2001-07-28  James Troup  <james@nocrew.org>
4188
4189         * katie (check_dsc): ensure source version is >> than existing
4190         source in target suite.
4191
4192 2001-07-25  James Troup  <james@nocrew.org>
4193
4194         * natalie.py: add logging support.
4195
4196         * utils.py (open_file): make the second argument optional and
4197         default to read-only.
4198
4199         * rene (main): work around broken source packages that duplicate
4200         arch: all packages with arch: !all packages (no longer allowed
4201         into the archive by katie).
4202
4203 2001-07-13  James Troup  <james@nocrew.org>
4204
4205         * katie (action): don't assume distribution is a dictionary.
4206         (update_subst): don't assume architecture is a dictionary and that
4207         maintainer822 is defined.
4208         (check_changes): recognise nk_format exceptions.
4209         (check_changes): reject on 'testing' only uploads.
4210         (check_files): when checking to ensure all packages are newer
4211         versions check against arch-all packages too.
4212         (check_dsc): enforce the existent of a sane set of mandatory
4213         fields.  Ensure the version number in the .dsc (modulo epoch)
4214         matches the version number in the .changes file.
4215
4216         * utils.py (changes_compare): ignore all exceptions when parsing
4217         the changes files.
4218         (build_file_list): don't UNDEF on a changes file with no format
4219         field.
4220
4221 2001-07-07  James Troup  <james@nocrew.org>
4222
4223         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
4224         rather than 'changedbyname' to avoid false negatives on uploads
4225         with an email-address-only Changed-By field.
4226         (check_dsc): don't overwrite reject_message; append to it.
4227         (check_signature): likewise.
4228         (check_changes): likewise.
4229         (announce): condition logging on 'action'.
4230
4231         * logging.py: new logging module.
4232
4233         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
4234         sub-tree into a separate (global) variable.
4235         (check_dsc): ensure format is 1.0 to retain backwards
4236         compatability with dpkg-source in potato.
4237         (main): only try to obtain the lock when not running in no-action
4238         mode.
4239         Use the new logging module.
4240
4241         * christina: initial version; only partially usable.
4242
4243 2001-06-28  Anthony Towns  <ajt@debian.org>
4244
4245         * apt.conf: Add ExtraOverrides to auric.
4246
4247 2001-06-25  James Troup  <james@nocrew.org>
4248
4249         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
4250         they preferred the name 'Uploaders'.
4251
4252 2001-06-23  James Troup  <james@nocrew.org>
4253
4254         * katie (check_files): fix typo in uncommon rejection message,
4255         s/sourceversion/source version/.
4256
4257         * denise (main): we can't use print because stdout has been
4258         redirected.
4259
4260         * katie (source_exists): new function; moved out of check_files()
4261         and added support for binary-only NMUs of earlier sourceful NMUs.
4262
4263         * rhona (clean): find_next_free has moved.
4264
4265         * utils.py (find_next_free): new function; moved here from rhona.
4266         Change too_many to be an argument with a default value, rather
4267         than a hardcoded variable.
4268
4269         * shania: rewritten to work better; REJECTion reminder mail
4270         handling got lost though.
4271
4272 2001-06-22  James Troup  <james@nocrew.org>
4273
4274         * rhona (main): remove unused override code.
4275
4276         * fernanda (main): remove extraneous \n's from utils.warn calls.
4277         * natalie.py (list): likewise.
4278
4279         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
4280         use utils.{warn,fubar} where appropriate.
4281
4282 2001-06-21  James Troup  <james@nocrew.org>
4283
4284         * katie (nmu_p): new class that encapsulates the "is a nmu?"
4285         functionality.
4286         (nmu_p.is_an_nmu): add support for multiple maintainers specified
4287         by the "Maintainers" field in the .dsc file and maintainer groups.
4288         (nmu_p.__init__): read in the list of group maintainer names.
4289         (announce): use nmu_p.
4290
4291 2001-06-20  James Troup  <james@nocrew.org>
4292
4293         * rene (main): hardcode the suite experimental is compared to by
4294         name rather than number.
4295
4296         * katie (check_files): differentiate between doesn't-exist and
4297         permission-denied in "can not read" rejections; requested by edd@.
4298         (check_dsc): use os.path.exists rather than os.access to allow the
4299         above check to kick in.
4300
4301         * heidi (process_file): read all input before doing anything and
4302         use transactions.
4303
4304 2001-06-15  James Troup  <james@nocrew.org>
4305
4306         * fernanda: new script; replaces old 'check' shell script
4307         nastiness.
4308
4309 2001-06-14  James Troup  <james@nocrew.org>
4310
4311         * katie: actually import traceback module to avoid amusing
4312         infinite loop.
4313
4314 2001-06-10  James Troup  <james@nocrew.org>
4315
4316         * utils.py (extract_component_from_section): fix to handle just
4317         'non-free' and 'contrib'.  Also fix to handle non-US in a
4318         completely case insensitive manner as a component.
4319
4320 2001-06-08  James Troup  <james@nocrew.org>
4321
4322         * madison (arch_compare): sort function that sorts 'source' first
4323         then alphabetically.
4324         (main): use it.
4325
4326 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
4327
4328         * catherine (poolize): explicitly make poolized_size a long so it
4329         doesn't overflow when poolizing e.g. entire archives.
4330
4331 2001-06-01  James Troup  <james@nocrew.org>
4332
4333         * utils.py (send_mail): throw exceptions rather than exiting.
4334
4335         * katie (process_it): catch exceptions and ignore them.
4336
4337 2001-06-01  Michael Beattie  <mjb@debian.org>
4338
4339         * added update-mailingliststxt and update-readmenonus to update
4340         those files, respectively. modified cron.daily{,-non-US} to
4341         use them.
4342
4343 2001-05-31  Anthony Towns  <ajt@debian.org>
4344
4345         * rhona: make StayOfExecution work.
4346
4347 2001-05-31  James Troup  <james@nocrew.org>
4348
4349         * rhona (find_next_free): fixes to not overwrite files but rename
4350         them by appending .<n> instead.
4351         (clean): use find_next_free and use dated sub-directories in the
4352         morgue.
4353
4354         * utils.py (move): don't overwrite files unless forced to.
4355         (copy): likewise.
4356
4357 2001-05-24  James Troup  <james@nocrew.org>
4358
4359         * katie (check_files): determine the source version here instead
4360         of during install().
4361         (check_files): check for existent source with bin-only NMU
4362         support.
4363         (main): sort the list of changes so that the source-must-exist
4364         check Does The Right Thing(tm).
4365
4366         * utils.py (changes_compare): new function; sorts a list of
4367         changes files by 'have-source', source, version.
4368         (cc_fix_changes): helper function.
4369         (parse_changes): use compiled regexes.
4370         (fix_maintainer): likewise.
4371
4372         * rene (main): warn about packages in experimental that are
4373         superseded by newer versions in unstable.
4374
4375 2001-05-21  James Troup  <james@nocrew.org>
4376
4377         * rene (main): add support for checking for ANAIS (Architecture
4378         Not Allowed In Source) packages.
4379
4380 2001-05-17  James Troup  <james@nocrew.org>
4381
4382         * katie (check_changes): initalize `architecture' dictionary in
4383         changes global so that if we can't parse the changes file for
4384         whatever reason we don't undef later on.
4385
4386         * utils.py (parse_changes): fix handling of multi-line fields
4387         where the first line did have data.
4388
4389 2001-05-05  Anthony Towns  <ajt@debian.org>
4390
4391         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
4392         (It should always have been there. Ooopsy.)
4393
4394 2001-05-03  Anthony Towns  <ajt@debian.org>
4395
4396         * jenna: Cleanup packages that move from arch:any to arch:all or
4397         vice-versa.
4398
4399 2001-04-24  Anthony Towns  <ajt@debian.org>
4400
4401         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
4402         cope with debian-installer and boot-floppies' md5sum.txt.
4403
4404 2001-04-16  James Troup  <james@nocrew.org>
4405
4406         * katie (check_changes): add missing %s format string argument.
4407         (stable_install): temporary work around for morgue location to
4408         move installed changes files into.
4409         (stable_install): helps if you actually read in the template.
4410         (manual_reject): fix for editing of reject messages which was
4411         using the wrong variable name.
4412
4413         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
4414
4415 2001-04-13  James Troup  <james@nocrew.org>
4416
4417         * katie (manual_reject): Cc the installer.
4418         (reject): don't.
4419         (check_changes): remove unused maintainer-determination code.
4420         (update_subst): add support for Changed-By when setting the
4421         *MAINTAINER* variables.
4422
4423         * rene (bar): new function to check for packages on architectures
4424         when they shouldn't be.
4425
4426         * natalie.py (main): use fubar() and warn() from utils.
4427
4428         * utils.py (whoami): new mini-function().
4429         * melanie (main): use it.
4430         * katie (manual_reject): likewise.
4431
4432 2001-04-03  James Troup  <james@nocrew.org>
4433
4434         * katie (action): ignore exceptions from os.path.getmtime() so we
4435         don't crash on non-existent changes files (e.g. when they are
4436         moved between the start of the install run in cron.daily and the
4437         time we get round to processing them).
4438
4439         * madison (main): also list source and accept -s/--suite.
4440
4441         * jenna (generate_src_list): missing \n in error message.
4442
4443         * katie (update_subst): add sane defaults for when changes is
4444         skeletal.
4445
4446 2001-03-29  James Troup  <james@nocrew.org>
4447
4448         * melanie (main): use fubar() and warn() from utils.  Remember who
4449         the maintainer for the removed packages are and display that info
4450         to the user.  Readd support for melanie-specific Bcc-ing that got
4451         lost in the TemplateSubst transition.
4452
4453         * utils.py (fubar): new function.
4454         (warn): like wise.
4455
4456         * db_access.py (get_maintainer): as below.
4457
4458         * charisma (get_maintainer): moved the bulk of this function to
4459         db_access so that melanie can use it too.
4460
4461         * claire.py (find_dislocated_stable): restrict the override join
4462         to those entries where the suite is stable; this avoids problems
4463         with packages which have moved to new sections (e.g. science)
4464         between stable and unstable.
4465
4466 2001-03-24  James Troup  <james@nocrew.org>
4467
4468         * catherine (poolize): new function; not really independent of
4469         main() fully, yet.
4470         (main): use it.
4471
4472         * katie (stable_install): __SUITE__ needs to be space prefixed
4473         because buildd's check for 'INSTALLED$'.
4474
4475 2001-03-22  James Troup  <james@nocrew.org>
4476
4477         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
4478
4479         * jenna: rewritten; now does deletions on a per-suite level
4480         instead of a per-suite-component-architecture-type level.  This
4481         allows mutli-component packages to be auto-cleaned (and as a
4482         bonus, reduces the code size and duplication).
4483
4484 2001-03-22  Anthony Towns  <ajt@debian.org>
4485
4486         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
4487         instead of just giving a gpg error.
4488
4489 2001-03-21  James Troup  <james@nocrew.org>
4490
4491         * madison (main): use apt_pkg.VersionCompare to sort versions so
4492         that output is correctly sorted for packages like debhlper.
4493         Noticed by ajt@.
4494
4495         * tea (check_source_in_one_dir): actually find problematic source
4496         packages.
4497
4498         * katie (check_dsc): remember the orig.tar.gz's location ID if
4499         it's not in a legacy suite.
4500         (check_diff): we don't use orig_tar_id.
4501         (install): add code to handle sourceful diff-only upload of
4502         packages which change components by copying the .orig.tar.gz into
4503         the new component, if it doesn't already exist there.
4504         (process_it): reset orig_tar_location (as above).
4505
4506         * melanie (main): use template substiution for the bug closing
4507         emails.
4508         (main): don't hardcode bugs.debian.org or packages.debian.org
4509         either; use configuration items.
4510
4511         * katie: likewise.
4512
4513         * natalie.py (init): use None rather than 'localhost' for the
4514         hostname given to pg.connect.
4515
4516         * utils.py (TemplateSubst): new function; lifted from
4517         userdir-ldap.
4518
4519 2001-03-21  Ryan Murray  <rmurray@debian.org>
4520
4521         * katie (announce): fix the case of non-existent
4522         Suite::$SUITE::Announce.
4523
4524 2001-03-20  Ryan Murray  <rmurray@debian.org>
4525
4526         * debian/rules (binary-indep): install melanie into /usr/bin/ not
4527         /usr/.
4528
4529         * alyson (main): use config variable for database name.
4530         * andrea (main): likewise.
4531         * catherine (main): likewise.
4532         * charisma (main): likewise.
4533         * cindy (main): likewise.
4534         * claire.py (main): likewise.
4535         * denise (main): likewise.
4536         * heidi (main): likewise.
4537         * jenna (main): likewise.
4538         * katie (main): likewise.
4539         * madison (main): likewise.
4540         * melanie (main): likewise.
4541         * neve (main): likewise.
4542         * rhona (main): likewise.
4543         * tea (main): likewise.
4544
4545 2001-03-15  James Troup  <james@nocrew.org>
4546
4547         * rhona (check_sources): fixed evil off by one (letter) error
4548         which was causing only .dsc files to be deleted when cleaning
4549         source packages.
4550
4551         * charisma (get_maintainer_from_source): remove really stupid and
4552         gratuitous IN sub-query and replace with normal inner join.
4553         (main): connect as read-only user nobody.
4554
4555         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
4556         with EXISTS.
4557         (check_files): likewise; still disabled by default though.
4558         (clean_binaries): add ' seconds' to the mysterious number in the
4559         output.
4560         (clean): likewise.
4561
4562         * tea (check_files): add missing global declaration on db_files.
4563
4564 2001-03-14  James Troup  <james@nocrew.org>
4565
4566         * rhona: rewritten large chunks. Removed a lot of the silly
4567         selecting into dictionaries and replaced it with 'where exists'
4568         based sub queries.  Added support for StayOfExecution.  Fix the
4569         problem with deleting dsc_files too early and disable cleaning of
4570         unattached files.
4571
4572 2001-03-14  Anthony Towns  <ajt@debian.org>
4573
4574         * katie (announce): also check Changed-By when trying to detect
4575         NMUs.
4576
4577 2001-03-06  Anthony Towns  <ajt@debian.org>
4578
4579         * ziyi (main): Generate Release.gpg files as well, using the key from
4580         Dinstall::SigningKey in katie.conf, if present. That key has to be
4581         passwordless, and hence kept fairly secretly.
4582
4583 2001-03-02  James Troup  <james@nocrew.org>
4584
4585         * utils.py (str_isnum): new function; checks to see if the string
4586         is a number.
4587
4588         * shania (main): fix _hideous_ bug which was causing all files > 2
4589         weeks old to be deleted from incoming, even if they were part of a
4590         valid upload.
4591
4592 2001-02-27  James Troup  <james@nocrew.org>
4593
4594         * melanie (main): accept new argument -C/--carbon-copy which
4595         allows arbitarty carbon-copying of the bug closure messages.
4596         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
4597         separate variable.
4598
4599 2001-02-27  Anthony Towns  <ajt@debian.org>
4600
4601         * ziyi: new program; generates Release files.
4602
4603 2001-02-25  James Troup  <james@nocrew.org>
4604
4605         * katie (reject): add missing '\n' to error message.
4606         (manual_reject): likewise.
4607         (install): catch exceptions from moving the changes file into DONE
4608         and ignore them.
4609
4610         * tea (check_md5sums): new function.
4611
4612 2001-02-25  Michael Beattie  <mjb@debian.org>
4613
4614         * melanie: use $EDITOR if available.
4615
4616 2001-02-15  James Troup  <james@nocrew.org>
4617
4618         * utils.py (parse_changes): don't crash and burn on empty .changes
4619         files.  Symptoms noticed by mjb@.
4620
4621 2001-02-15  Adam Heath  <doogie@debian.org>
4622
4623         * denise (main): use an absolute path for the output filename.
4624
4625         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
4626         compile errors with postgresql-dev >= 7.0.
4627
4628 2001-02-12  James Troup  <james@nocrew.org>
4629
4630         * rene: initial version.
4631
4632         * andrea: initial version.
4633
4634         * catherine (main): remove obsolete assignment of arguments.
4635
4636 2001-02-09  James Troup  <james@nocrew.org>
4637
4638         * catherine: first working version.
4639
4640 2001-02-06  James Troup  <james@nocrew.org>
4641
4642         * katie (check_files): validate the priority field; i.e. ensure it
4643         doesn't contain a '/' (to catch people prepending the priority
4644         with the component rather than the section).
4645         (check_override): don't warn about source packages; the only check
4646         is on section and we have no GUI tools that would use the Section
4647         field for a Sources file.
4648         (announce): use tags rather than severities for NMUs.  Requested
4649         by Josip Rodin <joy@>. [#78035]
4650
4651 2001-02-04  James Troup  <james@nocrew.org>
4652
4653         * tea (check_override): new function; ensures packages in suites
4654         are also in the override file.  Thanks to bod@ for noticing that
4655         such packages existed.
4656
4657         * katie: move file type compiled regular expressions to utils as
4658         catherine uses them too.
4659         (check_changes): always default maintainer822 to the installer
4660         address so that any bail out won't cause undefs later.
4661         (check_files): update file type re's to match above.
4662         (stable_install): likewise.
4663         (reject): handle any except from moving the changes files.  Fixes
4664         crashes on unreadable changes files.
4665
4666         * melanie (main): add an explanation of why things are not removed
4667         from testing.
4668
4669 2001-01-31  James Troup  <james@nocrew.org>
4670
4671         * melanie (main): ignore a) no message, b) removing from stable or
4672         testing when invoked with -n/--no-action.
4673
4674         * katie (check_override): lower section before checking to see if
4675         we're whining about 'non-US' versus 'non-US/main'.
4676
4677         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
4678         function so that we can use inside of PostgreSQL.
4679
4680 2001-01-28  James Troup  <james@nocrew.org>
4681
4682         * katie: updated to pass new flag to parse_changes() and deal with
4683         the exception raised on invalid .dsc's if appropriate.
4684         * shania (main): likewise.
4685         * melanie (main): likewise.
4686
4687         * tea (check_dscs): new function to validate all .dsc files in
4688         unstable.
4689
4690         * utils.py (parse_changes): if passed an additional flag, validate
4691         the .dsc file to ensure it's extractable by dpkg-source.
4692         Requested by Ben Collins <bcollins@>.
4693
4694 2001-01-27  James Troup  <james@nocrew.org>
4695
4696         * madison (main): connect to the DB as nobody.
4697
4698         * katie (check_files): remove support for -r/--no-version-check
4699         since it makes no sense under katie (jenna will automatically
4700         remove the (new) older version) and was evil in any event.
4701         (check_changes): add missing new line to rejection message.
4702         (check_dsc): likewise.
4703         (process_it): reset reject_message here.
4704         (main): not here.  Also remove support for -r.
4705
4706 2001-01-26  James Troup  <james@nocrew.org>
4707
4708         * katie (check_override): don't whine about 'non-US/main' versus
4709         'non-US'.
4710
4711 2001-01-26  Michael Beattie  <mjb@debian.org>
4712
4713         * natalie.py (usage): new function.
4714         (main): use it.
4715
4716 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
4717
4718         * update-mirrorlists: Update README.non-US too (request from Joy).
4719
4720 2001-01-25  James Troup  <james@nocrew.org>
4721
4722         * katie (reject): catch any exception from utils.move() and just
4723         pass, we previously only caught can't-overwrite errors and not
4724         can't-read ones.
4725
4726         * jenna (generate_src_list): use ORDER BY in selects to avoid
4727         unnecessary changes to Packages files.
4728         (generate_bin_list): likewise.
4729
4730         * utils.py (extract_component_from_section): separated out from
4731         build_file_list() as it's now used by claire too.
4732
4733         * claire.py (find_dislocated_stable): rewrite the query to extract
4734         section information and handle component-less locations properly.
4735         Thanks to ajt@ for the improved queries.
4736         (fix_component_section): new function to fix components and
4737         sections.
4738
4739 2001-01-23  James Troup  <james@nocrew.org>
4740
4741         * katie (check_files): set file type for (u?)debs first thing, so
4742         that if we continue, other functions which rely on file type
4743         existing don't bomb out.  If apt_pkg or apt_inst raise an
4744         exception when parsing the control file, don't try any other
4745         checks, just drop out.
4746         (check_changes): new test to ensure there is actually a target
4747         distribution.
4748
4749 2001-01-22  James Troup  <james@nocrew.org>
4750
4751         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
4752         <grin@>.
4753         (check_changes): when mapping to unstable, remember to actually
4754         add unstable to the suite list and not just remove the invalid
4755         suite.
4756
4757 2001-01-21  James Troup  <james@nocrew.org>
4758
4759         * katie (check_files): catch exceptions from debExtractControl()
4760         and reject packages which raise any.
4761
4762 2001-01-19  James Troup  <james@nocrew.org>
4763
4764         * katie (check_signature): basename() file name in rejection
4765         message.
4766
4767 2001-01-18  James Troup  <james@nocrew.org>
4768
4769         * katie (in_override_p): remember the section and priority from
4770         the override file so we can check them against the package later.
4771         (check_override): new function; checks section and priority (for
4772         binaries) from the package against the override file and mails the
4773         maintainer about any disparities.
4774         (install): call check_override after announcing the upload.
4775
4776 2001-01-16  James Troup  <james@nocrew.org>
4777
4778         * utils.py (build_file_list): catch ValueError's from splitting up
4779         the files field and translate it into a parse error.
4780
4781         * tea: add support for finding unreferenced files.
4782
4783         * katie (in_override_p): add support for suite-aliasing so that
4784         proposed-updates uploads work again.
4785         (check_changes): catch parses errors from utils.build_file_list().
4786         (check_dsc): likewise.
4787         (check_diff): yet more dpkg breakage so we require even newer a
4788         version.
4789
4790         * jenna (generate_bin_list): don't do nasty path munging that's no
4791         longer needed.
4792
4793         * denise (main): support for non-US; and rename testing's override
4794         files so they're based on testing's codename.
4795
4796 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
4797
4798         * melanie: add to the bug closing message explaining what happens
4799         (or rather doesn't) with bugs against packages that have been
4800         removed.
4801
4802 2001-01-14  James Troup  <james@nocrew.org>
4803
4804         * charisma (main): fix silly off-by-one error; suite priority
4805         checking was done using "less than" rather than "less than or
4806         equal to" which was causing weird hesienbugs with wrong Maintainer
4807         fields.
4808
4809 2001-01-10  James Troup  <james@nocrew.org>
4810
4811         * katie (in_override_p): adapted to use SQL-based overrides.
4812         read_override_file function disappears.
4813
4814         * db_access.py: add new functions get_section_id, get_priority_id
4815         and get_override_type_id.
4816         (get_architecture_id): return -1 if the architecture is not found.
4817
4818         * heidi: switch %d -> %d in all SQL queries.
4819         (get_list): Use string.join where appropriate.
4820
4821         * rhona (in_override_p): don't die if the override file doesn't
4822         exist.
4823         (main): warn if the override file doesn't exist.
4824
4825         * alyson: new script; will eventually sync the config file and the
4826         SQL database.
4827
4828         * natalie.py: new script; manipulates overrides.
4829
4830         * melanie: new script; removes packages from suites.
4831
4832 2001-01-08  James Troup  <james@nocrew.org>
4833
4834         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
4835         anything it just changed the symptom.  Recognise the new breakage
4836         and reject them too.
4837
4838 2001-01-07  James Troup  <james@nocrew.org>
4839
4840         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
4841         to the .changes file, be sure to set up files[filename]["type"]
4842         too.
4843
4844 2001-01-06  James Troup  <james@nocrew.org>
4845
4846         * katie (check_diff): new function; detects bad diff files
4847         produced by dpkg 1.8.1 and rejects thems.
4848         (process_it): call check_diff().
4849         (check_dsc): gar.  Add support for multiple versions of the
4850         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4851         and size against all versions and use one which matches if
4852         possible and exclude any that don't from being poolized to avoid
4853         file overwrites.  Thanks to broonie@ for providing the example.
4854         (install): skip any files marked as excluded as above.
4855
4856 2001-01-05  James Troup  <james@nocrew.org>
4857
4858         * heidi (process_file): add missing argument to error message.
4859
4860 2001-01-04  James Troup  <james@nocrew.org>
4861
4862         * heidi (main): fix handling of multiple files by reading all
4863         files not just the first file n times (where n = the number of
4864         files passed as arguments).
4865
4866 2001-01-04  Anthony Towns  <ajt@debian.org>
4867
4868         * katie (check_dsc): proper fix for the code which locates the
4869         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4870
4871 2000-12-20  James Troup  <james@nocrew.org>
4872
4873         * rhona: replace IN's with EXISTS's to make DELETE time for
4874         binaries and source sane on auric.  Add a -n/--no-action flag and
4875         make it stop actions if used.  Fixed a bug in binaries deletion
4876         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4877         -V/--version.  Giving timing info on deletion till I'm sure it's
4878         sane.
4879
4880         * katie (check_changes): map testing to unstable.
4881
4882         * madison: new script; shows versions in different architectures.
4883
4884         * katie (check_dsc): ensure size matches as well as md5sum;
4885         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4886         #69702.
4887
4888 2000-12-19  James Troup  <james@nocrew.org>
4889
4890         * katie (reject): ignore the "can't overwrite file" exception from
4891         utils.move() and leave the files where they are.
4892         (reject): doh! os.access() test was reversed so we only tried to
4893         move files which didn't exist... replaced with os.path.exists()
4894         test the right way round.
4895
4896         * utils.py (move): raise an exception if we can't overwrite the
4897         destination file.
4898         (copy): likewise.
4899
4900 2000-12-18  James Troup  <james@nocrew.org>
4901
4902         * rhona: first working version.
4903
4904         * db_access.py (get_files_id): force both sizes to be integers.
4905
4906         * katie (main): use size_type().
4907
4908         * utils.py (size_type): new function; pretty prints a file size.
4909
4910 2000-12-17  James Troup  <james@nocrew.org>
4911
4912         * charisma (main): do version compares so that older packages do
4913         not override newer ones and process source first as source wins
4914         over binaries in terms of who we think of as the Maintainer.
4915
4916 2000-12-15  James Troup  <james@nocrew.org>
4917
4918         * katie (install): use the files id for the .orig.tar.gz from
4919         check_dsc().
4920         (install): limit select for legacy source to a) source in legacy
4921         or legacy-mixed type locations and b) distinct on files.id.
4922         (install): rather than the bizarre insert new, delete old method
4923         for moving legacy source into the pool, use a simple update of
4924         files.
4925         (process_it): initalize some globals before each process.
4926
4927 2000-12-14  James Troup  <james@nocrew.org>
4928
4929         * katie (in_override_p): index on binary_type too since .udeb
4930         overrides are in a different file.
4931         (read_override_file): likewise.
4932         (check_files): correct filename passed to get_files_id().
4933         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4934         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4935         (check_dsc): remember the files id of the .orig.tar.gz, not the
4936         location id.
4937
4938 2000-12-13  James Troup  <james@nocrew.org>
4939
4940         * utils.py (poolify): force the component to lower case except for
4941         non-US.
4942
4943         * katie (in_override_p): handle .udeb-specific override files.
4944         (check_files): pass the binary type to in_override_p().
4945         (check_dsc): remember the location id of the old .orig.tar.gz in
4946         case it's not in the pool.
4947         (install): use location id from dsc_files; which is where
4948         check_dsc() puts it for old .orig.tar.gz files.
4949         (install): install files after all DB work is complete.
4950         (reject): basename() the changes filename.
4951         (manual_reject): likewise.
4952
4953         * shania: new progam; replaces incomingcleaner.
4954
4955 2000-12-05  James Troup  <james@nocrew.org>
4956
4957         * katie (check_changes): if inside stable and can't find files
4958         from the .changes; assume it's installed in the pool and chdir()
4959         to there.
4960         (check_files): we are not installing for stable installs, so don't
4961         check for overwriting existing files.
4962         (check_dsc): likewise.
4963         (check_dsc): reorder .orig.tar.gz handling so that we search in
4964         the pool first and only then fall back on any .orig.tar.gz in the
4965         cwd; this avoids false positives on the overwrite check when
4966         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4967         (install): if this is a stable install, bail out to
4968         stable_install() immediately.
4969         (install): dsc_files handling was horribly broken. a) we need to
4970         add files from the .dsc and not the .changes (duh), b) we need to
4971         add the .dsc file itself to dsc_files (to be consistent with neve
4972         if for no other reason).
4973         (stable_install): new function; handles installs from inside
4974         proposed-updates to stable.
4975         (acknowledge_new): basename changes_filename before doing
4976         anything.
4977         (process_it): absolutize the changes filename to avoid the
4978         requirement of being in the same directory as the .changes file.
4979         (process_it): save and restore the cwd as stable installs can
4980         potentially jump into the pool to find files.
4981
4982         * jenna: dislocated_files support using claire.
4983
4984         * heidi (process_file): select package field from binaries
4985         explicitly.
4986
4987         * db_access.py (get_files_id): fix cache key used.
4988
4989         * utils.py (build_file_list): fix 'non-US/non-free' case in
4990         section/component splitting.
4991         (move): use os.path.isdir() rather than stat.
4992         (copy): likewise.
4993
4994         * claire.py: new file; stable in non-stable munger.
4995
4996         * tea: new file; simply ensures all files in the DB exist.
4997
4998 2000-12-01  James Troup  <james@nocrew.org>
4999
5000         * katie (check_dsc): use regex_safe().
5001         (check_changes): typo in changes{} key:
5002         s/distributions/distribution/.
5003         (install): use changes["source"], not files[file]["source"] as the
5004         latter may not exist and the former is used elsewhere.  Commit the
5005         SQL transaction earlier.
5006
5007         * utils.py (regex_safe): new function; escapes characters which
5008         have meaning to SQL's regex comparison operator ('~').
5009
5010 2000-11-30  James Troup  <james@nocrew.org>
5011
5012         * katie (install): pool_location is based on source package name,
5013         not binary package.
5014
5015         * utils.py (move): if dest is a directory, append the filename
5016         before chmod-ing.
5017         (copy): ditto.
5018
5019         * katie (check_files): don't allow overwriting of existing .debs.
5020         (check_dsc): don't allow overwriting of existing source files.
5021
5022 2000-11-27  James Troup  <james@nocrew.org>
5023
5024         * katie (check_signature): don't try to load rsaref; it's
5025         obsolete.
5026         (in_override_p): don't try to lookup override entries for packages
5027         with an invalid suite name.
5028         (announce): don't assume the suite name is valid; use Find() to
5029         lookup the mailing list name for announcements.
5030
5031         * utils.py (where_am_i): typo; hostname is in the first element,
5032         not second.
5033
5034         * db_access.py (get_suite_id): return -1 on an unknown suite.
5035
5036 2000-11-26  James Troup  <james@nocrew.org>
5037
5038         * katie (install): fix CopyChanges handling; typo in in checking
5039         Cnf for CopyChanges flag and was calling non-existent function
5040         copy_file.
5041
5042         * utils.py (copy): new function; clone of move without the
5043         unlink().
5044
5045 2000-11-25  James Troup  <james@nocrew.org>
5046
5047         * utils.py (build_file_list): handle non-US prefixes properly
5048         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
5049         + 'libs' not 'non-US/libs').
5050         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
5051         delays.  This is possibly(/probably) exim speicifc and (like other
5052         sendmail options) needs to be in the config file.
5053
5054 2000-11-24  James Troup  <james@nocrew.org>
5055
5056         * rhona (check_sources): we need file id from dsc_files; not id.
5057         Handle non .dsc source files being re-referenced in dsc_files.
5058
5059         * katie (in_override_p): strip out any 'non-US' prefix.
5060         (check_files): use utils.where_am_i() rather than hardcoding.
5061         (check_files): validate the component.
5062         (install): use utils.where_am_i() rather than hardcoding.
5063         (install): fix mail to go to actual recepient.
5064         (reject): likewise.
5065         (manual_reject): likewise.
5066         (acknowledge_new): likewise.
5067         (announce): likewise.
5068
5069         * db_access.py (get_component_id): ignore case when searching for
5070         the component and don't crash if the component can't be found, but
5071         return -1.
5072         (get_location_id): handle -1 from get_component_id().
5073
5074         * jenna (generate_src_list): don't bring 'suite' into our big
5075         multi-table-joining select as we already know the 'suite_id'.
5076         (generate_bin_list): likewise.
5077
5078         * neve (main): don't quit if not on ftp-master.
5079         (process_packages): remove unused variable 'suite_codename'.
5080
5081         * utils.py (move): actually move the file.
5082         (build_file_list): handle non-US prefixes in the section.
5083
5084         * catherine (main): use which_conf_file().
5085         * charisma (main): likewise.
5086         * heidi (main): likewise.
5087         * jenna (main): likewise.
5088         * katie (main): likewise.
5089         * neve (main): likewise.
5090         * rhona (main): likewise.
5091
5092         * utils.py (where_am_i): new routine; determines the archive as
5093         understood by other 'dak' programs.
5094         (which_conf_file): new routine; determines the conf file to read.
5095
5096 2000-11-17  James Troup  <james@nocrew.org>
5097
5098         * katie (install): fix where .changes files for proposed-updates
5099         go.
5100
5101 2000-11-04  James Troup  <james@nocrew.org>
5102
5103         * jenna (main): handle architecture properly if no
5104         -a/--architecture argument is given, i.e. reset architecture with
5105         the values for the suite for each suite.
5106
5107         * Add apt_pkg.init() to the start of all scripts as it's now
5108         required by python-apt.
5109
5110 2000-10-29  James Troup  <james@nocrew.org>
5111
5112         * jenna (generate_bin_list): take an additional argument 'type'
5113         and use it in the SELECT.
5114         (main): if processing component 'main', process udebs and debs.
5115
5116         * neve (process_packages): set up 'type' in 'binaries' (by
5117         assuming .deb).
5118
5119         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
5120         (check_files): set up files[file]["dbtype"].
5121         (install): use files[file]["dbtype"] to set up the 'type' field in
5122         the 'binaries' table.
5123
5124         * init_pool.sql: add a 'type' field to the 'binaries' table to
5125         distinguisgh between ".udeb" and ".deb" files.
5126
5127         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
5128         dest ? dirname(dest)" type check instead.
5129
5130         * katie (check_dsc): handle the case of an .orig.tar.gz not found
5131         in the pool without crashing.  Also handle the case of being asked
5132         to look for something other than an .orig.tar.gz in the pool.
5133
5134 2000-10-26  James Troup  <james@nocrew.org>
5135
5136         * katie (install): fix filenames put into files table during
5137         poolification of legacy source.
5138
5139         * utils.py (move): work around a bug in os.path.basename() which
5140         cunningly returns '' if there is a trailing slash on the path
5141         passed to it.
5142
5143         * katie (check_dsc): Remove more cruft.  If we find the
5144         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
5145         location, make a note of that so we can fix things in install().
5146         (install): as above.  Move any old source out of legacy locations
5147         so that 'apt-get source' will work.
5148         (process_it): reset the flag that indicates to install that the
5149         source needs moved.
5150
5151         * cron.daily: more.  Nowhere near complete yet though.
5152
5153         * katie (install): don't run os.makedirs, a) utils.move() does
5154         this now, b) we weren't removing the user's umask and were
5155         creating dirs with SNAFU permissions.
5156         (check_dsc): rewrite the .orig.tar.gz handling to take into
5157         account, err, package pools.  i.e. look anywhere in the pool
5158         rather than faffing around with two simple paths.
5159
5160         * neve (process_sources): add the .dsc to dsc_files too.
5161
5162 2000-10-25  James Troup  <james@nocrew.org>
5163
5164         * neve (process_sources): don't duplicate .orig.tar.gz's.
5165
5166 2000-10-23  James Troup  <james@nocrew.org>
5167
5168         * utils.py (re_extract_src_version): moved here.
5169
5170         * neve: move re_extract_src_version to utils.
5171         (process_packages): reflect change.
5172
5173         * katie (install): reflect change.
5174
5175 2000-10-19  James Troup  <james@nocrew.org>
5176
5177         * jenna (generate_src_list): handle locations with null
5178         components.
5179         (generate_bin_list): likewise.
5180