]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
[JT] 4.0r1
[dak.git] / ChangeLog
1 2007-06-19  Anthony Towns  <ajt@debian.org>
2
3         * Add nm.debian.org pseudopackage
4
5 2007-06-18  Anthony Towns  <ajt@debian.org>
6
7         * daklib/logging.py: Set umask to not exclude group-writability
8         so we don't get reminded at the start of each month. Thanks to
9         Random J.
10         * dak/override.py: More changes from Herr von Wifflepuck: warn
11         if section of source is different to binary section; restore
12         functionality on source-only overrides; croak if trying to set
13         priority of a source override; never set priority of source
14         overrides; correct typo in logging (s/priority/section/ at
15         one place)
16
17         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
18         * config/debian/cron.daily: auotmatically accept/reject
19         oldstable-proposed-updates based on COMMENTS directory
20
21 2007-06-18  Anthony Towns  <ajt@debian.org>
22
23         * config/debian/apt.conf, config/debian/apt.conf.stable,
24         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
25         (sarge), support for oldstable-proposed-updates, dropping m68k
26         from etch, creating etch-m68k suite, creating lenny.
27
28         * config/debian/vars: update for lenny
29
30         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
31         drop upload limitations, add release postgres user
32         
33         * dak/process_new.py: support for automatically accepting and rejecting
34         packages from proposed-updates holding queues via COMMENTS directory
35         * cron.daily: automatically process COMMENTS-based approvals
36         and rejections for proposed-updates holding queues
37
38         * dak/process_unchecked.py: add support for oldproposedupdates
39         holding queue
40
41         * dak/control_suite.py: allow control-suite to work with etch-m68k
42
43         * dak/generate_releases.py: unlink old Release files before updating
44         them if nlinks > 1 (ie, if two files used to be the same, maybe they
45         shouldn't be when generate-releases is run)
46
47         * dak/generate_releases.py: add a couple of commented lines to make
48         it easier to deal with point releases
49
50         * dak/make_overrides.py: generate overrides for !contrib udebs
51
52         * docs/README.stable-point-release: update docs for doing a
53         point release
54
55 2007-03-05  Anthony Towns  <ajt@debian.org>
56
57         * config/debian/dak.conf: update for 3.1r5.
58         * scripts/debian/ssh-move: add ssh-move script from debbugs
59         * config/debian/cron.unchecked: push version info to debbugs using
60         ssh-move.
61
62 2007-02-14  James Troup  <troup@ries.debian.org>
63
64         * docs/README.config: remove Dinstall::GroupOverrideFilename.
65         * config/debian/dak.conf: likewise.
66         * config/debian-non-US/dak.conf: likewise.
67         * config/debian-security/dak.conf: likewise.
68
69         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
70         experimental differently, just close the bugs and let version
71         tracking sort it out.
72          (nmu_p): remove entire class - now unused.
73          (Upload.__init__): don't use nmu_p.
74
75 2007-02-08  Anthony Towns  <ajt@debian.org>
76
77         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
78         signing key.  Drop maximum index diffs down to 14.
79
80         * config/debian/apt.conf: add udeb support for non-free (testing,
81         unstable) and experimental.
82         * config/debian/dak.conf: likewise.
83
84         * dak/generate_releases.py (main): handle udebs in any component.
85
86         * daklib/queue.py (Upload.build_summaries): handle files without a
87         'type' gracefully.
88
89         * dak/generate_releases.py (print_sha256_files): new function.
90         (main): use it.
91
92         * dak/process_accepted.py (stable_install): fix name of template
93         mail.
94
95         * dak/process_unchecked.py (is_stableupdate): fix invocation of
96         database.get_suite_id().
97
98         * templates/process-new.bxa_notification: Update on request
99         of/after discussion with BIS staff.
100
101         * scripts/debian/mkfilesindices: also handle proposed-updates.
102
103 2007-02-08  Ryan Murray  <rmurray@debian.org>
104
105         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
106         group name for chgrp of mail archives.
107
108         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
109         orig.tar.gz's by picking the first one by file id.
110
111         * dak/override.py (main): limit to binary overrides only for now.
112         (usage): update to match.
113
114         * config/debian/cron.daily: track when we have the accepted lock
115         and clean it up on exit if we have it.  Take/check the
116         cron.unchecked lock just before traping to cleanup on exit.
117         Remove potato override handling.  Remove any dangling symlinks in
118         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
119
120         * config/debian/apt.conf: change default compression scheme for
121         both Sources and Packages to gzip and bzip2 rather than
122         uncompressed and gzip (Packages) and gzip (Sources).  Use old
123         defaults for proposed-updates.
124
125         * dak/control_overrides.py (main): refuse to operate on
126         untouchable suites.
127
128         * config/debian/pseudo-packages.maintainers: drop install,
129         installation, boot-floppy, slink-cd, potato-cd and
130         nonus.debian.org.  Update base.
131         * config/debian/pseudo-packages.description: likewise.
132
133         * daklib/utils.py (re_srchasver): new regex.
134         (parse_changes): use regex to split 'Source (Version)' style
135         Source fields into 'source' and 'source-version'.
136
137         * config/debian/cron.daily: use $base instead of hardcoding path
138         name.
139
140         * scripts/debian/mkfilesindices: source 'vars' file and use it's
141         variables instead of hardcoding path names.
142
143         * config/debian/apt.conf: switch from /org to /srv.
144         * config/debian/apt.conf.buildd: likewise.
145         * config/debian/apt.conf.stable: likewise.
146         * config/debian/cron.daily: likewise.
147         * config/debian/cron.hourly: likewise.
148         * config/debian/cron.monthly: likewise.
149         * config/debian/cron.unchecked: likewise.
150         * config/debian/cron.weekly: likewise.
151         * config/debian/dak.conf: likewise.
152         * config/debian/vars: likewise.
153         * scripts/debian/mkfilesindices: likewise.
154         
155 2007-02-08  James Troup  <james@nocrew.org>
156
157         * dak/process_unchecked.py (check_signed_by_key): new function to
158         ensure .changes files are signed by an authorized uploader.
159         (process_it): use it.
160
161         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
162         to configure per suite/component/architecture binary upload
163         restrictions.
164
165 2006-10-09  James Troup  <james.troup@canonical.com>
166
167         * dak/process_unchecked.py (check_timestamps): change match to
168         search as recent versions of python-apt prefix the string with 'E: '.
169
170 2006-06-26  Ryan Murray  <rmurray@debian.org>
171
172         * dak/process_unchecked.py (check_files): strip optional source version
173         from Source: field in changes file, and ensure what is left is a valid
174         package name.
175
176 2006-06-23  Ryan Murray  <rmurray@debian.org>
177
178         * dak/process_unchecked.py (check_files): also check ProposedUpdates
179         queue for source.
180
181 2006-06-18  Ryan Murray  <rmurray@debian.org>
182
183         * dak/scripts/debian/update-ftpstats: look for dak named processes in
184         the log, too.
185
186         * dak/process_unchecked.py (check_files): only check embargoed and
187         unembargoed queues if the keys are set.
188
189         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
190         and bzip2 for etch.
191
192 2006-06-16  James Troup  <james@nocrew.org>
193
194         * dak/dak.py (init): add new-security-install.
195
196         * dak/new_security_install.py: cleanups and adapt for new naming
197         scheme and other changes.
198
199 2006-06-16  Anthony Towns  <ajt@debian.org>
200
201         * dak/new_security_install.py: initial version imported from
202         klecker.
203
204 2006-06-16  James Troup  <james@nocrew.org>
205
206         [Merged changes from klecker - original author unknown.]
207
208         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
209
210         * dak/security_install.py (do_upload): fix check for oldstable and
211         upload file list handling.
212
213         * dak/process_unchecked.py (check_files): update "check for
214         source" code to also look in Embargoed and Unembargoed queues.
215         (is_unembargo): fix handling of Dir::Queue::Disembargo.
216
217         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
218
219         * config/debian-security/vars (disembargo): add.
220
221         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
222         update.
223         (Process-Unchecked::AcceptedLockFile): add.
224         (Suite::Testing): clean up Version and Description.
225         (SuiteMappings): add silent map from etch-secure to testing.
226
227         * config/debian-security/cron.unchecked: add support for
228         disembargoed queues.
229
230         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
231         files too.
232
233         * config/debian-security/apt.conf: add amd64 to architectures for
234         testing-security.
235
236 2006-06-11  James Troup  <troup@spohr.debian.org>
237
238         * config/debian/cron.daily: invoke process-accepted not
239         process-unchecked.
240
241         * config/debian/vars (scriptsdir): new variable.
242         * config/debian/cron.daily: use it.
243
244         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
245         $base/misc/ instead of versioned $masterdir.  Correct 'dak
246         make-maintainers' invocation to look in $configdir for
247         pseudo-packages.maintainers.
248
249         * daklib/queue.py (Upload.do_reject): use correct name for
250         rejection template.
251
252 2006-06-11  James Troup  <james@nocrew.org>
253
254         * dak/override.py (main): temporarily add content of old X-Katie
255         header back as the PTS apparently filters on it.
256         * dak/process_accepted.py (main): likewise.
257         * dak/process_new.py (main): likewise.
258         * dak/process_unchecked.py (main): likewise.
259         * dak/reject_proposed_updates.py (main): likewise.
260         * dak/rm.py (main): likewise.
261         * daklib/queue.py (Upload.do_reject): likewise.
262
263         * config/debian/cron.unchecked: set -u to error out on undefined
264         variables.  Preset LOCKDAILY to "" accordingly.
265         * config/debian/cron.hourly: likewise.
266         * config/debian/cron.monthly: likewise.
267         * config/debian/cron.weekly: likewise.
268
269         * config/debian/vars (configdir): add new variable pointing to
270         this directory.
271
272         * config/debian/cron.daily: use $configdir inplace of $masterdir
273         when that's what we mean, and don't cd into $masterdir just to run
274         dak scripts as we don't need to do that anymore.
275         * config/debian/cron.hourly: likewise.
276         * config/debian/cron.unchecked: likewise.
277         * config/debian/cron.weekly: likewise.
278
279         * config/debian/dak.conf
280         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
281         user back to list of known users as it's non-trivial to entirely
282         change the owner of a database with postgresql 7.4.
283
284         * daklib/queue.py (Upload.source_exists): use string object
285         methods rather than string module.
286         (Upload.get_anyversion): likewise.
287
288         * daklib/utils.py (validate_changes_file_arg): update filename
289         slicing to cope with new .dak filenames.
290
291         * dak/ls.py (main): add back 'heidi' as a valid argument for
292         -f/--format as people are using it in scripts and breaking that
293         without warning seems rude.
294
295 2006-05-21  James Troup  <james@nocrew.org>
296
297         * dak/rm.py (main): use string .isdigit() rather than
298         utils.str_isnum().
299         * dak/process_new.py (edit_overrides): likewise.
300
301         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
302         string import.
303
304 2006-05-21  James Troup  <james@nocrew.org>
305
306         * dak/check_archive.py (check_indices_files_exist): use list
307         comprehension instead of map().  No longer need to import
308         deprecated string module as a side-effect.
309         * dak/check_overrides.py (process): likewise.
310         (main): likewise.
311         * dak/cruft_report.py (do_obsolete_source): likewise.
312         (main): likewise.
313         * dak/ls.py (main): likewise.
314         * dak/make_suite_file_list.py (write_filelists): likewise.
315         * dak/process_accepted.py (stable_install): likewise.
316         * dak/rm.py (main): likewise.
317         * dak/stats.py (number_of_packages): likewise.
318         * daklib/logging.py (Logger.log): likewise.
319         * daklib/queue.py (Upload.source_exists): likewise.
320         (Upload.cross_suite_version_check): likewise.
321         * daklib/utils.py (parse_args): likewise.
322
323 2006-05-21  James Troup  <james@nocrew.org>
324
325         * daklib/utils.py (process_gpgv_output): new function, split out
326         of check_signature().
327         (check_signature): adapt accordingly.
328         (retrieve_key): new function that will try to retrieve the key
329         that signed a given file from a keyserver.
330         (check_signature): add 'autofetch' argument that if not set
331         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
332         If 'autofetch' is true, invoke retrieve_key().  
333
334         * docs/README.config: document Dinstall::KeyAutoFetch and
335         Dinstall:KeyServer.
336
337 2006-05-20  James Troup  <james@nocrew.org>
338
339         * dak/find_null_maintainers.py (main):
340         s/createtimestamp/createTimestamp/ to make things work with modern
341         slapd.
342
343         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
344         Stable::Version and Stable::Description for 3.1r2.
345
346         * config/debian-non-US/dak.conf: sync with klecker - update
347         version number of 3.0 and MoreInfoURL.
348
349         * docs/README.stable-point-release: Add notes about updating
350         dak.conf and Reject-Proposed-Updates section in particular.
351         s/woody/stable/.  Also need to update README.html.
352
353         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
354
355         * config/debian/apt.conf: Add udeb tree for proposed-updates.
356
357 2006-05-20  Ryan Murray  <rmurray@debian.org>
358
359         * scripts/debian/update-ftpstats: new script to update daily
360         architecture size graph data.
361
362         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
363         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
364         there.
365
366         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
367         before we finish.  Don't push to merkel.
368
369         * dak/process_unchecked.py (check_changes): Also look in
370         ProposedUpdates queue dir.
371         (check_files): likewise.
372
373 2006-05-20  Anthony Towns  <ajt@debian.org>
374
375         * scripts/debian/mkfilesindices: new script to generate file
376         indices used for partial mirroring.
377
378         * config/debian/cron.daily: add progress timestamps.
379
380         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
381         amd64 to testing, unstable and experimental.  Drop sh from
382         experimental.  Move Experimental to dists/experimental.  Add
383         Dir::ProposedUpdates.  Add Architectures::amd64.
384
385         * config/debian/apt.conf: add amd64 to testing, unstable and
386         experimental.  Drop uncompressed Packages files from testing. Drop
387         sh from experimental.  Move experimental to dists/experimental/.
388
389         * config/debian/vars (archs): add amd64.
390
391         * dak/process_unchecked.py (action): Add support for
392         proposed-updates approval queue.
393         (is_stableupdate): new function - checks if the upload is targeted
394         at proposed-updates.
395         (do_stableupdate): likewise - moves upload to proposed-updates
396         holding area.
397
398         * dak/process_new.py (do_new): warn if original or new target
399         suite are invalid.
400
401         * dak/generate_releases.py (print_md5sha_files): less whitespace
402         between the hash and size.
403
404         * dak/generate_index_diffs.py (genchanges): don't say we're not
405         doing anything.  Better formatting of other messages.
406         (main): don't skip experimental and remove some 'doing stuff'
407         prints.
408
409 2006-05-18  James Troup  <james@nocrew.org>
410
411         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
412         query.
413
414         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
415         docstrings, untabify, don't shadow builtins, lowercase non-global
416         variable names, spaces after commas.  Also bail if given any
417         arguments since we don't accept any.
418         * dak/init_db.py: likewise.  Also split large main() into
419         subfunctions and rename get() to sql_get().
420
421         * dak/init_db.py (main): check returned value from
422         database.get_archive_id().
423
424         * dak/dak.py: renamed from shell.py.  Update to support new source
425         layout.  Created init() and usage() functions.  Various
426         pylint-inspired cleanups.  Use daklib utils.warn() and
427         utils.fubar().  Change 'functionality' variable to only have
428         (command, description) and always invoke main() when running the
429         module.  Also support -h.
430
431 2006-05-17  James Troup  <james@nocrew.org>
432
433         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
434         imports of and calls to daklib modules.  Change script name
435         everywhere, i.e. in output, mails, comments and configuration tree
436         + filenames.  Also update references to other renamed scripts,
437         classes and templates.  Use '.dak' instead of '.katie' for the
438         queue info storage files.
439         (Renamed from tea)
440         * dak/check_overrides.py: likewise.  (Renamed from cindy)
441         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
442         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
443         * dak/clean_queues.py: likewise.  (Renamed from shania)
444         * dak/clean_suites.py: likewise.  (Renamed from rhona)
445         * dak/compare_suites.py: likewise.  (Renamed from andrea)
446         * dak/control_overrides.py: likewise.  (Renamed from natalie)
447         * dak/control_suite.py: likewise.  (Renamed from heidi)
448         * dak/cruft_report.py: likewise.  (Renamed from rene)
449         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
450         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
451         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
452         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
453         * dak/import_archive.py: likewise.  (Renamed from neve)
454         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
455         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
456         * dak/init_db.py: likewise. (Renamed from alyson)
457         * dak/init_dirs.py: likewise. (Renamed from rose)
458         * dak/ls.py: likewise. (Renamed from madison)
459         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
460         * dak/make_overrides.py: likewise.  (Renamed from denise)
461         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
462         * dak/mirror_split.py: likewise.  (Renamed from billie)
463         * dak/override.py: likewise.  (Renamed from alicia)
464         * dak/poolize.py: likewise.  (Renamed from catherine)
465         * dak/process_accepted.py: likewise.  (Renamed from kelly)
466         * dak/process_new.py: likewise.  (Renamed from lisa)
467         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
468         * dak/queue_report.py: likewise.  (Renamed from helena)
469         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
470         * dak/rm.py: likewise.  (Renamed from melanie)
471         * dak/security_install.py: likewise.  (Renamed from amber)
472         * dak/split_done.py: likewise.  (Renamed from nina)
473         * dak/stats.py: likewise.  (Renamed from saffron)
474         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
475         * daklib/database.py: likewise.  (Renamed from db_access)
476         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
477         * daklib/utils.py: likewise.
478
479         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
480         doesn't need to notify anyone" string.
481         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
482
483         * dak/process_accepted.py (init): drop -V/--version argument.
484         * dak/process_new.py (init): likewise.
485         * dak/process_unchecked.py (init): likewise.
486         * dak/reject_proposed_updates.py (init): likewise
487
488         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
489
490         * dak/stats.py: in usage() output change STAT to MODE.
491
492 2006-05-15  James Troup  <james@nocrew.org>
493
494         * dak/queue_report.py: remove unused encodings imports.
495
496         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
497         imports.  Initalize 'Cnf' as a global.
498         (BillieDB._internal_recurse): fix 'util.' typo.
499
500         * dak/import_ldap_fingerprints.py (main): drop unused time import and
501         commented out time check for LDAP search.
502
503 2005-12-16  Ryan Murray  <rmurray@debian.org>
504
505         * halle: add support for udebs
506         * kelly: stable_install: add support for binNMU versions
507
508 2005-12-05  Anthony Towns  <aj@erisian.com.au>
509
510         * katie.py: Move accept() autobuilding support into separate function 
511         (queue_build), and generalise to build different queues
512
513         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
514
515         * jennifer: Initial support for enabling embargo handling with the
516         Dinstall::SecurityQueueHandling option.
517         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
518         functions.
519
520         * katie.conf-security: Include embargo options
521         * katie.conf-security: Add Lock dir
522         * init_pool.sql-security: Create disembargo table
523         * init_pool.sql-security: Add constraints for disembargo table
524
525 2005-11-26  Anthony Towns  <aj@erisian.com.au>
526
527         * Merge of changes from klecker, by various people
528
529         * amber: special casing for not passing on amd64 and oldstable updates
530         * amber: security mirror triggering
531         * templates/amber.advisory: updated advisory structure
532         * apt.conf.buildd-security: update for sarge's release
533         * apt.conf-security: update for sarge's release
534         * cron.buildd-security: generalise suite support, update for sarge's release
535         * cron.daily-security: update for sarge's release, add udeb support
536         * vars-security: update for sarge's release
537         * katie.conf-security: update for sarge's release, add amd64 support,
538         update signing key
539
540         * docs/README.names, docs/README.quotes: include the additions
541
542 2005-11-25  Anthony Towns  <aj@erisian.com.au>
543
544         * Changed accepted_autobuild to queue_build everywhere.
545         * Add a queue table.
546         * Add a "queue" field in the queue_build table (currently always 0)
547
548         * jennifer: Restructure to make it easier to support special
549         purpose queues between unchecked and accepted.
550
551 2005-11-25  Anthony Towns  <aj@erisian.com.au>
552
553         * Finishing merge of changes from spohr, by various people still
554
555         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
556         works
557         * jennifer: Re-enable .deb ar format checking
558         * katie.py: Convert to +bX binNMU special casing
559         * rhona: Add some debug output when deleting binaries
560         * cron.daily: Add emilie
561         * cron.unchecked: Add lock files
562
563 2005-11-15  Anthony Towns  <aj@erisian.com.au>
564
565         * Merge of changes from spohr, by various people.
566
567         * tiffani: new script to do patches to Packages, Sources and Contents
568         files for quicker downloads.
569         * ziyi: update to authenticate tiffani generated files
570
571         * dak: new script to provide a single binary with less arbitrary names
572         for access to dak functionality.
573
574         * cindy: script implemented
575
576         * saffron: cope with suites that don't have a Priority specified
577         * heidi: use get_suite_id()
578         * denise: don't hardcode stable and unstable, or limit udebs to unstable
579         * denise: remove override munging for testing (now done by cindy)
580         * helena: expanded help, added new, sort and age options, and fancy headers
581         * jennifer: require description, add a reject for missing dsc file
582         * jennifer: change lock file
583         * kelly: propogation support
584         * lisa: honour accepted lock, use mtime not ctime, add override type_id
585         * madison: don't say "dep-retry"
586         * melanie: bug fix in output (missing %)
587         * natalie: cope with maintainer_override == None; add type_id for overrides
588         * nina: use mtime, not ctime
589
590         * katie.py: propogation bug fixes
591         * logging.py: add debugging support, use | as the logfile separator
592
593         * katie.conf: updated signing key (4F368D5D)
594         * katie.conf: changed lockfile to dinstall.lock
595         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
596         * katie.conf: added tiffani, cindy support
597         * katie.conf: updated to match 3.0r6 release
598         * katie.conf: updated to match sarge's release
599
600         * apt.conf: update for sarge's release
601         * apt.conf.stable: update for sarge's release
602         * apt.conf: bump daily max Contents change to 25MB from 12MB
603
604         * cron.daily: add accepted lock and invoke cindy  
605         * cron.daily: add daily.lock
606         * cron.daily: invoke tiffani
607         * cron.daily: rebuild accepted buildd stuff
608         * cron.daily: save rene-daily output on the web site
609         * cron.daily: disable billie
610         * cron.daily: add stats pr0n
611
612         * cron.hourly: invoke helena
613
614         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
615         * vars: add lockdir, add etch to copyoverrides
616         * Makefile: add -Ipostgresql/server to CXXFLAGS
617
618         * docs/: added README.quotes
619         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
620         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
621
622         * TODO: correct spelling of "conflicts"
623
624 2005-05-28  James Troup  <james@nocrew.org>
625
626         * helena (process_changes_files): use MTIME rather than CTIME (the
627         C's not for 'creation', stupid).
628         * lisa (sort_changes): likewise.
629
630         * jennifer (check_distributions): use has_key rather than an 'in'
631         test which doesn't work with python2.1.  [Probably by AJ]
632
633 2005-03-19  James Troup  <james@nocrew.org>
634
635         * rene (main): use Suite::<suite>::UdebComponents to determine
636         what components have udebs rather than assuming only 'main' does.
637
638 2005-03-18  James Troup  <james@nocrew.org>
639
640         * utils.py (rfc2047_encode): use codecs.lookup() rather than
641         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
642         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
643         <andrew@ubuntu.com>.
644
645 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
646
647         * helena: add -n/--new HTML output option and improved sorting
648         options.
649
650 2005-03-06  Ryan Murray  <rmurray@debian.org>
651
652         * shania(main): use Cnf::Dir::Reject instead of REJECT
653
654 2005-02-08  James Troup  <james@nocrew.org>
655
656         * rene (main): add partial NBS support by checking that binary
657         packages are built by their real parent and not some random
658         stranger.
659         (do_partial_nbs): likewise.
660
661 2005-01-18  James Troup  <james@nocrew.org>
662
663         * katie.py (Katie.build_summaries): avoid leaking file handle when
664         extracting package description.
665         (Katie.force_reject): remember and close each file descriptor we
666         use.
667         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
668         s/reason_file/reason_fd/ because it's a file descriptor.
669         (Katie.check_dsc_against_db): avoid leaking file handle whenever
670         invoking apt_pkg.md5sum().
671
672         * jennifer (check_deb_ar): new function: sanity check the ar
673         contents of a .deb.
674         (check_files): use it.
675         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
676         found.
677         (check_files): accept 'raw-installer' as an alias for 'byhand'.
678
679 2005-01-14  Anthony Towns  <ajt@debian.org>
680
681         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
682
683         * propup stuff (thanks to Andreas Barth)
684         * katie.conf: add stable MustBeOlderThan testing, add -security
685           propup
686         * jennifer: set distribution-version in .katie if propup may be needed
687         * katie.py: add propogation to cross_suite_version_check
688
689 2004-11-27  James Troup  <james@nocrew.org>
690
691         * nina: new script to split monolithic queue/done into date-based
692         hierarchy.
693
694         * rene (usage): document -s/--suite.
695         (add_nbs): use .setdefault().
696         (do_anais): likewise.
697         (do_nbs): don't set a string to "" and then += it.
698         (do_obsolete_source): new function - looks for obsolete source
699         packages (i.e source packages whose binary packages are ALL a)
700         claimed by someone else and b) newer when built from the other
701         source package).
702         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
703         and 'full' check modes.  Check for obsolete source packages.
704         linux-wlan-ng has been fixed - remove hideous bodge.
705
706         * jennifer (check_distributions): support 'reject' suite map type.
707
708         * utils.py (validate_changes_file_arg): s/file/filename/.
709         s/fatal/require_changes/.  If require_changes is -1, ignore errors
710         and return the .changes filename regardless.
711         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
712         (re_no_revision): don't escape '-', it's not a special character.
713         s/\*/+/ as there must be at least one non-dash character after the
714         dash in a revision.  Thanks to Christian Reis for noticing both of
715         these.
716
717         * ashley (main): pass require_changes=-1 to
718         utils.validate_changes_file_arg().
719
720         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
721         Team <debian-kernel@lists.debian.org>'.
722
723         * katie.py (Katie.in_override_p): fix .startswith() usage.
724
725         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
726         (Lauren::MoreInfoURL): update to 3.0r3.
727         (Suite::Stable::Version): likewise.
728         (Suite::Stable::Description): likewise.
729
730         * cron.daily: disable automatic task override generation.
731
732         * cindy (process): restrict "find all packages" queries by
733         component.  Respect Options["No-Action"].
734         (main): add -n/--no-action support.  Only run on unstable.  Rename
735         type to otype (pychecker).
736
737 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
738
739         * katie.conf (Billie::BasicTrees): add all architectures.
740         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
741         'everything'.
742
743         * cron.daily: Update a 'current' symlink when creating the
744         post-daily-cron-job database backup to aid mirroring to merkel.
745         Run billie.
746
747         * billie (BillieTarget.poolish_match): handle .udeb too.
748
749 2004-10-13  Ryan Murray  <rmurray@debian.org>
750
751         * amber (do_upload): Sort changes files in "katie" order so that
752           source always arrives before binary-only rebuilds
753         
754 2004-10-05  James Troup  <james@nocrew.org>
755
756         * jennifer (check_dsc): correct reject message on invalid
757         Maintainer field.
758
759 2004-09-20  James Troup  <james@nocrew.org>
760
761         * alicia: remove unused 'pwd' import.
762
763         * tea (check_override): underline suite name in output properly.
764
765         * rene (main): read a compressed Packages file.
766         * tea (validate_packages): likewise.
767
768         * katie.py (re_fdnic): add 'r' prefix.
769         (re_bin_only_nmu_of_mu): likewise.
770         (re_bin_only_nmu_of_nmu): likewise.
771
772         * madison (main): retrieve component information too and display
773         it if it's not 'main'.
774         * melanie (reverse_depends_check): likewise.
775
776         * utils.py (pp_dep): renamed...
777         (pp_deps): ... to this.
778         * jeri (check_dep): update calls to utils.pp_deps().
779         * melanie (reverse_depends_check): likewise.
780
781         * jennifer (check_changes): move initalization of email variables
782         from here...
783         (process_it): ...to here as we no longer always run
784         check_changes().  Don't bother to initialize
785         changes["architecture"].
786
787         * denise (list): renamed to...
788         (do_list): ...this to avoid name clash with builtin 'list'.
789         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
790         for dictionaries.
791         (main): Likewise for name clash avoidance and also
792         s/override_type/suffix/.  Adjust call to do_list().
793
794 2004-09-01  Ryan Murray  <rmurray@debian.org>
795
796         * tea (check_files): check the pool/ directory instead of dists/
797
798 2004-08-04  James Troup  <james@nocrew.org>
799
800         * jenna (cleanup): use .setdefault() for dictionaries.
801         (write_filelists): likewise.
802
803         (write_filelists): Use utils.split_args() not split() to split
804         command line arguments.
805         (stable_dislocation_p): likewise.
806
807         (write_filelists): Add support for mapping side of suite-based
808         "Arch: all mapping".
809         (do_da_do_da): ensure that if we're not doing all suites that we
810         process enough to be able correct map arch: all packages.
811
812         * utils.py (cant_open_exc): correct exception string,
813         s/read/open/, s/.$//.
814
815         * templates/amber.advisory: update to match reality a little
816         better.
817
818         * melanie (reverse_depends_check): read Packages.gz rather than
819         Packages.
820
821         * jennifer (check_files): check for unknown component before
822         checking for NEWness.
823
824         * katie.py (Katie.in_override_p): use .startswith in favour of a
825         slice.
826
827         * docs/melanie.1.sgml: document -R/--rdep-check.
828
829 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
830
831         * billie (main): Make the verbatim lists include all the README
832           elements.
833         * docs/README.names: Add billie in (correcting oversight)
834
835 2004-07-01  James Troup  <james@nocrew.org>
836
837         * emilie (main): handle woody's case-sensitive python-ldap,
838         s/keyfingerprint/keyFingerPrint/.
839
840 2004-06-25  James Troup  <james@nocrew.org>
841
842         * debian/control (Depends): add dpkg-dev since jennifer uses
843         dpkg-source.
844
845 2004-06-24  James Troup  <james@nocrew.org>
846
847         * melanie (main): s/file/temp_file/ and close file handle before
848         removing the temporary file.
849         (main): don't warn about needing a --carbon-copy if in no-action
850         mode.
851
852         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
853         (main): likewise.
854
855         * test/006/test.py (main): check bracketed email-only form.
856
857         * utils.py (fix_maintainer): if the Maintainer string is bracketed
858         email-only, strip the brackets so we don't end up with
859         <<james@nocrew.org>>.
860
861 2004-06-20  James Troup  <james@nocrew.org>
862
863         * jennifer (process_it): only run check_changes() if
864         check_signature() returns something.  (Likewise)
865
866         * utils.py (changes_compare): if there's no changes["version"] use
867         "0" rather than None.  (Avoids a crash on unsigned changes file.)
868
869 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
870
871         * jeri (pp_dep): moved from here to ...
872         * utils.py (pp_dep): here.
873
874         * melanie (main): add reverse dependency checking.
875
876 2004-06-17  James Troup  <james@nocrew.org>
877
878         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
879         * tea (check_dscs): likewise.
880
881         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
882         change from boolean to a variable with 3 possible values, 0 and 1
883         as before, -1 means don't require a signature.  Makes
884         parse_changes() useful for parsing arbitary RFC822-style files,
885         e.g. 'Release' files.
886         (check_signature): add support for detached signatures by passing
887         the files the signature is for as an optional third argument.
888         s/filename/sig_filename/g.  Add a fourth optional argument to
889         choose the keyring(s) to use.  Don't os.path.basename() the
890         sig_filename before checking it for taint.
891         (re_taint_free): allow '/'.
892
893 2004-06-11  James Troup  <james@nocrew.org>
894
895         * tea (check_files): make override.unreadable optional.
896         (validate_sources): close the Sources file handle.
897
898         * docs/README.first: clarify that 'alyson' and running
899         add_constraints.sql by hand is something you only want to do if
900         you're not running 'neve'.
901
902         * docs/README.config (Location::$LOCATION::Suites): document.
903
904         * db_access.py (do_query): also print out the result of the query.
905
906 2004-06-10  James Troup  <james@nocrew.org>
907
908         * katie.py (Katie.cross_suite_version_check): post-woody versions
909         of python-apt's apt_pkg.VersionCompare() function apparently
910         returns variable integers for less than or greater than results -
911         update our result checking to match.
912         * jenna (resolve_arch_all_vs_any): likewise.
913         * charisma (main): likewise.
914
915 2004-06-09  James Troup  <james@nocrew.org>
916
917         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
918         valid_dsc_p and don't run check_source() if check_dsc() failed.
919         (check_dsc): on fatal failures return 0 so check_source() isn't
920         run (since it makes fatal assumptions about the presence of
921         mandatory .dsc fields).  
922         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
923
924 2004-05-07  James Troup  <james@nocrew.org>
925
926         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
927         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
928
929         * katie.conf (Dir::Override): remove duplicate definition.
930
931         * neve (get_or_set_files_id): add an always-NULL last_used column
932         to output.
933
934 2004-04-27  James Troup  <james@nocrew.org>
935
936         * apt.conf-security (tree "dists/stable/updates"): add
937         ExtraOverride - noticed by Joey Hess (#246050).
938         (tree "dists/testing/updates"): likewise.
939
940 2004-04-20  James Troup  <james@nocrew.org>
941
942         * jennifer (check_files): check for existing .changes or .katie
943         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
944         directories.
945
946 2004-04-19  James Troup  <james@nocrew.org>
947
948         * jennifer (check_source): handle failure to remove the temporary
949          directory (used for source tree extraction) better, specifically:
950          if we fail with -EACCES, chmod -R u+rwx the temporary directory
951          and try again and if that works, REJECT the package.
952
953 2004-04-17  James Troup  <james@nocrew.org>
954
955         * docs/madison.1.sgml: document -b/--binary-type,
956         -g/--greaterorequal and -G/--greaterthan.
957
958         * madison (usage): -b/--binary-type only takes a single argument.
959         Document -g/--greaterorequal and -G/--greaterthan.
960         (main): add support for -g/--greaterorequal and -G/--greaterthan.
961
962 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
963
964         * billie: Cleaned up a load of comments, added /README.non-US to
965           the verbatim matches list.
966
967 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
968
969         * utils.py (size_type): Make it use real binary megabytes and
970           kilobytes, instead of the marketing terms used before.
971
972 2004-04-07  James Troup  <james@nocrew.org>
973
974         * katie.py (Katie.check_dsc_against_db): in the case we're
975         ignoring an identical-to-existing orig.tar.gz remember the path to
976         the existent version in pkg.orig_tar_gz.  Adjust query to grab
977         location.path too to be able to do so.
978
979 2004-04-03  James Troup  <james@nocrew.org>
980
981         * debian/control (Depends): add python2.1-email | python (>= 2.2)
982         needed for new utils.rfc2047_encode() function.
983
984         * utils.py (re_parse_maintainer): allow whitespace inside the
985         email address.
986         (Error): new exception base class.
987         (ParseMaintError): new exception class.
988         (force_to_utf8): new function.
989         (rfc2047_encode): likewise.
990         (fix_maintainer): rework.  use force_to_utf8() to force name and
991         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
992         return an rfc2047 value.  Validate the address to catch missing
993         email addresses and (some) broken ones.
994
995         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
996         by adopting foo2047 return value.
997         (Katie.dump_vars): add changedby2047 and maintainer2047 as
998         mandatory changes fields.  Promote changes and maintainer822 to
999         mandatory fields.
1000         (Katie.update_subst): default maintainer2047 rather than
1001         maintainer822.  User foo2047 rather than foo822 when setting
1002         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
1003
1004         * jennifer (check_changes): set default changes["maintainer2047"]
1005         and changes["changedby2047"] values rather than their 822
1006         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
1007         to new utils.fix_maintainer() - reject on exception and adopt
1008         foo2047 return value.
1009         (check_dsc): if a mandatory field is missing don't do any further
1010         checks and as a result reduce paranoia about dsc[var] existence.
1011         Validate the maintainer field by calling new
1012         utils.fix_maintainer().
1013
1014         * ashley (main): add changedby2047 and maintainer2047 to mandatory
1015         changes fields.  Promote maintainer822 to a mandatory changes
1016         field.  add "pool name" to files fields.
1017
1018         * test/006/test.py: new file - tests for new
1019         utils.fix_maintainer().
1020
1021 2004-04-01  James Troup  <james@nocrew.org>
1022
1023         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
1024
1025         * jennifer (get_changelog_versions): create a symlink mirror of
1026         the source files in the temporary directory.
1027         (check_source): if check_dsc_against_db() couldn't find the
1028         orig.tar.gz bail out.
1029
1030         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
1031         part of the upload store the path to it in pkg.orig_tar_gz and if
1032         it can't be found set pkg.orig_tar_gz to -1.
1033
1034         Explicitly return the second value as None in the (usual) case
1035         where we don't have to reprocess.  Remove obsolete diagnostic
1036         logs.
1037
1038         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
1039
1040         * utils.py (temp_filename): new helper function that wraps around
1041         tempfile.mktemp().
1042
1043         * katie.py (Katie.do_reject): use it and don't import tempfile.
1044         * lisa (prod_maintainer): likewise.
1045         (edit_note): likewise.
1046         (edit_new): likewise.
1047         * lauren (reject): likewise.
1048         * melanie (main): likewise.
1049         * neve (do_sources): likewise.
1050         * rene (main): likewise.
1051         * tea (validate_sources): likewise.
1052
1053 2004-03-31  James Troup  <james@nocrew.org>
1054
1055         * tea (validate_sources): remove unused 's' temporary variable.
1056
1057 2004-03-15  James Troup  <james@nocrew.org>
1058
1059         * jennifer (check_dsc): check changes["architecture"] for
1060         source before we do anything else.
1061
1062 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
1063
1064         * billie: Added
1065         * katie.conf (Billie): Added sample Billie stanza to katie.conf
1066
1067 2004-03-12  James Troup  <james@nocrew.org>
1068
1069         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
1070
1071         * katie.conf (Dir::Queue::BTSVersionTrack): define.
1072
1073         * katie.py (Katie.accept): add support for DebBugs Version
1074         Tracking by writing out .versions (generated in jennifer's
1075         get_changelog_versions()) and .debinfo (mapping of binary ->
1076         source) files.
1077
1078         * ashley (main): add dsc["bts changelog"].
1079
1080         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
1081
1082         * jennifer (check_diff): obsoleted by check_source(), removed.
1083         (check_source): new function: create a temporary directory and
1084         move into it and call get_changelog_versions().
1085         (get_changelog_versions): new function: extract the source package
1086         and optionally parse debian/changelog to obtain the version
1087         history for the BTS.
1088         (process_it): call check_source() rather than check_diff().
1089
1090 2004-03-08  James Troup  <james@nocrew.org>
1091
1092         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
1093         listbar" rather than "if listbar.count(varfoo)"' change on
1094         2004-02-24.
1095
1096 2004-03-05  James Troup  <james@nocrew.org>
1097
1098         * alicia (main): don't warn about not closing bugs - we don't
1099         manage overrides through the BTS.
1100
1101 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
1102
1103         * docs/README.config: lots of updates and corrections.
1104         * docs/README.first: likewise.
1105
1106         * docs/README.config: drop unused Dir::Queue::Root.
1107         * katie.conf-non-US: likewise.
1108         * katie.conf: likewise.
1109         * katie.conf-security: likewise.
1110
1111 2004-02-27  James Troup  <james@nocrew.org>
1112
1113         * rose (process_tree): use 'if var in [ list ]' rather than long
1114         'if var == foo or var == bar or var == baz'.  Suggested by Martin
1115         Michlmayr.
1116
1117         * jennifer (check_files): reduce 'if var != None' to 'if var' as
1118         suggested by Martin Michlmayr.
1119         * catherine (poolize): likewise.
1120         * charisma (main): likewise.
1121         * halle (check_changes): likewise.
1122         * heidi (main): likewise.
1123         (process_file): likewise.
1124         * kelly (install): likewise.
1125         (stable_install): likewise.
1126         * utils.py (fix_maintainer): likewise.
1127
1128         * apt.conf: add support for debian-installer in testing-proposed-updates.
1129         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
1130         add - set to main.
1131
1132         * mkmaintainers: add "-T15" option to wget of non-US packages file
1133         so that we don't hang cron.daily if non-US is down.
1134
1135         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
1136
1137         * templates/jennifer.bug-close: add Source and Source-Version
1138         pseudo-headers that may be used for BTS Version Tracking someday
1139         [ajt@].
1140
1141         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
1142         (main): likewise.
1143
1144         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
1145
1146 2004-02-25  James Troup  <james@nocrew.org>
1147
1148         * katie.conf (SuiteMappings): don't map testing-security to
1149         proposed-updates.
1150
1151 2004-02-24  James Troup  <james@nocrew.org>
1152
1153         * katie.py (Katie.__init__): remove unused 'values' field.
1154
1155         * utils.py (extract_component_from_section): use 's.find(c) != -1'
1156         rather than 's.count(c) > 0'.
1157
1158         * katie.py (Katie.source_exists): use "if varfoo in listbar"
1159         rather than "if listbar.count(varfoo)".
1160         * halle (check_joey): likewise.
1161         * jeri (check_joey): likewise.
1162         * lisa (edit_index): likewise.
1163         * jenna (stable_dislocation_p): likewise.
1164
1165         * jennifer (main): remove unused global 'nmu'.
1166
1167 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
1168
1169         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
1170           to be ftpmaster@ftp-master.debian.org to bring it into line with how
1171           the dak tools close bugs.
1172
1173 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1174
1175         * katie.conf (Alicia): Added an Alicia section with email address
1176         * templates/alicia.bug-close: Added
1177         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
1178         * alicia (main): Added a -d/--done argument
1179
1180 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
1181
1182         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
1183
1184 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1185
1186         * lisa (prod_maintainer): Added function to prod the maintainer without
1187           accepting or rejecting the package
1188         * templates/lisa.prod: Added this template for the prodding mail
1189
1190         * .cvsignore: Added neve-files which turns up in new installations
1191
1192 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
1193
1194         * alicia (usage): Fixed usage message to offer section and priority
1195           as seperately optional arguments.
1196         * alicia (main): Added a % (arg) interpolation needed when only
1197           one of section or priority is provided and it cannot be found.
1198
1199 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
1200
1201         * alicia: Added
1202         * docs/alicia.1.sgml: Added
1203         * docs/Makefile: Added alicia to the list of manpages to build
1204         * docs/README.names: Noted what alicia does
1205         * docs/README.first: Noted where alicia is useful
1206
1207 2004-01-21  James Troup  <james@nocrew.org>
1208
1209         * madison (main): add -b/--binary-type.
1210         (usage): likewise.
1211
1212         * denise (main): generate debian-installer overrides for testing
1213         too.
1214         * apt.conf: add support for debian-installer in testing.
1215         * katie.conf (Suite::Testing::UdebComponents): set to main.
1216
1217         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
1218         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
1219         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
1220
1221         * utils.py (parse_changes): don't process data not inside the
1222         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
1223         pointing this out.
1224         * test/005/test.py (main): new test to test for above.
1225
1226 2004-01-04  James Troup  <james@nocrew.org>
1227
1228         * jenna (write_filelists): correct typo, s/Components/Component/
1229         for Options.
1230
1231 2004-01-04  Ryan Murray  <rmurray@debian.org>
1232
1233         * cron.buildd: move update of overrides and Packages file...
1234         * cron.unchecked: to here.
1235         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
1236         * katie.conf-security: likewise
1237
1238 2003-11-20  James Troup  <james@nocrew.org>
1239
1240         * jenna (main): don't use utils.try_with_debug(), it produces way
1241         too much output.
1242
1243         * halle (check_changes): don't error out if a .changes refers to a
1244         non-existent package, just warn and skip the file.
1245
1246         * docs/README.stable-point-release: mention halle and .changes
1247         obsoleted by removal through melanie.  Update for 3.0r2.
1248
1249         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
1250         (Suite::Stable::Description): update for 3.0r2.
1251         (Lauren::MoreInfoURL): likewise.
1252         * katie.conf-non-US (Suite::Stable::Version): likewise.
1253         (Suite::Stable::Description): likewise.
1254         (Lauren::MoreInfoURL): likewise.
1255
1256         * apt.conf.stable (Default): don't define MaxContentsChange.
1257         * apt.conf.stable-non-US (Default): likewise.
1258
1259         * lauren (reject): hack to work around partial replacement of an
1260         upload, i.e. one or more binaries superseded by another source
1261         package.
1262
1263 2003-11-17  James Troup  <james@nocrew.org>
1264
1265         * pseudo-packages.maintainers: point installation-reports at
1266         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
1267         request.
1268
1269         * utils.py (parse_changes): calculate the number of lines once
1270         with len() rather than max().
1271
1272         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
1273         files, since check_dsc_against_db() deletes the .orig.tar.gz
1274         entry.
1275
1276 2003-11-13  Ryan Murray  <rmurray@debian.org>
1277
1278         * apt.conf: specify a src override file for debian-installer
1279
1280 2003-11-10  James Troup  <james@nocrew.org>
1281
1282         * fernanda.py (strip_pgp_signature): new function - strips PGP
1283         signature from a file and returns the modified contents of the
1284         file in a string.
1285         (display_changes): use it.
1286         (read_dsc): likewise.
1287
1288 2003-11-09  Ryan Murray  <rmurray@debian.org>
1289
1290         * cron.buildd: export accepted_autobuild table for unstable, and use
1291         it to generate the incoming Packages/Sources rather than having apt
1292         walk the directory.
1293         * apt.conf.buildd: use exported table from cron.buildd to generate
1294         Packages/Sources
1295
1296 2003-11-07  James Troup  <james@nocrew.org>
1297
1298         * kelly: import errno.
1299
1300         * katie.py (Katie.build_summaries): sort override disparities.
1301
1302         * kelly (install): set dsc_component based on the .dsc's component
1303         not a random binaries.
1304
1305 2003-10-29  James Troup  <james@nocrew.org>
1306
1307         * katie.py (Katie.build_summaries): don't assume changes["source"]
1308         exists since it might not.
1309
1310 2003-10-20  James Troup  <james@nocrew.org>
1311
1312         * pseudo-packages.maintainers: update security.d.o to use
1313         team@s.d.o at joy@'s request.
1314
1315 2003-10-17  James Troup  <james@nocrew.org>
1316
1317         * jennifer (check_dsc): use .startswith rather than .find() == 0.
1318
1319 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
1320
1321         * tea (chk_bd_process_dir): use .endswith rather than slice.
1322
1323 2003-10-14  James Troup  <james@nocrew.org>
1324
1325         * tea (check_build_depends): new function.
1326         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
1327         in the archive.
1328         (main): update for new function.
1329         (usage): likewise.
1330
1331         * katie.py (Katie.do_reject): sanitize variable names,
1332         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
1333         os.close() to outside if clause.
1334
1335         * jennifer (check_dsc): check build-depends and
1336         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
1337         Fold the ARRAY check into the same code block and tidy up it's
1338         rejection message.
1339         (check_changes): ensure that the Files field is non-empty.
1340         Suggested by Santiago Vila <sanvila@unex.es>
1341         (check_changes): normalize reject messages.
1342         (check_dsc): instead of doing most of the checks inside a for loop
1343         and an if, find the dsc_filename in a short loop over files first
1344         and then do all the checks.  Add check for more than one .dsc in a
1345         .changes which we can't handle.  Normalize reject messages.
1346
1347 2003-10-13  James Troup  <james@nocrew.org>
1348
1349         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
1350         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
1351
1352         * jennifer (check_files): Set 'has_binaries' and 'has_source'
1353         variables while iterating over 'files'.  Don't regenerate it when
1354         checking for source if source is mentioned.
1355
1356         Reject source only uploads if the config variable
1357         Dinstall::Reject::NoSourceOnly is set.
1358
1359 2003-10-03  James Troup  <james@nocrew.org>
1360
1361         * rene (main): add nasty hardcoded reference to debian-installer
1362         so we detect NBS .udebs.
1363
1364 2003-09-29  James Troup  <james@nocrew.org>
1365
1366         * apt.conf (old-proposed-updates): remove.
1367         * apt.conf-non-US (old-proposed-updates): likewise.
1368
1369 2003-09-24  James Troup  <james@nocrew.org>
1370
1371         * tea (check_files_not_symlinks): new function, ensure files
1372         mentioned in the database aren't symlinks.  Includes code to
1373         update any files that are like this to their real filenames +
1374         location; commented out by though.
1375         (usage): update for new function.
1376         (main): likewise.
1377
1378 2003-09-24  Anthony Towns  <ajt@debian.org>
1379
1380         * vars: external-overrides variable added
1381         * cron.daily: Update testing/unstable Task: overrides from joeyh
1382         managed external source.
1383
1384 2003-09-22  James Troup  <james@nocrew.org>
1385
1386         * kelly (install): if we can't move the .changes into queue/done,
1387         fail don't warn and carry on.  The old behaviour pre-dates NI and
1388         doesn't make much sense now since jennifer checks both
1389         queue/accepted and queue/done for any .changes files it's
1390         processing.
1391
1392         * utils.py (move): don't throw exceptions on existing files or
1393         can't overwrite, instead just fubar out.
1394
1395         * jennifer (check_dsc): also check Build-Depends-Indep for
1396         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
1397
1398 2003-09-18  James Troup  <james@nocrew.org>
1399
1400         * katie.py (Katie.close_bugs): only log the bugs we've closed
1401         once.
1402
1403         * kelly (main): log as 'kelly', not 'katie'.
1404
1405 2003-09-16  James Troup  <james@nocrew.org>
1406
1407         * katie.py (Katie.check_binary_against_db): likewise noramlize.
1408
1409         * jennifer (check_changes): normalize reject message for "changes
1410         file already exists" to be %s: <foo>.
1411         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
1412         produced by broken dpkg-source in 1.10.11.  Tone down and
1413         normalize rejection message for incompatible 'Format' version
1414         numbers.
1415         (check_diff): likewise tone down and normalize.
1416
1417 2003-09-07  James Troup  <james@nocrew.org>
1418
1419         * utils.py (parse_changes): if dsc_whitespace_rules is false,
1420         don't bomb out on bogus empty lines.
1421         (build_file_list): check for changes["files"] earlier.  use Dict
1422         to create files[name] dictionary.
1423         (send_mail): don't bother validating arguments.
1424         (check_signature): minor improvements to some of the rejection
1425         messages including listing the key id of the key that wasn't found
1426         in the keyring.
1427         (wrap): new function.
1428
1429         * tea: add new check 'validate-indices' that ensures all files
1430         mentioned in indices (Packages, Sources) files do in fact exist.
1431
1432         * catherine (poolize): use a local re_isadeb which handles legacy
1433         (i.e. no architecture) style .deb filenames.
1434
1435         * rosamund: new script.
1436
1437         * rhona (check_binaries): when checking for binary packages not in
1438         a suite, don't bother selecting files that already have a
1439         last_used date.
1440         (check_sources): likewise.
1441
1442         * rhona: change all SQL EXISTS sub-query clauses to use the
1443         postgres suggested convention of "SELECT 1 FROM".
1444         * andrea (main): likewise.
1445         * tea (check_override): likewise.
1446         * catherine (main): likewise.
1447
1448         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
1449         entries and in other suites MustBeNewerThan's.
1450         (SuiteMappings): likewise
1451         * katie.conf-non-US: likewise.
1452         * katie.conf-security: likewise.
1453
1454         * apt.conf-security: remove oldstable.
1455         * apt.conf.stable: likewise.
1456         * apt.conf.stable-non-US: likewise.
1457         * cron.buildd-security: likewise.
1458         * cron.daily-security: likewise.
1459         * vars-security (suites): likewise.
1460         * wanna-build/trigger.daily: likewise.
1461
1462         * claire.py (clean_symlink): move...
1463         * utils.py (clean_symlink): here.
1464
1465         * claire.py (find_dislocated_stable): update accordingly.
1466
1467 2003-08-16  Anthony Towns  <ajt@debian.org>
1468
1469         * katie.py (source_exists): expand the list of distributions
1470         the source may exist in to include any suite that's mapped to
1471         the destination suite (even transitively (a->b->c)). This should
1472         unbreak binary uploads to *-proposed-updates.
1473
1474 2003-08-09  Randall Donald  <rdonald@debian.org>
1475
1476         * lisa (recheck): change changes["distribution"].keys() to
1477         Katie.pkg.changes...
1478
1479 2003-08-08  Randall Donald  <rdonald@debian.org>
1480
1481         * katie.py: only tag bugs as fixed-in-experimental for
1482         experimental uploads
1483
1484 2003-07-26  Anthony Towns  <ajt@debian.org>
1485
1486         * katie.py (source_exists): add an extra parameter to limit the
1487         distribution(s) the source must exist in.
1488         * kelly, lisa, jennifer: update to use the new source_exists
1489
1490 2003-07-15  Anthony Towns  <ajt@debian.org>
1491
1492         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
1493         checksums for debian-installer stuff even when it's just a symlink to
1494         another suite
1495
1496         * apt.conf: add the FakeDI line
1497
1498 2003-06-09  James Troup  <james@nocrew.org>
1499
1500         * kelly (check): make sure the 'file' we're looking for in 'files'
1501         hasn't been deleted by katie.check_dsc_against_db().
1502
1503 2003-05-07  James Troup  <james@nocrew.org>
1504
1505         * helena (time_pp): fix s/years/year/ typo.
1506
1507 2003-04-29  James Troup  <james@nocrew.org>
1508
1509         * madison (usage): document -c/--component.
1510
1511         * madison (usage): Fix s/seperated/separated/.
1512         * melanie (usage): likewise.
1513         * jenna (usage): likewise.
1514
1515 2003-04-24  James Troup  <james@nocrew.org>
1516
1517         * cron.daily-non-US: if there's nothing for kelly to install, say
1518         so.
1519
1520         * jennifer (check_timestamps): print sys.exc_value as well as
1521         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
1522         failed' with 'deb contents' to make it clearer what timestamp(s)
1523         are being checked.
1524
1525 2003-04-15  James Troup  <james@nocrew.org>
1526
1527         * cron.daily-non-US: only run kelly if there are some .changes
1528         files in accepted.
1529
1530         * rene: add -m/--mode argument which can be either daily (default)
1531         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
1532         Various changes to make this possible including a poor attempt at
1533         splitting main() up a little.  De-hardcode suite numbers from SQL
1534         queries and return quietly from do_nviu() if experimental doesn't
1535         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
1536         is.
1537
1538         * debian/control (Depends): remove python-zlib as it's obsolete.
1539
1540         * charisma (main): don't slice the \n off strings when we're
1541         strip()-ing it anyway.
1542         * heidi (set_suite): likewise.
1543         (process_file): likewise.
1544         * natalie (process_file): likewise.
1545
1546 2003-04-08  James Troup  <james@nocrew.org>
1547
1548         * katie.py (Katie.check_dsc_against_db): improve the speed of two
1549         slow queries by using one LIKE '%foo%' and then matching against
1550         '%s' or '/%s$' in python.  Also only join location when we need it
1551         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
1552         query, so 6s for each sourceful package.
1553
1554         * cron.daily: invoke rene and send the report to ftpmaster.
1555         * cron.daily-non-US: likewise.
1556
1557 2003-03-14  James Troup  <james@nocrew.org>
1558
1559         * utils.py (send_mail): default filename to blank.
1560         * amber (make_advisory): adapt.
1561         * jennifer (acknowledge_new): likewise.
1562         * katie.py (Katie.close_bugs): likewise.
1563         (Katie.announce): likewise.
1564         (Katie.accept): likewise.
1565         (Katie.check_override): likewise.
1566         (Katie.do_reject): likewise.
1567         * kelly (do_reject): likewise.
1568         (stable_install): likewise.
1569         * lisa (do_bxa_notification): likewise.
1570         * lauren (reject): likewise.
1571         * melanie (main): likewise.
1572
1573         * rene (add_nbs): check any NBS packages against unstable to see
1574         if they haven't been removed already.
1575
1576         * templates/katie.rejected: remove paragraph about rejected files
1577         since they're o-rwx due to c-i-m and the uploader can't do
1578         anything about them and shania will take care of them anyway.
1579
1580         * madison (usage): update usage example to use comma seperation.
1581         * melanie (usage): likewise.
1582
1583         * utils.py (split_args): new function; splits command line
1584         arguments either by space or comma (whichever is used).  Also has
1585         optional-but-default DWIM spurious space detection to avoid
1586         'command -a i386, m68k' problems.
1587         (parse_args): use it.
1588         * melanie (main): likewise.
1589
1590         * melanie (main): force the admin to tell someone if we're not
1591         doing a rene-led removal (or closing a bug, which counts as
1592         telling someone).
1593
1594 2003-03-05  James Troup  <james@nocrew.org>
1595
1596         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
1597         and python sections.
1598         * katie.conf-security (Section): likewise.
1599
1600         * add_constraints.sql: add uid and uid_id_seq to grants.
1601
1602         * lisa (determine_new): also warn about adding overrides to
1603         oldstable.
1604
1605         * madison (main): make the -S/--source-and-binary query obey
1606         -s/--suite restrictions.
1607
1608 2003-03-03  James Troup  <james@nocrew.org>
1609
1610         * madison (main): if the Archive_Maintenance_In_Progress lockfile
1611         exists, warn the user that our output might seem strange.  (People
1612         get confused by multiple versions in a suite which happens
1613         post-kelly but pre-jenna.)
1614
1615 2003-02-21  James Troup  <james@nocrew.org>
1616
1617         * kelly (main): we don't need to worry about StableRejector.
1618
1619         * melanie (main): sort versions with apt_pkg.VersionCompare()
1620         prior to output.
1621
1622         * lauren: new script to manually reject packages from
1623         proposed-updates.  Updated code from pre-NI kelly (nee katie).
1624
1625 2003-02-20  James Troup  <james@nocrew.org>
1626
1627         * kelly (init): remove unused -m/--manual-reject argument.
1628
1629         * katie.py (Katie.force_reject): renamed from force_move to make
1630         it more explicit what this function does.
1631         (Katie.do_reject): update to match.
1632
1633         * utils.py (prefix_multi_line_string): add an optional argument
1634         include_blank_lines which defaults to 0.  If non-zero, blank lines
1635         will be includes in the output.
1636
1637         * katie.py (Katie.do_reject): don't add leading space to each line
1638         of the reject message.  Include blank lines when showing the
1639         message to the user.
1640
1641 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
1642
1643         * utils.py (fix_maintainer): replace pointless re.sub() with
1644         simple string format.
1645
1646 2003-02-11  James Troup  <james@nocrew.org>
1647
1648         * lisa (edit_overrides): only strip-to-one-char and upper-case
1649         non-numeric answers.  Fixes editing of items with indices >= 10;
1650         noticed by Randall.
1651         (edit_overrides): correct order of arguments to "not a valid
1652         index" error message.
1653
1654         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
1655         remove_duplicate_versions(); thanks to aj for the initial
1656         diagnosis.
1657         (remove_duplicate_versions): correct how we return
1658         dominant_versions.
1659         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
1660         a tuple rather than just a tuple.
1661
1662 2003-02-10  James Troup  <james@nocrew.org>
1663
1664         * emilie: new script - sync fingerprint and uid tables with a
1665         debian.org LDAP DB.
1666
1667         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
1668         in 'fingerprint'.
1669
1670         * db_access.py (get_or_set_uid_id): new function.
1671
1672         * jennifer (main): update locking to a) not used FCNTL (deprecated
1673         in python >= 2.2) and b) acknowledge upstream's broken
1674         implementation of lockf (see Debian bug #74777), c) try to acquire
1675         the lock non-blocking.
1676         * kelly (main): likewise.
1677
1678         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
1679
1680         * madison (main): only append the package to new_packages if it's
1681         not already in there; fixes -S/--source-and-binary for cases where
1682         the source builds a binary package of the same name.
1683
1684 2003-02-10  Anthony Towns  <ajt@debian.org>
1685
1686         * madison (main): use explicit JOIN syntax for
1687         -S/--source-and-binary queries to reduce the query's runtime from
1688         >10 seconds to negligible.
1689
1690 2003-02-08  James Troup  <james@nocrew.org>
1691
1692         * rene (main): in the NVIU output, append items to lists, not
1693         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
1694         should be removed.
1695
1696 2003-02-07  James Troup  <james@nocrew.org>
1697
1698         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
1699         Sources [aj].
1700
1701         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
1702         O. Benham/Adam Heath/.
1703
1704         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
1705         (Suite::Stable::Description): update for 3.0r1a.
1706         (Dinstall::SigningKeyIds): update for 2003 key [aj].
1707
1708         * utils.py (gpgv_get_status_output): rename from
1709         get_status_output().
1710
1711         * neve (check_signature): use gpgv_get_status_output and Dict from
1712         utils().  Add missing newline to error message about duplicate tokens.
1713
1714         * saffron (per_arch_space_use): also print space used by source.
1715         (output_format): correct string.join() invocation.
1716
1717         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
1718
1719 2003-02-04  James Troup  <james@nocrew.org>
1720
1721         * cron.buildd: correct generation of Packages/Sources and grep out
1722         non-US/non-free as well as non-free.
1723
1724 2003-02-03  Ryan Murray  <rmurray@debian.org>
1725
1726         * cron.buildd: generate quinn-diff output with full Packages/Sources
1727           files to get out-of-date vs. uncompiled right.
1728         * apt.conf.buildd: no longer generate uncompressed files, as they
1729           are generated in cron.buildd instead
1730         * add -i option to quinn-diff to ignore binary-all packages
1731         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
1732           aren't in the packages file, the arch that uploaded them will build
1733           them anyways...
1734
1735 2003-01-30  James Troup  <james@nocrew.org>
1736
1737         * rene (main): only print suggested melanie command when there's
1738         some NBS to remove.
1739
1740 2003-01-30  Ryan Murray  <rmurray@debian.org>
1741
1742         * cron.buildd: fix incorrectly inverted lockfile check
1743
1744 2003-01-29  Ryan Murray  <rmurray@debian.org>
1745
1746         * cron.buildd: generate override.sid.all3.src
1747         * apt.conf.buildd: use generated override.sid.all3.src
1748
1749 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
1750
1751         * utils.py (get_status_output): moved from jennifer.
1752         (Dict): likewise.
1753         (check_signature): likewise.
1754
1755         * jennifer (get_status_output): moved to utils.py.
1756         (Dict): likewise.
1757         (check_signature): likewise.
1758
1759         * utils.py (check_signature): add an argument to specifiy which
1760         function to call when an error was found.
1761         (check_signature): document this function better.
1762
1763         * jennifer (check_files): pass the reject function as an argument
1764         to utils.check_signature.
1765         (process_it): likewise.
1766
1767 2003-01-20  James Troup  <james@nocrew.org>
1768
1769         * rene (main): lots of changes to improve the output and make it
1770         more useful.
1771
1772         * katie.py (Katie.check_override): make the override messages
1773         clearer (hopefully).
1774
1775 2002-12-26  James Troup  <james@nocrew.org>
1776
1777         * ziyi (usage): document the ability to pass suite(s) as
1778         argument(s).
1779         (main): read apt.conf after checking for -h/--help.
1780
1781         * tea (main): take the check to run as an argument.
1782
1783         * saffron.R: R script to graph daily install runs.
1784
1785         * saffron: new script; various stats functions.
1786
1787         * rhona (main): connect to the database after checking for -h/--help.
1788
1789         * neve (do_da_do_da): if no -a/--action option is given, bail out.
1790
1791         * melanie (main): sort versions with utils.arch_compare_sw().
1792
1793         * madison (usage): alphabetize order of options.
1794         * melanie (usage): likewise.
1795
1796         * kelly (usage): fix usage short description (we aren't dinstall).
1797
1798         * julia (usage): fix usage description and alphabetize order of
1799         options.
1800
1801         * jeri (usage): fix usage short description.
1802
1803         * jennifer (main): move --help and --version checks from here...
1804         (init): to here so that they work with an empty katie.conf.
1805         * kelly: likewise.
1806
1807         * alyson (usage): new function.
1808         (main): use it.
1809         * andrea: likewise.
1810         * ashley: likewise.
1811         * cindy: likewise.
1812         * denise: likewise.
1813         * helena: likewise.
1814         * neve: likewise.
1815         * rene: likewise.
1816         * rose: likewise.
1817         * tea: likewise.
1818
1819         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
1820         entry that caused tasks to be omitted from 3.0r1.
1821
1822 2002-12-10  James Troup  <james@nocrew.org>
1823
1824         * jennifer (check_files): sanity check the Depends field to ensure
1825         it's non-empty if present since apt chokes on an empty one.
1826         Thanks to Ryan Murray for the idea.
1827
1828 2002-12-08  James Troup  <james@nocrew.org>
1829
1830         * katie.conf-security (Helena::Directories): new; include accepted
1831         in addition to byhand and new.
1832
1833         * helena (process_changes_files): use utils.arch_compare_sw().
1834         Justify things based on the longest [package, version,
1835         architecture].  Reduce '[note]' to '[N]' to save space, and remove
1836         the commas in architecture and version lists for the same reason.
1837         (main): make directories we process configurable through
1838         Helena::Directories in the config file; if that doesn't exist
1839         default to the old hardcoded values (byhand & new).
1840
1841         * utils.py (arch_compare_sw): moved here from madison.
1842         * madison (main): adjust to compensate.
1843
1844 2002-12-06  James Troup  <james@nocrew.org>
1845
1846         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
1847         right filename.
1848
1849 2002-12-05  James Troup  <james@nocrew.org>
1850
1851         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
1852
1853 2002-11-28  Randall Donald  <rdonald@debian.org>
1854
1855         * fernanda.py (read_control): fix typo of 'Architecture'.
1856
1857 2002-11-26  James Troup  <james@nocrew.org>
1858
1859         * lisa (check_pkg): call less with '-R' so we see the colour from
1860         Randall's fernanda changes.
1861
1862         * neve (process_sources): if Directory points to a legacy location
1863         but the .dsc isn't there; assume it's broken and look in the pool.
1864         (update_section): new, borroed from alyson.
1865         (do_da_do_da): use it.
1866         (process_packages): add suite_it to the cache key used for
1867         arch_all_cache since otherwise we only add a package to the first
1868         suite it's in and ignore any subsequent ones.
1869
1870         * katie.conf-non-US (Location): fixed to reflect reality (all
1871         suites, except old-proposed-updates (which is legacy-mixed)) are
1872         pool.
1873
1874         * utils.py (try_with_debug): wrapper for print_exc().
1875         * jenna (main): use it.
1876         * neve (main): likewise.
1877
1878 2002-11-25  Randall Donald  <rdonald@debian.org>
1879
1880         * fernanda.py (main): added -R to less command line for raw control
1881         character support to print colours
1882         (check_deb): Instead of running dpkg -I on deb file, call
1883         output_deb_info, the new colourized control reporter.
1884         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
1885         of printing out each .dsc line.
1886         (output_deb_info): new function. Outputs each key/value pair from
1887         read_control except in special cases where we highlight section,
1888         maintainer, architecture, depends and recommends.
1889         (create_depends_string): new function. Takes Depends tree and looks
1890         up it's compontent via projectb db, colourizes and constructs a
1891         depends string in original order.
1892         (read_dsc): new function. reads and parses .dsc info via
1893         utils.parse_changes. Build-Depends and Build-Depends-Indep are
1894         colourized.
1895         (read_control): new function. reads and parses control info via
1896         apt_pkg. Depends and Recommends are split in to list structures,
1897         Section and Architecture are colourized. Maintainer is colourized
1898         if it has a localhost.localdomain address.
1899         (split_depends): new function. Creates a list of lists of
1900         dictionaries of depends (package,version relation). Top list is
1901         colected from comma delimited items. Sub lists are | delimited.
1902         (get_comma_list): new function. splits string input among commas
1903         (get_or_list): new function. splits string input among | delimiters
1904         (get_depends_parts): new function. Creates dictionary of package name
1905         and version relation from dependancy string.
1906         Colours for section and depends are per component. Unfound depends
1907         are in bold. Lookups using version info is not supported yet.
1908
1909 2002-11-22  James Troup  <james@nocrew.org>
1910
1911         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
1912         'udmsearch'.
1913
1914         * amber (make_advisory): string.atol() is deprecated and hasn't
1915         been ported to string methods.  Use long() instead.
1916
1917         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
1918         creating the database since we'll fail badly if it's created with
1919         e.g. UNICODE encoding.
1920
1921         * rose (main): AptCnf is a global.
1922
1923         * neve (get_location_path): new function determines the location
1924         from the the first (left-most) directory of a Filename/Directory.
1925         (process_sources): don't need 'location' anymore.  Use
1926         utils.warn().  Use the Directory: field for each package to find
1927         the .dsc.  Use get_location_path() to determine the location for
1928         each .dsc.
1929         (process_packages): do't need 'location' anymore.  Use
1930         utils.warn().  Use get_location_path().
1931         (do_sources): don't need 'location', drop 'prefix' in favour of
1932         being told the full path to the Sources file, like
1933         process_packages().
1934         (do_da_do_da): main() renamed, so that main can call us in a
1935         try/except.  Adapt for the changes in do_sources() and
1936         process_packages() above.  Assume Sources and Packages file are in
1937         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
1938
1939         * katie.conf-security (Location): fixed to reflect reality (all
1940         suites are pool, not legacy).
1941
1942         * utils.py (print_exc): more useful (i.e. much more verbose)
1943         traceback; a recipe from the Python cookbook.
1944         * jenna (main): use it.
1945         * neve (main): likewise.
1946
1947 2002-11-19  James Troup  <james@nocrew.org>
1948
1949         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
1950         handling which was FUBAR for multi-suite uploads.  Now we just
1951         make a dictionary of destinations to copy to and iterate over
1952         those.
1953
1954         * fernanda.py (check_deb): run linda as well as lintian.
1955
1956 2002-10-21  James Troup  <james@nocrew.org>
1957
1958         * melanie (main): change X-Melanie to X-Katie and prefix it with
1959         'melanie '.
1960
1961         * lisa (main): prefix X-Katie with 'lisa '.
1962
1963         * jennifer (clean_holding): fix typo in string method changes;
1964         s/file.find(file/file.find(/.
1965
1966         * cron.daily: invoke helena and send the report to ftpmaster.
1967         * cron.daily-non-US: likewise.
1968
1969 2002-10-16  James Troup  <james@nocrew.org>
1970
1971         * kelly (check): call reject() with a blank prefix when parsing
1972         the return of check_dsc_against_db() since it does its own
1973         prefix-ing.
1974
1975         * rose: new script; only handles directory creation initally.
1976
1977         * katie.conf (Dinstall::NewAckList): obsolete, removed.
1978         * katie.conf-non-US (Dinstall::NewAckList): likewise.
1979
1980 2002-10-06  James Troup  <james@nocrew.org>
1981
1982         * rene (main): remove bogus argument handling.
1983
1984         * kelly: katie, renamed.
1985         * cron.daily: adapt for katie being renamed to kelly.
1986         * cron.daily-non-US: likewise.
1987         * amber (main): likewise.
1988
1989         * Changes for python 2.1.
1990
1991         * kelly: time.strftime no longer requires a second argument of
1992         "time.localtime(time.time())".
1993         * logging.py: likewise.
1994         * rhona: likewise.
1995         * shania (init): likewise.
1996
1997         * amber: use augmented assignment.
1998         * catherine (poolize): likewise.
1999         * claire.py (fix_component_section): likewise.
2000         * halle (check_changes): likewise.
2001         * helena: likewise.
2002         * jenna: likewise.
2003         * jennifer: likewise.
2004         * jeri: likewise.
2005         * katie.py: likewise.
2006         * kelly: likewise.
2007         * lisa: likewise.
2008         * madison (main): likewise.
2009         * melanie: likewise.
2010         * natalie: likewise.
2011         * neve: likewise.
2012         * rhona: likewise.
2013         * tea: likewise.
2014         * utils.py: likewise.
2015         * ziyi: likewise.
2016
2017         * amber: use .endswith.
2018         * fernanda.py: likewise.
2019         * halle (main): likewise.
2020         * jennifer: likewise.
2021         * jeri: likewise.
2022         * katie.py: likewise.
2023         * kelly: likewise.
2024         * lisa: likewise.
2025         * neve: likewise.
2026         * shania (main): likewise.
2027         * utils.py: likewise.
2028
2029         * alyson: use string methods.
2030         * amber: likewise.
2031         * andrea: likewise.
2032         * ashley: likewise.
2033         * catherine: likewise.
2034         * charisma: likewise.
2035         * claire.py: likewise.
2036         * db_access.py: likewise.
2037         * denise: likewise.
2038         * halle: likewise.
2039         * heidi: likewise.
2040         * helena: likewise.
2041         * jenna: likewise.
2042         * jennifer: likewise.
2043         * jeri: likewise.
2044         * julia: likewise.
2045         * katie.py: likewise.
2046         * kelly: likewise.
2047         * lisa: likewise.
2048         * logging.py: likewise.
2049         * madison: likewise.
2050         * melanie: likewise.
2051         * natalie: likewise.
2052         * neve: likewise.
2053         * rene: likewise.
2054         * tea: likewise.
2055         * utils.py: likewise.
2056         * ziyi: likewise.
2057
2058 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
2059
2060         * utils.py (parse_changes): use <string>.startswith() rather than
2061         string.find().
2062
2063 2002-08-27  Anthony Towns  <ajt@debian.org>
2064
2065         * katie.py (in_override_p): when searching for a source override,
2066         and the dsc query misses, search for both udeb and deb overrides
2067         as well. Should fix the UNACCEPT issues with udebs.
2068
2069 2002-08-24  James Troup  <james@nocrew.org>
2070
2071         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
2072         source+binary package finding code which was causing severe
2073         performance degradation with postgres 7.2.
2074
2075 2002-08-14  James Troup  <james@nocrew.org>
2076
2077         * julia (main): use the pwd.getpwall() to get system user info
2078         rather than trying to read a password file.  Add a -n/--no-action
2079         option.
2080
2081         * cron.hourly: julia no longer takes any arguments.
2082         * cron.hourly-non-US: likewise.
2083
2084 2002-08-07  James Troup  <james@nocrew.org>
2085
2086         * katie (install): handle multi-suite uploads when CopyChanges
2087         and/or CopyKatie are in use, ensuring we only copy stuff once.
2088
2089 2002-08-01  Ryan Murray  <rmurray@debian.org>
2090
2091         * wanna-build/trigger.daily: initial commit, with locking
2092         * cron.buildd: add locking against daily run
2093
2094 2002-07-30  James Troup  <james@nocrew.org>
2095
2096         * melanie (main): readd creation of suite_ids_list so melanie is
2097         remotely useful again.
2098
2099         * katie.conf: adopt for woody release; diable
2100         StableDislocationSupport, add oldstable, adjust other suites and
2101         mappings, fix up location.
2102         * katie.conf-non-US: likewise.
2103         * katie.conf-security: likewise.
2104
2105         * apt.conf.stable: adapt for woody release; add oldstable, adjust
2106         stable.
2107         * apt.conf.stable-non-US: likewise.
2108
2109         * apt.conf-security: adapt for woody release; adding oldstable,
2110         oldstable, adjust stable and testing.
2111         * cron.daily-security: likewise.
2112         * cron.buildd-security: likewise.
2113
2114         * apt.conf: adapt for woody release; rename woody-proposed-updates
2115         to testing-proposed-updates and proposed-updates to
2116         old-proposed-updates.
2117         * apt.conf-non-US: likewise.
2118
2119         * vars-non-US (copyoverrides): add sarge.
2120         * vars (copyoverrides): likewise.
2121
2122         * vars-security (suites): add oldstable.
2123
2124 2002-07-22  Ryan Murray  <rmurray@debian.org>
2125
2126         * apt.conf.security-buildd: use suite codenames instead of
2127           distnames.
2128
2129 2002-07-16  James Troup  <james@nocrew.org>
2130
2131         * denise (main): fix filenames for testing override files.
2132
2133 2002-07-14  James Troup  <james@nocrew.org>
2134
2135         * jennifer (process_it): call check_md5sums later so we can check
2136         files in the .dsc too
2137         (check_md5sums): check files in the .dsc too.  Check both md5sum
2138         and size.
2139
2140         * melanie (main): use parse_args() and join_with_commas_and() from
2141         utils.  If there's nothing to do, say so and exit, don't ask for
2142         confirmation etc.
2143
2144         * amber (join_with_commas_and): moved from here to ...
2145         * utils.py (join_with_commas_and): here.
2146
2147 2002-07-13  James Troup  <james@nocrew.org>
2148
2149         * madison (main): use parse_args() from utils.  Support
2150         -c/--component.
2151
2152         * jenna (parse_args): moved from here to ...
2153         * utils.py (parse_args): here.
2154
2155         * katie.conf (Architectures): minor corrections to the description
2156         for arm, mips and mipsel.
2157         * katie.conf-non-US (Architectures): likewise.
2158         * katie.conf-security (Architectures): likewise.
2159
2160         * cron.daily-security: use natalie's new -a/--add functionality to
2161         flesh out the security overrides.
2162
2163 2002-07-12  James Troup  <james@nocrew.org>
2164
2165         * cron.buildd (ARCHS): add arm.
2166
2167         * katie.conf: 2.2r7 was released.
2168         * katie.conf-non-US: likewise.
2169
2170         * utils.py (parse_changes): handle a multi-line field with no
2171         starting line.
2172
2173 2002-06-25  James Troup  <james@nocrew.org>
2174
2175         * templates/amber.advisory (To): add missing email address since
2176         __WHOAMI__ is only a name.
2177
2178         * katie.conf-security (Melane::LogFile): correct to go somewhere
2179         katie has write access to.
2180         (Location::/org/security.debian.org/ftp/dists/::Suites): add
2181         Testing.
2182
2183         * natalie: add support for -a/-add which adds packages only
2184         (ignoring changes and deletions).
2185
2186         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
2187         use FindB, not get.
2188
2189 2002-06-22  James Troup  <james@nocrew.org>
2190
2191         * jennifer (check_files): validate the package name and version
2192         field.  If 'Package', 'Version' or 'Architecture' are missing,
2193         don't try any further checks.
2194         (check_dsc): likewise.
2195
2196         * utils.py (re_taint_free): add '~' as a valid character.
2197
2198 2002-06-20  Anthony Towns  <ajt@debian.org>
2199
2200         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
2201
2202 2002-06-09  James Troup  <james@nocrew.org>
2203
2204         * jennifer (check_files): reduce useless code.
2205
2206         * cron.daily-security: run symlinks -dr on $ftpdir.
2207
2208         * vars-security (ftpdir): add.
2209
2210 2002-06-08  James Troup  <james@nocrew.org>
2211
2212         * neve (update_override_type): transaction is handled higher up in
2213         main().
2214         (update_priority): likewise.
2215         (process_sources): remove code that makes testing a duplicate of
2216         stable.
2217         (process_packages): likewise.
2218
2219         * templates/amber.advisory: add missing mail headers.
2220
2221         * cron.daily-security: also call apt-ftparchive clean for
2222         apt.conf.buildd-security.
2223         * cron.weekly: likewise.
2224
2225         * amber (do_upload): write out a list of source packages (and
2226         their version) uploaded for testing.
2227         (make_advisory): add more Subst mappings for the mail headers.
2228         (spawn): check for suspicious characters in the command and abort
2229         if their found.
2230
2231 2002-06-07  James Troup  <james@nocrew.org>
2232
2233         * ziyi (main): remove the 'nonus'/'security' hacks and use
2234         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
2235         the lower level Release files, even if they don't exist.  fubar
2236         out if we can't open a lower level Release file for writing.
2237
2238         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
2239         ziyi.
2240         * katie.conf-security (Dinstall): likewise.
2241
2242         * amber (do_upload): renamed from get_file_list().  Determine the
2243         upload host from the original component.
2244         (init): Add a -n/--no-action option.  Fix how we get changes_files
2245         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
2246         sys.argv).  Add an Options global.
2247         (make_advisory): support -n/--no-action.
2248         (spawn): likewise.
2249         (main): likewise.
2250         (usage): document -n/--no-action.
2251
2252         * cron.buildd-security: fix path to Packages-arch-specific in
2253         quinn-diff invocation.
2254
2255         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
2256         to proper suite names (i.e. stable, testing) rather than codenames
2257         (potato, woody).
2258         (Dinstall::DefaultSuite): likewise.
2259         (Suite): likewise.
2260         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
2261         * vars-security (suites): likewise.
2262         * apt.conf-security: likewise.
2263
2264         * katie.conf-security (Component): add "updates/" prefix.
2265         (Suite::*::Components): likewise.
2266         (ComponentMappings): new; map all {ftp-master,non-US} components
2267         -> updates/<foo>.
2268
2269         * katie.conf-security (Natalie): removed; the options have
2270         defaults and ComponentPosition is used by alyson which doesn't
2271         work on security.d.o.
2272         (Amber): replace UploadHost and UploadDir with ComponentMappings
2273         which is a mapping of components -> URI.
2274         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
2275         (SuiteMappings): use "silent-map" in preference to "map".
2276
2277         * cron.unchecked-security: fix call to cron.buildd-security.
2278
2279         * cron.daily-security: map local suite (stable) -> override suite
2280         (potato) when fixing overrides.  Correct component in natalie call
2281         to take into account "updates/" prefix.  Fix cut'n'waste in
2282         override.$dist.all3 generation, the old files weren't being
2283         removed, so they were endlessly growing.
2284
2285         * neve (main): don't use .Find for the CodeName since we require
2286         it.  Location::*::Suites is a ValueList.
2287         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
2288         out on expired keys, just warn.
2289         (update_override_type): new function; lifted from alyson.
2290         (update_priority): likewise.
2291         (main): use update_{override_type,priority}().
2292
2293         * jennifer (check_distributions): remove redunant test for
2294         SuiteMappings; ValueList("does-not-exist") returns [] which is
2295         fine.  Add support for a "silent-map" type which doesn't warn
2296         about the mapping to the user.
2297         (check_files): add support for ComponentMappings, similar to
2298         SuiteMappings, but there's no type, just a source and a
2299         destination and the original component is stored in "original
2300         component".
2301         * katie.py (Katie.dump_vars): add "original component" as an
2302         optionsal files[file] dump variable.
2303
2304         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
2305         query.  Add support for section-less legacy locations like current
2306         security.debian.org through YetAnotherConfigBoolean
2307         'LegacyStableHasNoSections'.
2308         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
2309
2310         * utils.py (real_arch): moved here from ziyi.
2311         * ziyi (real_arch): moved to utils.py.
2312         * ziyi (main): likewise.
2313
2314         * claire.py (find_dislocated_stable): use real_arch() with
2315         filter() to strip out source and all.
2316         * neve (main): likewise.
2317         * rene (main): likewise.
2318         * jeri (parse_packages): likewise.
2319
2320 2002-06-06  James Troup  <james@nocrew.org>
2321
2322         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
2323         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
2324         doing.
2325
2326 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2327
2328         * jeri (check_joey): check if the line contains two elements
2329         before accessing the second.  Also, strip trailing spaces as well
2330         as the newline.
2331         * halle (check_joey): likewise.
2332
2333 2002-06-05  James Troup  <james@nocrew.org>
2334
2335         * cron.unchecked-security: new file; like cron.unchecked but if
2336         there's nothing to do exit so we don't call cron.buildd-security.
2337
2338         * apt.conf.buildd-security: new file.
2339
2340         * vars (archs): alphabetize.
2341         * vars-non-US (archs): likewise.
2342
2343         * vars-security: add unchecked.
2344
2345         * madison (main): reduce rather bizarrely verbose and purposeless
2346         code to print arches to a simple string.join.
2347
2348         * katie.conf (Suites::Unstable): add UdebComponents, a new
2349         valuelist of suites, used by jenna to flesh out the list of
2350         <suite>_main-debian-installer-binary-<arch>.list files generated.
2351         (Dinstall): add StableDislocationSupport, a new boolean used by
2352         jenna to enable or disable stable dislocation support
2353         (i.e. claire), as true.
2354
2355         * katie.conf (Dinstall): add StableDislocationSupport, a new
2356         boolean used by jenna to enable or disable stable dislocation
2357         support (i.e. claire), as true.
2358         * katie.conf-non-US: likewise.
2359         * katie.conf-security: likewise.
2360
2361         * cron.daily-security: generate .all3 overrides for the buildd
2362         support.  Freshen a local copy of Packages-arch-specific from
2363         buildd.debian.org.
2364
2365         * claire.py (find_dislocated_stable): disable the support for
2366         files in legacy-mixed locations since none of the Debian archives
2367         have any anymore.
2368
2369         * helena: new script; produces a report on NEW and BYHAND
2370         packages.
2371
2372         * jenna: rewritten from scratch to fix speed problems.  Run time
2373         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
2374         minutes, 105 seconds are the monster query and 70 odd seconds is
2375         claire.
2376
2377         * apt.conf.buildd (Default): remove MaxContentsChange as it's
2378         irrelevant.
2379
2380 2002-06-05  Ryan Murray  <rmurray@debian.org>
2381
2382         * cron.buildd-security: new file.
2383
2384 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
2385
2386         * denise (list): take a file argument and use it.
2387         (main): don't abuse sys.stdout, just write to the file.
2388
2389         * claire.py (usage): Fix misspelling.
2390         (clean_symlink): Simplify.
2391         (find_dislocated_stable): Avoid unnecessary work.
2392
2393 2002-05-29  James Troup  <james@nocrew.org>
2394
2395         * cameron: removed; apt-ftparchive can simply walk the directory.
2396
2397 2002-05-26  Anthony Towns  <ajt@debian.org>
2398
2399         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
2400         for the autobuilders.
2401
2402 2002-05-24  Ryan Murray  <rmurray@debian.org>
2403
2404         * cron.buildd: update override files before running apt-ftparchive
2405
2406 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
2407
2408         * amber (main): remove extra space in prompt.
2409
2410         * utils.py (validate_changes_file_arg): use original filename in
2411         error messages.
2412
2413         * jeri (check_joey): close file after use.
2414         (parse_packages): likewise.
2415         (main): setup debug option properly.
2416
2417         * melanie (main): remove unused packages variable and simplify the
2418         code to build up con_packages by using repr().
2419
2420 2002-05-23  James Troup  <james@nocrew.org>
2421
2422         * lisa (recheck): when we reject, also return 0 so the package is
2423         skipped.
2424         (sg_compare): fix note sorting.
2425         (recheck): remove the .katie file after rejection.
2426
2427         * katie.py (Katie.accept): accepted auto-build support take 3;
2428         this time adding support for security.  Security needs a) non-pool
2429         files copied rather than symlinked since accepted is readable only
2430         by katie/security and www-data needs to be able to see the files,
2431         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
2432         AcceptedAutoBuildSuites and is a ValueList containing the suites.
2433         SecurityAcceptedAutoBuild is a new boolean which controls whether
2434         or not normal or security style is used.  The unstable_accepted
2435         table was renamed to accepted_autobuild and a suite column added.
2436         Also fix a bug noticed by Ryan where an existent orig.tar.gz
2437         didn't have it's last_used/in_accepted flags correctly updated.
2438         * katie (install): likewise.
2439         * rhona (clean_accepted_autobuild): likewise.
2440
2441 2002-05-22  James Troup  <james@nocrew.org>
2442
2443         * lisa (sort_changes): new function; sorts changes properly.
2444         Finally.
2445         (sg_compare): new function; helper for sort_changes().  Sorts by
2446         have note and time of oldest upload.
2447         (indiv_sg_compare): new function; helper for sort_changes().
2448         Sorts by source version, have source and filename.
2449         (main): use sort_changes().
2450         (changes_compare): obsoleted; removed.
2451
2452 2002-05-20  James Troup  <james@nocrew.org>
2453
2454         * rhona (clean_accepted_autobuild): don't die if a file we're
2455         trying to remove doesn't exist.  Makes rhona more friendly to
2456         katie/katie.py crashes/bugs without any undue cost.
2457
2458 2002-05-19  James Troup  <james@nocrew.org>
2459
2460         * lisa (main): if sorting a large number of changes give some
2461         feedback.
2462         (recheck): new function, run the same checks (modulo NEW,
2463         obviously) as katie does, if they fail do the standard
2464         reject/skip/quit dance.
2465         (do_pkg): use it.
2466
2467         * katie (install): don't try to unlink the symlink in the
2468         AcceptedAutoBuild support if the destination is not a symlink (or
2469         doesn't exist).  Avoids unnecessary bombs on previous partial
2470         accepts and will still bomb hard if the file exists and isn't a
2471         symlink.
2472
2473         * utils.py: blah, commands _is_ used when the mail stuff isn't
2474         commented out like it is in my test environment.
2475
2476         * lisa (changes_compare): "has note" overrides everything else.
2477         Use .katie files rather than running parse_changes, faster and
2478         allows "has note" to work.  Correct version compare, it was
2479         reversed.  Ctime check should only kick in if the source packages
2480         are not the same.
2481         (print_new): print out and return any note.  Rename 'ret_code' to
2482         'broken'.
2483         (edit_new): renamed from spawn_editor.  Don't leak file
2484         descriptors.  Clean up error message if editor fails.
2485         (edit_note): new function, allows one to edit notes.
2486         (do_new): add note support, editing and removing.
2487         (init): kill -s/--sort; with notes we always want to use our
2488         sorting method.
2489         (usage): likewise.
2490
2491         * katie.py (Katie.dump_vars): add "lisa note" as an optional
2492         changes field.
2493
2494         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
2495         it default to 0.  Adapt tests to assume it's boolean.
2496         * fernanda.py (check_changes): adjust call appropriately.
2497         * halle (check_changes): likewise.
2498         * jennifer (check_changes): likewise.
2499         * jeri (check_changes): likewise.
2500         * shania (flush_orphans): likewise.
2501
2502         * jennifer (check_dsc): pass is_a_dsc by name when calling
2503         build_file_list() for clarity.
2504         * shania (flush_orphans): likewise.
2505         * tea (check_missing_tar_gz_in_dsc): likewise.
2506
2507         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
2508         calling parse_changes() for clarity.
2509         * tea (check_dscs): likewise.
2510
2511         * utils.py (parse_changes): make dsc_whitespace_rules default to
2512         not true.
2513         * halle (check_changes): adjust call appropriately.
2514         * jennifer (check_changes): likewise.
2515         * jeri (check_changes): likewise.
2516         * lisa (changes_compare): likewise.
2517         * utils.py (changes_compare): likewise.
2518         * melanie (main): likewise.
2519         * shania (flush_orphans): likewise.
2520         * fernanda.py (check_changes): likewise.
2521
2522 2002-05-18  James Troup  <james@nocrew.org>
2523
2524         * katie.py (Katie.dump_vars): make the .katie file unreadable,
2525         it's not useful and by and large a duplication of information
2526         available in readable format in other files.
2527
2528 2002-05-16  Ryan Murray  <rmurray@debian.org>
2529
2530         * melanie: Dir::TemplatesDir -> Dir::Templates
2531
2532 2002-05-15  Ryan Murray  <rmurray@debian.org>
2533
2534         * cameron: correct the use of os.path.join
2535
2536 2002-05-15  Anthony Towns  <ajt@debian.org>
2537
2538         * ziyi: Update to match the new format for Architectures/Components
2539         in katie.conf.
2540
2541 2002-05-14  James Troup  <james@nocrew.org>
2542
2543         * amber: new script; 'installer' wrapper script for the security
2544         team.
2545
2546         * katie.py (Katie.announce): remove unused 'dsc' local
2547         variable. (pychecker)
2548
2549         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
2550
2551         * neve: don't import sys, we don't use it. (pychecker)
2552         (check_signature): fix return type mismatch. (pychecker)
2553
2554         * utils.py: don't import commands, we don't use it.  (pychecker)
2555
2556         * katie (install): SpecialAcceptedAutoBuild is a boolean.
2557
2558         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
2559         obsoleted by the change to "othercomponents" handling in jennifer
2560         detailed below.
2561         (Katie.cross_suite_version_check): new function; implements
2562         cross-suite version checking rules specified in the conf file
2563         while also enforcing the standard "must be newer than target
2564         suite" rule.
2565         (Katie.check_binary_against_db): renamed, since it's invoked once
2566         per-binary, "binaries" was inaccurate.  Use
2567         cross_suite_version_check() and don't bother with the "oldfiles"
2568         rubbish as jennifer works out "othercomponents" herself now.
2569         (Katie.check_source_against_db): use cross_suite_version_check().
2570
2571         * katie (check): the version and file overwrite checks
2572         (check_{binary,source,dsc}_against_db) are not per-suite.
2573
2574         * jennifer (check_files): less duplication of
2575         'control.Find("Architecture", "")' by putting it in a local
2576         variable.
2577         (check_files): call check_binary_against_db higher up since it's
2578         not a per-suite check.
2579         (check_files): get "othercomponents" directly rather than having
2580         check_binary_against_db do it for us.
2581
2582         * heidi (main): 'if x:', not 'if x != []:'.
2583         * katie.py (Katie.in_override_p): likewise.
2584         (Katie.check_dsc_against_db): likewise.
2585         * natalie (main): likewise.
2586         * rene (main): likewise.
2587         * ziyi (real_arch): likewise.
2588
2589         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
2590         and OverrideType are now value lists, not lists.
2591         * andrea (main): likewise.
2592         * cindy (main): likewise.
2593         * claire.py (find_dislocated_stable): likewise.
2594         * denise (main): likewise.
2595         * jenna (main): likewise.
2596         * jennifer (check_distributions): likewise.
2597         (check_files): likewise.
2598         (check_urgency): likewise (Urgency::Valid).
2599         * jeri (parse_packages): likewise.
2600         * neve (main): likewise (and Location::%s::Suites).
2601         * rene (main): likewise.
2602
2603 2002-05-13  James Troup  <james@nocrew.org>
2604
2605         * katie.py (Katie.check_source_against_db): correct case of reject
2606         message to be consistent with binary checks.
2607
2608         * jennifer (get_status_output): don't leak 2 file descriptors per
2609         invocation.
2610         (check_signature): add missing '\n' to "duplicate status token"
2611         error message.
2612
2613 2002-05-09  James Troup  <james@nocrew.org>
2614
2615         * utils.py (validate_changes_file_arg): new function; validates an
2616         argument which should be a .changes file.
2617         * ashley (main): use it.
2618         * lisa (main): likewise.
2619
2620         * katie.py (Katie.check_dsc_against_db): since there can be more
2621         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
2622         entry still exists in files.
2623
2624         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2625         files, since check_dsc_against_db() deletes the .orig.tar.gz
2626         entry.
2627
2628         * cameron: cleanups.
2629
2630         * utils.py (changes_compare): change sort order so that source
2631         name and source version trump 'have source'; this should fix
2632         UNACCEPT problems in katie where -1 hppa+source & i386, -2
2633         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
2634         by Ryan.
2635
2636         * lisa (main): allow the arguments to be .katie files too.
2637
2638 2002-05-07  Ryan Murray  <rmurray@debian.org>
2639
2640         * cron.buildd: add s390 to arch list again
2641
2642 2002-05-05  Ryan Murray  <rmurray@debian.org>
2643
2644         * cron.buildd: new script, update w-b database from unstable_accepted
2645         table
2646         * cameron: new script, take list in unstable_accepted and write out
2647         a file list for apt-ftparchive
2648         * apt.conf.buildd: new apt configuration for Packages/Sources for
2649         unstable_accepted
2650         * vars: add s390 to arch list.
2651
2652 2002-05-03  James Troup  <james@nocrew.org>
2653
2654         * neve (main): don't hard code the calling user as that doesn't
2655         work with modern postgres installs.  Fix psql invocation for
2656         init_pool.sql (database name required).  Dont' hard code the
2657         database name.
2658         (process_sources): add support for fingerprint and install_date.
2659         (process_packages): add support for fingerprint.
2660         (do_sources): pass in the directory, fingerprint support needs it.
2661         (get_status_output): borrowed from jennifer.
2662         (reject): likewise.
2663         (check_signature): likewise.
2664
2665         * katie (install): only try to log urgencies if Urgency_Logger is
2666         defined.
2667         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
2668         defined; only close Urgency_Logger if it's defined.
2669
2670         * catherine (poolize): adapt for Dir rationalization.
2671         * claire.py (find_dislocated_stable): likewise.
2672         * denise (main): likewise.
2673         * halle (check_joey): likewise.
2674         * jenna: likewise.
2675         * jennifer: likewise.
2676         * jeri: likewise.
2677         * katie.py: likewise.
2678         * katie: likewise.
2679         * lisa (do_bxa_notification): likewise.
2680         * logging.py (Logger.__init__): likewise
2681         * rene (main): likewise.
2682         * rhona (clean): likewise.
2683         * shania (init): likewise.
2684         * tea: likewise.
2685         * ziyi: likewise.
2686
2687         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
2688         FindB, not FindI.
2689
2690         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
2691         boolean, use FindB, not get.
2692
2693         * katie.py (Katie.check_dsc_against_db): ignore duplicate
2694         .orig.tar.gz's which are an exact (size/md5sum) match.
2695
2696         * ashley (main): really allow *.katie files as arguments too;
2697         noticed by aj.
2698
2699         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
2700
2701 2002-05-03  Anthony Towns  <ajt@debian.org>
2702
2703         * ziyi: support for security.
2704
2705 2002-05-02  James Troup  <james@nocrew.org>
2706
2707         * jennifer (accept): call Katie.check_override() unconditional as
2708         no-mail check moved into that function.
2709         (do_byhand): likewise.
2710
2711         * katie.py (Katie.check_override): don't do anything if we're a)
2712         not sending mail or b) the override disparity checks have been
2713         disbled via Dinstall::OverrideDisparityCheck.
2714
2715         * jennifer (check_files): don't hard code Unstable as the suite
2716         used to check for architecture validity; use
2717         Dinstall::DefaultSuite instead, if it exists.
2718         (accept): conditionalize
2719
2720         * katie.py (Katie.update_subst): support global maintainer
2721         override with Dinstall::OverrideMaintainer.
2722
2723         * jennifer (check_distributions): new function, Distribution
2724         validation and mapping.  Uses new SuiteMappings variable from
2725         config file to abstract suite mappings.
2726         (check_changes): call it.
2727
2728         * natalie: renamed; nothing imports or likely will for some time.
2729
2730         * denise (main): remove unused natalie import and init().
2731
2732         * natalie.py (init): removed.
2733         (main): initalize here instead and don't hardcode the database
2734         name.
2735
2736 2002-04-30  James Troup  <james@nocrew.org>
2737
2738         * katie.py (Katie.close_bugs): new function, split out from
2739         announce().
2740         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
2741         true.
2742         (Katie.close_bugs): new function, split out
2743         (Katie.close_bugs): return immediately if there are no bugs to
2744         close.
2745
2746         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
2747         * katie (do_reject): likewise.
2748         (stable_install): likewise.
2749         * katie.py (Katie.announce): likewise.
2750         (Katie.accept): likewise.
2751         (Katie.check_override): likewise.
2752         (Katie.do_reject): likewise.
2753         * lisa (do_bxa_notification): likewise.
2754         * melanie (main): likewise.
2755
2756         * utils.py (TemplateSubst): change second argument to be a
2757         filename rather than a template since every caller opened a file
2758         on the fly which was ugly and leaked file descriptor.
2759
2760 2002-04-29  James Troup  <james@nocrew.org>
2761
2762         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
2763         <hertzog@debian.org> to send 'accepted' announce mails to the
2764         PTS. [#128140]
2765
2766 2002-04-24  James Troup  <james@nocrew.org>
2767
2768         * init_pool.sql (unstable_accepted): add two new fields to
2769         unstable_accepted; in_accepted is a boolean indicating whether or
2770         not the file is in accepted and last_used is a timestamp used by
2771         rhona to determine when to remove symlinks for installed packages.
2772
2773         * katie.py (Katie.accept): auto-build support take 2.  Create
2774         symlinks for all files into a seperate directory.  Add files to
2775         unstable_accepted as paths to the new directory; mark them as
2776         being in accepted for cameron.  Properly conditionalize it on a
2777         configuration variable.
2778
2779         * katie (install): likewise.  Update symlinks to point into the
2780         pool; mark the files for later deletion by rhona and mark them as
2781         not being in accepted for cameron.
2782
2783         * rhona (clean_accepted_autobuild): new function.
2784
2785 2002-04-22  James Troup  <james@nocrew.org>
2786
2787         * jennifer (check_files): handle db_access.get_location_id()
2788         returning -1 properly/better.
2789
2790         * rhona (clean_fingerprints): new function.
2791
2792 2002-04-21  James Troup  <james@nocrew.org>
2793
2794         * utils.py (touch_file): unused; remove.
2795         (plural): likewise.
2796
2797         * jennifer (check_files): close file descriptor used to get the
2798         control file.
2799         (check_md5sums): likewise.
2800         (callback): likewise.
2801
2802         * katie.py (Katie.do_reject): handle manual rejects much better;
2803         call the editor first and get confirmation from the user before
2804         proceeding.
2805
2806         * jennifer (check_signature): prefix_multi_line_string() moved to
2807         utils.
2808
2809         * utils.py (prefix_multi_line_string): moved here from jennifer.
2810
2811 2002-04-20  James Troup  <james@nocrew.org>
2812
2813         * lisa (main): handle non-existent files.
2814
2815         * ashley (main): allow *.katie files as arguments too.
2816
2817 2002-04-19  James Troup  <james@nocrew.org>
2818
2819         * katie.py (Katie.accept): add stuff to help auto-building from
2820         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
2821         in the pool), create a symlink to it in the accepted directory and
2822         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
2823
2824         * katie (install): undo the "auto-building from accepted" stuff
2825         (i.e. remove the .orig.tar.gz symlink and remove the files from
2826         unstable_accepted table).
2827
2828 2002-04-16  James Troup  <james@nocrew.org>
2829
2830         * jennifer (upload_too_new): fix typo which was causing all
2831         timestamp comparisons to be against the .changes file.  Also move
2832         back to the original directory so we do the comparisons against
2833         accurate timestamps.
2834
2835         * tea (check_missing_tar_gz_in_dsc): new function.
2836
2837         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
2838         file mentioned in the .dsc.
2839
2840         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
2841         way mails reach debian-{devel-,}changes@l.d.o.
2842
2843 2002-04-02  Ryan Murray  <rmurray@debian.org>
2844
2845         * cron.daily: run shania after rhona
2846         * cron.daily-non-US: likewise.
2847
2848 2002-04-01  James Troup  <james@nocrew.org>
2849
2850         * katie: re-add proposed-updates/stable install support.
2851
2852         * katie.py (Katie.dump_vars): add changes["changes"] as an
2853         optional field; should be mandatory later.
2854
2855 2002-03-31  James Troup  <james@nocrew.org>
2856
2857         * katie (install): support a Suite::<foo>::CopyKatie similar to
2858         CopyChanges.  Done seperately because .katie files don't need to
2859         be mirrored and will probably be copied to another directory as a
2860         result.
2861
2862         * halle (main): add missing debug to options.
2863
2864 2002-03-29  James Troup  <james@nocrew.org>
2865
2866         * madison (main): add a -r/--regex option.
2867
2868 2002-03-26  James Troup  <james@nocrew.org>
2869
2870         * lisa: don't trample on changes["distribution"]; make a copy of
2871         it as changes["suite"] instead and use that.
2872
2873 2002-03-16  Anthony Towns  <ajt@debian.org>
2874
2875         * templates/lisa.bxa_notification: Fix some grammatical errors.
2876         Encourage contact via bxa@ftp-master email address.
2877
2878 2002-03-15  James Troup  <james@nocrew.org>
2879
2880         * jennifer (check_timestamps): remove bogus raise in except.
2881
2882 2002-03-15  Anthony Towns  <ajt@debian.org>
2883
2884         * cron.monthly: rotate mail/archive/bxamail as well as
2885         mail/archive/mail. This is for a complete archive of
2886         correspondence with the BXA.
2887
2888 2002-03-14  Anthony Towns  <ajt@debian.org>
2889
2890         * crypto-in-main changes.
2891
2892         * utils.py (move, copy): add an optional perms= parameter to let you
2893         set the resulting permissions of the moved/copied file
2894         * katie.py (force_move): rejected/morgued files should be unreadable
2895         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
2896         should be unreadable.
2897
2898 2002-03-07  Ryan Murray  <rmurray@debian.org>
2899
2900         * katie (install): check for existance of "files id" key as well as
2901         it being set to a valid value.
2902         * katie (install): check for existense and valid value for location
2903         id as well
2904
2905 2002-03-05  Ryan Murray  <rmurray@debian.org>
2906
2907         * katie.py (do_reject): reread the reason file after editing it.
2908
2909 2002-02-25  James Troup  <james@nocrew.org>
2910
2911         * jennifer (check_changes): don't enforce sanity in .changes file
2912         names since it doesn't seem to be possible; pcmica-cs and similar
2913         freak show packages in particular cause real problems.
2914
2915         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
2916         each dsc_file since the .orig.tar.gz checking code now uses it as
2917         a boolean.  Fixes bizarro rejections which bogusly claimed
2918         .diff.gz md5sum/size was incorrect.
2919
2920 2002-02-24  James Troup  <james@nocrew.org>
2921
2922         * katie (process_it): reset reject_message.
2923
2924 2002-02-22  James Troup  <james@nocrew.org>
2925
2926         * db_access.py(set_files_id): disable use of
2927         currval('files_id_seq') because it was taking 3 seconds on auric
2928         which is insane (most calls take < 0.01) and simply call
2929         get_files_id() for the return value instead.
2930
2931         * katie.py (Katie.do_query): convenience function; unused by
2932         default, useful for profiling.
2933         * db_access.py (do_query): likewise.
2934
2935         * katie (install): fix insert SQL call when binary has no source.
2936
2937         * lisa (determine_new): auto-correct non-US/main to non-US.
2938         (determine_new): add a warning when adding things to stable.
2939         (edit_index): use our_raw_input().
2940         (edit_overrides): likewise.
2941         (do_new): likewise.  Use re.search() not re.match() since the
2942         default answer may not be the first one.
2943         (do_byhand): likewise.
2944         (do_new): Default to 'S'kip and never 'A'dd.
2945
2946         * jennifer (action): pass prompt to our_raw_input().
2947         * melanie (game_over): likewise.
2948         * katie (action): likewise.
2949
2950         * utils.py (our_raw_input): add an optional prompt argument to
2951         make the function more usable as a drop in replacement for
2952         raw_input().
2953
2954         * jennifer (check_files): correct reject() to not double prefix
2955         when using katie.py based functions.
2956         (check_dsc): likewise.
2957
2958         * katie.py (Katie.reject): prepend a new line if appropriate
2959         rathen than appending one to avoid double new lines when caller
2960         adds one of his own.
2961
2962         * lisa (determine_new): warn if the package is also in other
2963         components.
2964
2965 2002-02-20  James Troup  <james@nocrew.org>
2966
2967         * jennifer (check_files): if .changes file lists "source" in
2968         Architecture field, there must be a .dsc.
2969
2970 2002-02-15  James Troup  <james@nocrew.org>
2971
2972         * ashley (main): add some missing fields.
2973
2974         * katie.py (Katie.check_dsc_against_db): fix to take into account
2975         the fact that the .orig.tar.gz might be in byhand, accepted or
2976         new.  Also fix calling of reject().
2977         (Katie.check_binaries_against_db): fix calling of reject().
2978         (Katie.check_source_against_db): likewise.
2979         (Katie.dump_vars): add missing variables used for bug closures.
2980
2981         * lisa (changes_compare_by_time): sort by reverse time.
2982
2983         * katie.py (Katie.accept): log.
2984         (Katie.dump_vars): missing has_key test for optional changes fields.
2985
2986         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
2987         (process_it): traceback goes to stderr, not stdout.
2988         (acknowledge_new): log.
2989         (do_byhand): likewise.
2990
2991         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
2992
2993         * add_constraints.sql: add grants for the new fingerprint table.
2994
2995 2002-02-13  James Troup  <james@nocrew.org>
2996
2997         * katie (do_reject): basename the .changes filename before trying
2998         to use it to construct the .reason filename.
2999         (process_it): call Katie.update_subst() so do_reject() DTRT with
3000         the mail template.
3001         (do_reject): setup the mail template correctly.
3002
3003 2002-02-12  James Troup  <james@nocrew.org>
3004
3005         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
3006         (check_files): don't abuse global dictionaries.
3007         (Ent): use all variables.
3008         (check_timestamps): don't abuse global dictionaries.
3009
3010         * fernanda.py: renamed to .py so lisa can import it.
3011         (check_dsc): remove unused local variables (pychecker).
3012         (display_changes): split off from check_changes.
3013
3014         * katie: rewritten; most of the functionality moves to jennifer;
3015         what's left is the code to install packages once a day from the
3016         'accepted' directory.
3017
3018         * jennifer: new program, processes packages in 'unchecked'
3019         (i.e. most of the non-install functionality of old katie).
3020
3021         * katie.py: common functions shared between the clique of
3022         jennifer, lisa and katie.
3023
3024         * lisa: new program; handles NEW and BYHAND packages.
3025
3026         * jeri (usage): new function.
3027         (main): use it.
3028         (check_package): remove unused local variable (pychecker).
3029
3030         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
3031         binaries and source.  Add install_date to source.
3032
3033         * halle (usage): new function.
3034         (main): use it.  Remove unused options.
3035         (check_changes): remove unused local variable (pychecker).
3036
3037         * add_constraints.sql: add fingerprint references.
3038
3039         * db_access.py (get_or_set_fingerprint_id): new function.
3040
3041         * ashley (main): new program; dumps the contents of a .katie file
3042         to stdout.
3043
3044         * alyson (main): remove option handling since we don't actually
3045         support any.
3046         * cindy (main): likewise.
3047
3048         * remove unnecessary imports and pre-define globals (pychecker).
3049
3050 2002-02-11  Anthony Towns  <ajt@debian.org>
3051
3052         * added installation-report and upgrade-report pseudo-packages
3053
3054 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
3055
3056         * katie (update_subst): use Dinstall::TrackingServer.
3057         * melanie (main): likewise.
3058
3059 2002-01-27  James Troup  <james@nocrew.org>
3060
3061         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
3062         noticing, jgg@ for fix.
3063
3064 2002-01-19  James Troup  <james@nocrew.org>
3065
3066         * utils.py (extract_component_from_section): handle non-US
3067         non-main properly.
3068
3069 2002-01-12  James Troup  <james@nocrew.org>
3070
3071         * madison: add support for -S/--source-and-binary which displays
3072         information for the source package and all it's binary children.
3073
3074 2002-01-13  Anthony Towns  <ajt@debian.org>
3075
3076         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
3077         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
3078           and 2002 key ids.
3079         * katie.conf-non-US: Likewise.
3080         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
3081           multiple keys automatically. This is probably only useful for
3082           transitioning from an expired (or revoked?) key.
3083
3084 2002-01-08  Ryan Murray  <rmurray@debian.org>
3085
3086         * debian/python-dep: new file that prints out python:Depends for
3087           substvars
3088         * debian/control: use python:Depends, build-depend on python
3089           lower Depends: on postgresql to Suggests:
3090         * debian/rules: determine python version, install to the correct
3091           versioned dir
3092
3093 2001-12-18  Anthony Towns  <ajt@debian.org>
3094
3095         * ziyi: unlink Release files before overwriting them (in case they've
3096           been merged)
3097         * ziyi: always include checksums/sizes for the uncompressed versions
3098           of Sources and Packages, even if they're not present on disk
3099
3100 2001-11-26  Ryan Murray  <rmurray@debian.org>
3101
3102         * ziyi (main): add SigningPubKey config option
3103         * katie.conf: use SigningPubKey config option
3104         * katie.conf-non-US: likewise
3105
3106 2001-11-24  James Troup  <james@nocrew.org>
3107
3108         * katie (acknowledge_new): log newness.
3109
3110 2001-11-24  Anthony Towns  <ajt@debian.org>
3111
3112         * ziyi (real_arch): bail out if some moron forgot to reset
3113         untouchable on stable.
3114         (real_arch): source Release files.
3115
3116 2001-11-19  James Troup  <james@nocrew.org>
3117
3118         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
3119         utils.get_conf().
3120         * shania (main): likewise.
3121
3122         * rhona (main): add default options.
3123
3124         * db_access.py (get_archive_id): case independent.
3125
3126         * katie (action): sort files so that ordering is consistent
3127         between mails; noticed/requested by Joey.
3128
3129 2001-11-17  Ryan Murray  <rmurray@debian.org>
3130
3131         * utils.py: add get_conf function, change startup code to read all
3132           config files to the Cnf that get_conf returns
3133           use the component list from the katie conf rather than the hardcoded
3134           list.
3135         * all scripts: use new get_conf function
3136         * shania: fix try/except around changes files
3137         * jenna: only do debian-installer if it is a section in Cnf
3138
3139 2001-11-16  Ryan Murray  <rmurray@debian.org>
3140
3141         * shania (main): Initialize days to a string of a number.
3142                  (main): Initialize Cnf vars before reading in Cnf
3143
3144 2001-11-14  Ryan Murray  <rmurray@debian.org>
3145
3146         * shania (main): Initialize days to a number.
3147
3148 2001-11-04  James Troup  <james@nocrew.org>
3149
3150         * docs/Makefile: use docbook-utils' docbook2man binary.
3151
3152         * Change all "if foo == []" constructs into "if not foo".
3153
3154         * katie (check_changes): when installing into stable from
3155         proposed-updates, remove all non-stable target distributions.
3156         (check_override): don't check for override disparities on stable
3157         installs.
3158         (stable_install): update install_bytes appropriately.
3159         (reject): stable rejection support; i.e. don't remove files when
3160         rejecting files in the pool, rather remove them from the
3161         proposed-update suite instead, rhona will do the rest.
3162         (manual_reject): support for a stable specific template.
3163         (main): setup up stable rejector in subst.
3164
3165 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
3166
3167         * debian/control (Build-Depends): docbook2man has been superseded
3168         by docbook-utils.
3169
3170         * neve (main): exit with a more useful error message.
3171         (update_suites): Suite::<suite>::Version, Origin and Description
3172         are not required, so don't fail if they don't exist.
3173
3174         * db_access.py (get_archive_id): return -1 on error rather than
3175         raise an exception.
3176         (get_location_id): likewise.
3177
3178         * madison (main): don't exit on the first not-found package,
3179         rather exit with an appropriate return code after processing all
3180         packages.
3181
3182 2001-11-03  James Troup  <james@nocrew.org>
3183
3184         * claire.py (find_dislocated_stable): add per-architecture
3185         symlinks for dislocated architecture: all debs.
3186
3187 2001-10-19  Anthony Towns  <ajt@debian.org>
3188
3189         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
3190
3191 2001-10-10  Anthony Towns  <ajt@debian.org>
3192
3193         * claire.py (fix_component_section): do _not_ assign to None under
3194         any circumstances
3195
3196 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
3197
3198         * melanie (main): don't duplicate architectures when removing from
3199         more than one suite.
3200
3201         * heidi (main, process_file, get_list): report suite name not ID.
3202
3203         * naima (nmu_p): be case insensitive.
3204
3205         * naima (action): more list handling clean ups.
3206
3207         * melanie (main): clean up lists handling to use string.join and
3208         IN's.
3209
3210         * madison (main): clean up suite and architecture argument parsing
3211         to use slices less and string.join more.
3212
3213         * utils.py (parse_changes): Use string.find() instead of slices for
3214         string comparisons thereby avoid hardcoding the length of strings.
3215         * ziyi (main): likewise.
3216
3217 2001-10-07  James Troup  <james@nocrew.org>
3218
3219         * Remove mode argument from utils.open_files() calls if it's the
3220         default, i.e. 'r'.
3221
3222 2001-09-27  James Troup  <james@nocrew.org>
3223
3224         * katie (init): new function; options clean up.
3225         (usage): add missing options, remove obsolete ones.
3226         (main): adapt for the two changes above.  If the lock file or
3227         new-ack log file don't exist, create them.  Don't try to open the
3228         new-ack log file except running in new-ack mode.
3229
3230         * alyson (main): initialize all the tables that are based on the
3231         conf file.
3232
3233         * utils.py (touch_file): like touch(1).
3234         (where_am_i): typo.
3235
3236         * catherine (usage): new.
3237         (main): use it.  options cleanup.
3238         * claire.py: likewise.
3239         * fernanda: likewise.
3240         * heidi: likewise.
3241         * jenna: likewise.
3242         * shania: likewise.
3243         * ziyi: likewise.
3244
3245         * andrea: options cleanup.
3246         * charisma: likewise.
3247         * julia: likewise.
3248         * madison: likewise.
3249         * melanie: likewise.
3250         * natalie: likewise.
3251         * rhona: likewise.
3252         * tea: likewise.
3253
3254 2001-09-26  James Troup  <james@nocrew.org>
3255
3256         * utils.py: default to sane config file locations
3257         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
3258         or they can point to the real ones through use of a new Config
3259         section.  Based on an old patch by Adam Heath.
3260         (where_am_i): use the new default config stuff.
3261         (which_conf_file): likewise.
3262         (which_apt_conf_file): likewise.
3263
3264         * charisma (main): output defaults to
3265         `Package~Version\tMaintainer'; input can be of either form.  When
3266         parsing the new format do version comparisons, when parsing the
3267         old format assume anything in the extra file wins.  This fixes the
3268         problem of newer non-US packages being overwhelmed by older
3269         versions still in stable on main.
3270
3271 2001-09-17  James Troup  <james@nocrew.org>
3272
3273         * natalie.py (list): use result_join().
3274
3275         * denise (main): result_join() moved to utils.
3276
3277         * utils.py (result_join): move to utils; add an optional seperator
3278         argument.
3279
3280 2001-09-14  James Troup  <james@nocrew.org>
3281
3282         * heidi (set_suite): new function; does --set like natalie does,
3283         i.e. turns it into a sequence of --add's and --remove's
3284         internally.  This is a major win (~20 minute run time > ~20
3285         seconds) in the common, everday (i.e. testing) case.
3286         (get_id): common code used by set_suite() and process_file().
3287         (process_file): call set_suite() and get_id().
3288         (main): add logging support.
3289
3290         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
3291         files.
3292
3293         * utils.py (parse_changes): use slices or simple string comparison
3294         in favour of regexes where possible.
3295
3296         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
3297         fact that the string VARDATA() points to are not null terminated.
3298
3299         * denise (result_join): new function; like string.join() but
3300         handles None's.
3301         (list): use it.
3302         (main): likewise.
3303
3304         * charisma (main): python-pygresql 7.1 returns None not "".
3305
3306 2001-09-14  Ryan Murray  <rmurray@debian.org>
3307
3308         * natalie.py (list): handle python-pygresql 7.1 returning None.
3309
3310 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
3311
3312         * madison (main): return 1 if no package is found.
3313
3314 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
3315
3316         * madison (main): better error handling for incorrect
3317         -a/--architecture or -s/--suite arguments.
3318         (usage): new.
3319         (main): use it.
3320
3321 2001-09-05  Ryan Murray  <rmurray@debian.org>
3322
3323         * charisma, madison, katie: remove use of ROUser
3324         * katie.conf,katie.conf-non-US: remove defintion of ROUser
3325
3326 2001-08-26  James Troup  <james@nocrew.org>
3327
3328         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
3329         maintained packages at cjwatson@'s request.
3330
3331 2001-08-21  James Troup  <james@nocrew.org>
3332
3333         * madison (main): add -a/--architecture support.
3334
3335         * jenna: use logging instead of being overly verbose on stdout.
3336
3337 2001-08-11  Ryan Murray  <rmurray@debian.org>
3338
3339         * melanie: add functional help option
3340
3341 2001-08-07  Anthony Towns  <ajt@debian.org>
3342
3343         * apt.conf, katie.conf: Add ia64 and hppa to testing.
3344
3345 2001-07-28  James Troup  <james@nocrew.org>
3346
3347         * katie (check_dsc): ensure source version is >> than existing
3348         source in target suite.
3349
3350 2001-07-25  James Troup  <james@nocrew.org>
3351
3352         * natalie.py: add logging support.
3353
3354         * utils.py (open_file): make the second argument optional and
3355         default to read-only.
3356
3357         * rene (main): work around broken source packages that duplicate
3358         arch: all packages with arch: !all packages (no longer allowed
3359         into the archive by katie).
3360
3361 2001-07-13  James Troup  <james@nocrew.org>
3362
3363         * katie (action): don't assume distribution is a dictionary.
3364         (update_subst): don't assume architecture is a dictionary and that
3365         maintainer822 is defined.
3366         (check_changes): recognise nk_format exceptions.
3367         (check_changes): reject on 'testing' only uploads.
3368         (check_files): when checking to ensure all packages are newer
3369         versions check against arch-all packages too.
3370         (check_dsc): enforce the existent of a sane set of mandatory
3371         fields.  Ensure the version number in the .dsc (modulo epoch)
3372         matches the version number in the .changes file.
3373
3374         * utils.py (changes_compare): ignore all exceptions when parsing
3375         the changes files.
3376         (build_file_list): don't UNDEF on a changes file with no format
3377         field.
3378
3379 2001-07-07  James Troup  <james@nocrew.org>
3380
3381         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
3382         rather than 'changedbyname' to avoid false negatives on uploads
3383         with an email-address-only Changed-By field.
3384         (check_dsc): don't overwrite reject_message; append to it.
3385         (check_signature): likewise.
3386         (check_changes): likewise.
3387         (announce): condition logging on 'action'.
3388
3389         * logging.py: new logging module.
3390
3391         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
3392         sub-tree into a separate (global) variable.
3393         (check_dsc): ensure format is 1.0 to retain backwards
3394         compatability with dpkg-source in potato.
3395         (main): only try to obtain the lock when not running in no-action
3396         mode.
3397         Use the new logging module.
3398
3399         * christina: initial version; only partially usable.
3400
3401 2001-06-28  Anthony Towns  <ajt@debian.org>
3402
3403         * apt.conf: Add ExtraOverrides to auric.
3404
3405 2001-06-25  James Troup  <james@nocrew.org>
3406
3407         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
3408         they preferred the name 'Uploaders'.
3409
3410 2001-06-23  James Troup  <james@nocrew.org>
3411
3412         * katie (check_files): fix typo in uncommon rejection message,
3413         s/sourceversion/source version/.
3414
3415         * denise (main): we can't use print because stdout has been
3416         redirected.
3417
3418         * katie (source_exists): new function; moved out of check_files()
3419         and added support for binary-only NMUs of earlier sourceful NMUs.
3420
3421         * rhona (clean): find_next_free has moved.
3422
3423         * utils.py (find_next_free): new function; moved here from rhona.
3424         Change too_many to be an argument with a default value, rather
3425         than a hardcoded variable.
3426
3427         * shania: rewritten to work better; REJECTion reminder mail
3428         handling got lost though.
3429
3430 2001-06-22  James Troup  <james@nocrew.org>
3431
3432         * rhona (main): remove unused override code.
3433
3434         * fernanda (main): remove extraneous \n's from utils.warn calls.
3435         * natalie.py (list): likewise.
3436
3437         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
3438         use utils.{warn,fubar} where appropriate.
3439
3440 2001-06-21  James Troup  <james@nocrew.org>
3441
3442         * katie (nmu_p): new class that encapsulates the "is a nmu?"
3443         functionality.
3444         (nmu_p.is_an_nmu): add support for multiple maintainers specified
3445         by the "Maintainers" field in the .dsc file and maintainer groups.
3446         (nmu_p.__init__): read in the list of group maintainer names.
3447         (announce): use nmu_p.
3448
3449 2001-06-20  James Troup  <james@nocrew.org>
3450
3451         * rene (main): hardcode the suite experimental is compared to by
3452         name rather than number.
3453
3454         * katie (check_files): differentiate between doesn't-exist and
3455         permission-denied in "can not read" rejections; requested by edd@.
3456         (check_dsc): use os.path.exists rather than os.access to allow the
3457         above check to kick in.
3458
3459         * heidi (process_file): read all input before doing anything and
3460         use transactions.
3461
3462 2001-06-15  James Troup  <james@nocrew.org>
3463
3464         * fernanda: new script; replaces old 'check' shell script
3465         nastiness.
3466
3467 2001-06-14  James Troup  <james@nocrew.org>
3468
3469         * katie: actually import traceback module to avoid amusing
3470         infinite loop.
3471
3472 2001-06-10  James Troup  <james@nocrew.org>
3473
3474         * utils.py (extract_component_from_section): fix to handle just
3475         'non-free' and 'contrib'.  Also fix to handle non-US in a
3476         completely case insensitive manner as a component.
3477
3478 2001-06-08  James Troup  <james@nocrew.org>
3479
3480         * madison (arch_compare): sort function that sorts 'source' first
3481         then alphabetically.
3482         (main): use it.
3483
3484 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
3485
3486         * catherine (poolize): explicitly make poolized_size a long so it
3487         doesn't overflow when poolizing e.g. entire archives.
3488
3489 2001-06-01  James Troup  <james@nocrew.org>
3490
3491         * utils.py (send_mail): throw exceptions rather than exiting.
3492
3493         * katie (process_it): catch exceptions and ignore them.
3494
3495 2001-06-01  Michael Beattie  <mjb@debian.org>
3496
3497         * added update-mailingliststxt and update-readmenonus to update
3498         those files, respectively. modified cron.daily{,-non-US} to
3499         use them.
3500
3501 2001-05-31  Anthony Towns  <ajt@debian.org>
3502
3503         * rhona: make StayOfExecution work.
3504
3505 2001-05-31  James Troup  <james@nocrew.org>
3506
3507         * rhona (find_next_free): fixes to not overwrite files but rename
3508         them by appending .<n> instead.
3509         (clean): use find_next_free and use dated sub-directories in the
3510         morgue.
3511
3512         * utils.py (move): don't overwrite files unless forced to.
3513         (copy): likewise.
3514
3515 2001-05-24  James Troup  <james@nocrew.org>
3516
3517         * katie (check_files): determine the source version here instead
3518         of during install().
3519         (check_files): check for existent source with bin-only NMU
3520         support.
3521         (main): sort the list of changes so that the source-must-exist
3522         check Does The Right Thing(tm).
3523
3524         * utils.py (changes_compare): new function; sorts a list of
3525         changes files by 'have-source', source, version.
3526         (cc_fix_changes): helper function.
3527         (parse_changes): use compiled regexes.
3528         (fix_maintainer): likewise.
3529
3530         * rene (main): warn about packages in experimental that are
3531         superseded by newer versions in unstable.
3532
3533 2001-05-21  James Troup  <james@nocrew.org>
3534
3535         * rene (main): add support for checking for ANAIS (Architecture
3536         Not Allowed In Source) packages.
3537
3538 2001-05-17  James Troup  <james@nocrew.org>
3539
3540         * katie (check_changes): initalize `architecture' dictionary in
3541         changes global so that if we can't parse the changes file for
3542         whatever reason we don't undef later on.
3543
3544         * utils.py (parse_changes): fix handling of multi-line fields
3545         where the first line did have data.
3546
3547 2001-05-05  Anthony Towns  <ajt@debian.org>
3548
3549         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
3550         (It should always have been there. Ooopsy.)
3551
3552 2001-05-03  Anthony Towns  <ajt@debian.org>
3553
3554         * jenna: Cleanup packages that move from arch:any to arch:all or
3555         vice-versa.
3556
3557 2001-04-24  Anthony Towns  <ajt@debian.org>
3558
3559         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
3560         cope with debian-installer and boot-floppies' md5sum.txt.
3561
3562 2001-04-16  James Troup  <james@nocrew.org>
3563
3564         * katie (check_changes): add missing %s format string argument.
3565         (stable_install): temporary work around for morgue location to
3566         move installed changes files into.
3567         (stable_install): helps if you actually read in the template.
3568         (manual_reject): fix for editing of reject messages which was
3569         using the wrong variable name.
3570
3571         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
3572
3573 2001-04-13  James Troup  <james@nocrew.org>
3574
3575         * katie (manual_reject): Cc the installer.
3576         (reject): don't.
3577         (check_changes): remove unused maintainer-determination code.
3578         (update_subst): add support for Changed-By when setting the
3579         *MAINTAINER* variables.
3580
3581         * rene (bar): new function to check for packages on architectures
3582         when they shouldn't be.
3583
3584         * natalie.py (main): use fubar() and warn() from utils.
3585
3586         * utils.py (whoami): new mini-function().
3587         * melanie (main): use it.
3588         * katie (manual_reject): likewise.
3589
3590 2001-04-03  James Troup  <james@nocrew.org>
3591
3592         * katie (action): ignore exceptions from os.path.getmtime() so we
3593         don't crash on non-existent changes files (e.g. when they are
3594         moved between the start of the install run in cron.daily and the
3595         time we get round to processing them).
3596
3597         * madison (main): also list source and accept -s/--suite.
3598
3599         * jenna (generate_src_list): missing \n in error message.
3600
3601         * katie (update_subst): add sane defaults for when changes is
3602         skeletal.
3603
3604 2001-03-29  James Troup  <james@nocrew.org>
3605
3606         * melanie (main): use fubar() and warn() from utils.  Remember who
3607         the maintainer for the removed packages are and display that info
3608         to the user.  Readd support for melanie-specific Bcc-ing that got
3609         lost in the TemplateSubst transition.
3610
3611         * utils.py (fubar): new function.
3612         (warn): like wise.
3613
3614         * db_access.py (get_maintainer): as below.
3615
3616         * charisma (get_maintainer): moved the bulk of this function to
3617         db_access so that melanie can use it too.
3618
3619         * claire.py (find_dislocated_stable): restrict the override join
3620         to those entries where the suite is stable; this avoids problems
3621         with packages which have moved to new sections (e.g. science)
3622         between stable and unstable.
3623
3624 2001-03-24  James Troup  <james@nocrew.org>
3625
3626         * catherine (poolize): new function; not really independent of
3627         main() fully, yet.
3628         (main): use it.
3629
3630         * katie (stable_install): __SUITE__ needs to be space prefixed
3631         because buildd's check for 'INSTALLED$'.
3632
3633 2001-03-22  James Troup  <james@nocrew.org>
3634
3635         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
3636
3637         * jenna: rewritten; now does deletions on a per-suite level
3638         instead of a per-suite-component-architecture-type level.  This
3639         allows mutli-component packages to be auto-cleaned (and as a
3640         bonus, reduces the code size and duplication).
3641
3642 2001-03-22  Anthony Towns  <ajt@debian.org>
3643
3644         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
3645         instead of just giving a gpg error.
3646
3647 2001-03-21  James Troup  <james@nocrew.org>
3648
3649         * madison (main): use apt_pkg.VersionCompare to sort versions so
3650         that output is correctly sorted for packages like debhlper.
3651         Noticed by ajt@.
3652
3653         * tea (check_source_in_one_dir): actually find problematic source
3654         packages.
3655
3656         * katie (check_dsc): remember the orig.tar.gz's location ID if
3657         it's not in a legacy suite.
3658         (check_diff): we don't use orig_tar_id.
3659         (install): add code to handle sourceful diff-only upload of
3660         packages which change components by copying the .orig.tar.gz into
3661         the new component, if it doesn't already exist there.
3662         (process_it): reset orig_tar_location (as above).
3663
3664         * melanie (main): use template substiution for the bug closing
3665         emails.
3666         (main): don't hardcode bugs.debian.org or packages.debian.org
3667         either; use configuration items.
3668
3669         * katie: likewise.
3670
3671         * natalie.py (init): use None rather than 'localhost' for the
3672         hostname given to pg.connect.
3673
3674         * utils.py (TemplateSubst): new function; lifted from
3675         userdir-ldap.
3676
3677 2001-03-21  Ryan Murray  <rmurray@debian.org>
3678
3679         * katie (announce): fix the case of non-existent
3680         Suite::$SUITE::Announce.
3681
3682 2001-03-20  Ryan Murray  <rmurray@debian.org>
3683
3684         * debian/rules (binary-indep): install melanie into /usr/bin/ not
3685         /usr/.
3686
3687         * alyson (main): use config variable for database name.
3688         * andrea (main): likewise.
3689         * catherine (main): likewise.
3690         * charisma (main): likewise.
3691         * cindy (main): likewise.
3692         * claire.py (main): likewise.
3693         * denise (main): likewise.
3694         * heidi (main): likewise.
3695         * jenna (main): likewise.
3696         * katie (main): likewise.
3697         * madison (main): likewise.
3698         * melanie (main): likewise.
3699         * neve (main): likewise.
3700         * rhona (main): likewise.
3701         * tea (main): likewise.
3702
3703 2001-03-15  James Troup  <james@nocrew.org>
3704
3705         * rhona (check_sources): fixed evil off by one (letter) error
3706         which was causing only .dsc files to be deleted when cleaning
3707         source packages.
3708
3709         * charisma (get_maintainer_from_source): remove really stupid and
3710         gratuitous IN sub-query and replace with normal inner join.
3711         (main): connect as read-only user nobody.
3712
3713         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
3714         with EXISTS.
3715         (check_files): likewise; still disabled by default though.
3716         (clean_binaries): add ' seconds' to the mysterious number in the
3717         output.
3718         (clean): likewise.
3719
3720         * tea (check_files): add missing global declaration on db_files.
3721
3722 2001-03-14  James Troup  <james@nocrew.org>
3723
3724         * rhona: rewritten large chunks. Removed a lot of the silly
3725         selecting into dictionaries and replaced it with 'where exists'
3726         based sub queries.  Added support for StayOfExecution.  Fix the
3727         problem with deleting dsc_files too early and disable cleaning of
3728         unattached files.
3729
3730 2001-03-14  Anthony Towns  <ajt@debian.org>
3731
3732         * katie (announce): also check Changed-By when trying to detect
3733         NMUs.
3734
3735 2001-03-06  Anthony Towns  <ajt@debian.org>
3736
3737         * ziyi (main): Generate Release.gpg files as well, using the key from
3738         Dinstall::SigningKey in katie.conf, if present. That key has to be
3739         passwordless, and hence kept fairly secretly.
3740
3741 2001-03-02  James Troup  <james@nocrew.org>
3742
3743         * utils.py (str_isnum): new function; checks to see if the string
3744         is a number.
3745
3746         * shania (main): fix _hideous_ bug which was causing all files > 2
3747         weeks old to be deleted from incoming, even if they were part of a
3748         valid upload.
3749
3750 2001-02-27  James Troup  <james@nocrew.org>
3751
3752         * melanie (main): accept new argument -C/--carbon-copy which
3753         allows arbitarty carbon-copying of the bug closure messages.
3754         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
3755         separate variable.
3756
3757 2001-02-27  Anthony Towns  <ajt@debian.org>
3758
3759         * ziyi: new program; generates Release files.
3760
3761 2001-02-25  James Troup  <james@nocrew.org>
3762
3763         * katie (reject): add missing '\n' to error message.
3764         (manual_reject): likewise.
3765         (install): catch exceptions from moving the changes file into DONE
3766         and ignore them.
3767
3768         * tea (check_md5sums): new function.
3769
3770 2001-02-25  Michael Beattie  <mjb@debian.org>
3771
3772         * melanie: use $EDITOR if available.
3773
3774 2001-02-15  James Troup  <james@nocrew.org>
3775
3776         * utils.py (parse_changes): don't crash and burn on empty .changes
3777         files.  Symptoms noticed by mjb@.
3778
3779 2001-02-15  Adam Heath  <doogie@debian.org>
3780
3781         * denise (main): use an absolute path for the output filename.
3782
3783         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
3784         compile errors with postgresql-dev >= 7.0.
3785
3786 2001-02-12  James Troup  <james@nocrew.org>
3787
3788         * rene: initial version.
3789
3790         * andrea: initial version.
3791
3792         * catherine (main): remove obsolete assignment of arguments.
3793
3794 2001-02-09  James Troup  <james@nocrew.org>
3795
3796         * catherine: first working version.
3797
3798 2001-02-06  James Troup  <james@nocrew.org>
3799
3800         * katie (check_files): validate the priority field; i.e. ensure it
3801         doesn't contain a '/' (to catch people prepending the priority
3802         with the component rather than the section).
3803         (check_override): don't warn about source packages; the only check
3804         is on section and we have no GUI tools that would use the Section
3805         field for a Sources file.
3806         (announce): use tags rather than severities for NMUs.  Requested
3807         by Josip Rodin <joy@>. [#78035]
3808
3809 2001-02-04  James Troup  <james@nocrew.org>
3810
3811         * tea (check_override): new function; ensures packages in suites
3812         are also in the override file.  Thanks to bod@ for noticing that
3813         such packages existed.
3814
3815         * katie: move file type compiled regular expressions to utils as
3816         catherine uses them too.
3817         (check_changes): always default maintainer822 to the installer
3818         address so that any bail out won't cause undefs later.
3819         (check_files): update file type re's to match above.
3820         (stable_install): likewise.
3821         (reject): handle any except from moving the changes files.  Fixes
3822         crashes on unreadable changes files.
3823
3824         * melanie (main): add an explanation of why things are not removed
3825         from testing.
3826
3827 2001-01-31  James Troup  <james@nocrew.org>
3828
3829         * melanie (main): ignore a) no message, b) removing from stable or
3830         testing when invoked with -n/--no-action.
3831
3832         * katie (check_override): lower section before checking to see if
3833         we're whining about 'non-US' versus 'non-US/main'.
3834
3835         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
3836         function so that we can use inside of PostgreSQL.
3837
3838 2001-01-28  James Troup  <james@nocrew.org>
3839
3840         * katie: updated to pass new flag to parse_changes() and deal with
3841         the exception raised on invalid .dsc's if appropriate.
3842         * shania (main): likewise.
3843         * melanie (main): likewise.
3844
3845         * tea (check_dscs): new function to validate all .dsc files in
3846         unstable.
3847
3848         * utils.py (parse_changes): if passed an additional flag, validate
3849         the .dsc file to ensure it's extractable by dpkg-source.
3850         Requested by Ben Collins <bcollins@>.
3851
3852 2001-01-27  James Troup  <james@nocrew.org>
3853
3854         * madison (main): connect to the DB as nobody.
3855
3856         * katie (check_files): remove support for -r/--no-version-check
3857         since it makes no sense under katie (jenna will automatically
3858         remove the (new) older version) and was evil in any event.
3859         (check_changes): add missing new line to rejection message.
3860         (check_dsc): likewise.
3861         (process_it): reset reject_message here.
3862         (main): not here.  Also remove support for -r.
3863
3864 2001-01-26  James Troup  <james@nocrew.org>
3865
3866         * katie (check_override): don't whine about 'non-US/main' versus
3867         'non-US'.
3868
3869 2001-01-26  Michael Beattie  <mjb@debian.org>
3870
3871         * natalie.py (usage): new function.
3872         (main): use it.
3873
3874 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
3875
3876         * update-mirrorlists: Update README.non-US too (request from Joy).
3877
3878 2001-01-25  James Troup  <james@nocrew.org>
3879
3880         * katie (reject): catch any exception from utils.move() and just
3881         pass, we previously only caught can't-overwrite errors and not
3882         can't-read ones.
3883
3884         * jenna (generate_src_list): use ORDER BY in selects to avoid
3885         unnecessary changes to Packages files.
3886         (generate_bin_list): likewise.
3887
3888         * utils.py (extract_component_from_section): separated out from
3889         build_file_list() as it's now used by claire too.
3890
3891         * claire.py (find_dislocated_stable): rewrite the query to extract
3892         section information and handle component-less locations properly.
3893         Thanks to ajt@ for the improved queries.
3894         (fix_component_section): new function to fix components and
3895         sections.
3896
3897 2001-01-23  James Troup  <james@nocrew.org>
3898
3899         * katie (check_files): set file type for (u?)debs first thing, so
3900         that if we continue, other functions which rely on file type
3901         existing don't bomb out.  If apt_pkg or apt_inst raise an
3902         exception when parsing the control file, don't try any other
3903         checks, just drop out.
3904         (check_changes): new test to ensure there is actually a target
3905         distribution.
3906
3907 2001-01-22  James Troup  <james@nocrew.org>
3908
3909         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
3910         <grin@>.
3911         (check_changes): when mapping to unstable, remember to actually
3912         add unstable to the suite list and not just remove the invalid
3913         suite.
3914
3915 2001-01-21  James Troup  <james@nocrew.org>
3916
3917         * katie (check_files): catch exceptions from debExtractControl()
3918         and reject packages which raise any.
3919
3920 2001-01-19  James Troup  <james@nocrew.org>
3921
3922         * katie (check_signature): basename() file name in rejection
3923         message.
3924
3925 2001-01-18  James Troup  <james@nocrew.org>
3926
3927         * katie (in_override_p): remember the section and priority from
3928         the override file so we can check them against the package later.
3929         (check_override): new function; checks section and priority (for
3930         binaries) from the package against the override file and mails the
3931         maintainer about any disparities.
3932         (install): call check_override after announcing the upload.
3933
3934 2001-01-16  James Troup  <james@nocrew.org>
3935
3936         * utils.py (build_file_list): catch ValueError's from splitting up
3937         the files field and translate it into a parse error.
3938
3939         * tea: add support for finding unreferenced files.
3940
3941         * katie (in_override_p): add support for suite-aliasing so that
3942         proposed-updates uploads work again.
3943         (check_changes): catch parses errors from utils.build_file_list().
3944         (check_dsc): likewise.
3945         (check_diff): yet more dpkg breakage so we require even newer a
3946         version.
3947
3948         * jenna (generate_bin_list): don't do nasty path munging that's no
3949         longer needed.
3950
3951         * denise (main): support for non-US; and rename testing's override
3952         files so they're based on testing's codename.
3953
3954 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
3955
3956         * melanie: add to the bug closing message explaining what happens
3957         (or rather doesn't) with bugs against packages that have been
3958         removed.
3959
3960 2001-01-14  James Troup  <james@nocrew.org>
3961
3962         * charisma (main): fix silly off-by-one error; suite priority
3963         checking was done using "less than" rather than "less than or
3964         equal to" which was causing weird hesienbugs with wrong Maintainer
3965         fields.
3966
3967 2001-01-10  James Troup  <james@nocrew.org>
3968
3969         * katie (in_override_p): adapted to use SQL-based overrides.
3970         read_override_file function disappears.
3971
3972         * db_access.py: add new functions get_section_id, get_priority_id
3973         and get_override_type_id.
3974         (get_architecture_id): return -1 if the architecture is not found.
3975
3976         * heidi: switch %d -> %d in all SQL queries.
3977         (get_list): Use string.join where appropriate.
3978
3979         * rhona (in_override_p): don't die if the override file doesn't
3980         exist.
3981         (main): warn if the override file doesn't exist.
3982
3983         * alyson: new script; will eventually sync the config file and the
3984         SQL database.
3985
3986         * natalie.py: new script; manipulates overrides.
3987
3988         * melanie: new script; removes packages from suites.
3989
3990 2001-01-08  James Troup  <james@nocrew.org>
3991
3992         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
3993         anything it just changed the symptom.  Recognise the new breakage
3994         and reject them too.
3995
3996 2001-01-07  James Troup  <james@nocrew.org>
3997
3998         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
3999         to the .changes file, be sure to set up files[filename]["type"]
4000         too.
4001
4002 2001-01-06  James Troup  <james@nocrew.org>
4003
4004         * katie (check_diff): new function; detects bad diff files
4005         produced by dpkg 1.8.1 and rejects thems.
4006         (process_it): call check_diff().
4007         (check_dsc): gar.  Add support for multiple versions of the
4008         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
4009         and size against all versions and use one which matches if
4010         possible and exclude any that don't from being poolized to avoid
4011         file overwrites.  Thanks to broonie@ for providing the example.
4012         (install): skip any files marked as excluded as above.
4013
4014 2001-01-05  James Troup  <james@nocrew.org>
4015
4016         * heidi (process_file): add missing argument to error message.
4017
4018 2001-01-04  James Troup  <james@nocrew.org>
4019
4020         * heidi (main): fix handling of multiple files by reading all
4021         files not just the first file n times (where n = the number of
4022         files passed as arguments).
4023
4024 2001-01-04  Anthony Towns  <ajt@debian.org>
4025
4026         * katie (check_dsc): proper fix for the code which locates the
4027         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
4028
4029 2000-12-20  James Troup  <james@nocrew.org>
4030
4031         * rhona: replace IN's with EXISTS's to make DELETE time for
4032         binaries and source sane on auric.  Add a -n/--no-action flag and
4033         make it stop actions if used.  Fixed a bug in binaries deletion
4034         with no StayOfExecution (s/</<=/).  Add working -h/--help and
4035         -V/--version.  Giving timing info on deletion till I'm sure it's
4036         sane.
4037
4038         * katie (check_changes): map testing to unstable.
4039
4040         * madison: new script; shows versions in different architectures.
4041
4042         * katie (check_dsc): ensure size matches as well as md5sum;
4043         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
4044         #69702.
4045
4046 2000-12-19  James Troup  <james@nocrew.org>
4047
4048         * katie (reject): ignore the "can't overwrite file" exception from
4049         utils.move() and leave the files where they are.
4050         (reject): doh! os.access() test was reversed so we only tried to
4051         move files which didn't exist... replaced with os.path.exists()
4052         test the right way round.
4053
4054         * utils.py (move): raise an exception if we can't overwrite the
4055         destination file.
4056         (copy): likewise.
4057
4058 2000-12-18  James Troup  <james@nocrew.org>
4059
4060         * rhona: first working version.
4061
4062         * db_access.py (get_files_id): force both sizes to be integers.
4063
4064         * katie (main): use size_type().
4065
4066         * utils.py (size_type): new function; pretty prints a file size.
4067
4068 2000-12-17  James Troup  <james@nocrew.org>
4069
4070         * charisma (main): do version compares so that older packages do
4071         not override newer ones and process source first as source wins
4072         over binaries in terms of who we think of as the Maintainer.
4073
4074 2000-12-15  James Troup  <james@nocrew.org>
4075
4076         * katie (install): use the files id for the .orig.tar.gz from
4077         check_dsc().
4078         (install): limit select for legacy source to a) source in legacy
4079         or legacy-mixed type locations and b) distinct on files.id.
4080         (install): rather than the bizarre insert new, delete old method
4081         for moving legacy source into the pool, use a simple update of
4082         files.
4083         (process_it): initalize some globals before each process.
4084
4085 2000-12-14  James Troup  <james@nocrew.org>
4086
4087         * katie (in_override_p): index on binary_type too since .udeb
4088         overrides are in a different file.
4089         (read_override_file): likewise.
4090         (check_files): correct filename passed to get_files_id().
4091         (check_dsc): we _have_ to preprend '/' to the filename to avoid
4092         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
4093         (check_dsc): remember the files id of the .orig.tar.gz, not the
4094         location id.
4095
4096 2000-12-13  James Troup  <james@nocrew.org>
4097
4098         * utils.py (poolify): force the component to lower case except for
4099         non-US.
4100
4101         * katie (in_override_p): handle .udeb-specific override files.
4102         (check_files): pass the binary type to in_override_p().
4103         (check_dsc): remember the location id of the old .orig.tar.gz in
4104         case it's not in the pool.
4105         (install): use location id from dsc_files; which is where
4106         check_dsc() puts it for old .orig.tar.gz files.
4107         (install): install files after all DB work is complete.
4108         (reject): basename() the changes filename.
4109         (manual_reject): likewise.
4110
4111         * shania: new progam; replaces incomingcleaner.
4112
4113 2000-12-05  James Troup  <james@nocrew.org>
4114
4115         * katie (check_changes): if inside stable and can't find files
4116         from the .changes; assume it's installed in the pool and chdir()
4117         to there.
4118         (check_files): we are not installing for stable installs, so don't
4119         check for overwriting existing files.
4120         (check_dsc): likewise.
4121         (check_dsc): reorder .orig.tar.gz handling so that we search in
4122         the pool first and only then fall back on any .orig.tar.gz in the
4123         cwd; this avoids false positives on the overwrite check when
4124         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
4125         (install): if this is a stable install, bail out to
4126         stable_install() immediately.
4127         (install): dsc_files handling was horribly broken. a) we need to
4128         add files from the .dsc and not the .changes (duh), b) we need to
4129         add the .dsc file itself to dsc_files (to be consistent with neve
4130         if for no other reason).
4131         (stable_install): new function; handles installs from inside
4132         proposed-updates to stable.
4133         (acknowledge_new): basename changes_filename before doing
4134         anything.
4135         (process_it): absolutize the changes filename to avoid the
4136         requirement of being in the same directory as the .changes file.
4137         (process_it): save and restore the cwd as stable installs can
4138         potentially jump into the pool to find files.
4139
4140         * jenna: dislocated_files support using claire.
4141
4142         * heidi (process_file): select package field from binaries
4143         explicitly.
4144
4145         * db_access.py (get_files_id): fix cache key used.
4146
4147         * utils.py (build_file_list): fix 'non-US/non-free' case in
4148         section/component splitting.
4149         (move): use os.path.isdir() rather than stat.
4150         (copy): likewise.
4151
4152         * claire.py: new file; stable in non-stable munger.
4153
4154         * tea: new file; simply ensures all files in the DB exist.
4155
4156 2000-12-01  James Troup  <james@nocrew.org>
4157
4158         * katie (check_dsc): use regex_safe().
4159         (check_changes): typo in changes{} key:
4160         s/distributions/distribution/.
4161         (install): use changes["source"], not files[file]["source"] as the
4162         latter may not exist and the former is used elsewhere.  Commit the
4163         SQL transaction earlier.
4164
4165         * utils.py (regex_safe): new function; escapes characters which
4166         have meaning to SQL's regex comparison operator ('~').
4167
4168 2000-11-30  James Troup  <james@nocrew.org>
4169
4170         * katie (install): pool_location is based on source package name,
4171         not binary package.
4172
4173         * utils.py (move): if dest is a directory, append the filename
4174         before chmod-ing.
4175         (copy): ditto.
4176
4177         * katie (check_files): don't allow overwriting of existing .debs.
4178         (check_dsc): don't allow overwriting of existing source files.
4179
4180 2000-11-27  James Troup  <james@nocrew.org>
4181
4182         * katie (check_signature): don't try to load rsaref; it's
4183         obsolete.
4184         (in_override_p): don't try to lookup override entries for packages
4185         with an invalid suite name.
4186         (announce): don't assume the suite name is valid; use Find() to
4187         lookup the mailing list name for announcements.
4188
4189         * utils.py (where_am_i): typo; hostname is in the first element,
4190         not second.
4191
4192         * db_access.py (get_suite_id): return -1 on an unknown suite.
4193
4194 2000-11-26  James Troup  <james@nocrew.org>
4195
4196         * katie (install): fix CopyChanges handling; typo in in checking
4197         Cnf for CopyChanges flag and was calling non-existent function
4198         copy_file.
4199
4200         * utils.py (copy): new function; clone of move without the
4201         unlink().
4202
4203 2000-11-25  James Troup  <james@nocrew.org>
4204
4205         * utils.py (build_file_list): handle non-US prefixes properly
4206         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
4207         + 'libs' not 'non-US/libs').
4208         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
4209         delays.  This is possibly(/probably) exim speicifc and (like other
4210         sendmail options) needs to be in the config file.
4211
4212 2000-11-24  James Troup  <james@nocrew.org>
4213
4214         * rhona (check_sources): we need file id from dsc_files; not id.
4215         Handle non .dsc source files being re-referenced in dsc_files.
4216
4217         * katie (in_override_p): strip out any 'non-US' prefix.
4218         (check_files): use utils.where_am_i() rather than hardcoding.
4219         (check_files): validate the component.
4220         (install): use utils.where_am_i() rather than hardcoding.
4221         (install): fix mail to go to actual recepient.
4222         (reject): likewise.
4223         (manual_reject): likewise.
4224         (acknowledge_new): likewise.
4225         (announce): likewise.
4226
4227         * db_access.py (get_component_id): ignore case when searching for
4228         the component and don't crash if the component can't be found, but
4229         return -1.
4230         (get_location_id): handle -1 from get_component_id().
4231
4232         * jenna (generate_src_list): don't bring 'suite' into our big
4233         multi-table-joining select as we already know the 'suite_id'.
4234         (generate_bin_list): likewise.
4235
4236         * neve (main): don't quit if not on ftp-master.
4237         (process_packages): remove unused variable 'suite_codename'.
4238
4239         * utils.py (move): actually move the file.
4240         (build_file_list): handle non-US prefixes in the section.
4241
4242         * catherine (main): use which_conf_file().
4243         * charisma (main): likewise.
4244         * heidi (main): likewise.
4245         * jenna (main): likewise.
4246         * katie (main): likewise.
4247         * neve (main): likewise.
4248         * rhona (main): likewise.
4249
4250         * utils.py (where_am_i): new routine; determines the archive as
4251         understood by other 'dak' programs.
4252         (which_conf_file): new routine; determines the conf file to read.
4253
4254 2000-11-17  James Troup  <james@nocrew.org>
4255
4256         * katie (install): fix where .changes files for proposed-updates
4257         go.
4258
4259 2000-11-04  James Troup  <james@nocrew.org>
4260
4261         * jenna (main): handle architecture properly if no
4262         -a/--architecture argument is given, i.e. reset architecture with
4263         the values for the suite for each suite.
4264
4265         * Add apt_pkg.init() to the start of all scripts as it's now
4266         required by python-apt.
4267
4268 2000-10-29  James Troup  <james@nocrew.org>
4269
4270         * jenna (generate_bin_list): take an additional argument 'type'
4271         and use it in the SELECT.
4272         (main): if processing component 'main', process udebs and debs.
4273
4274         * neve (process_packages): set up 'type' in 'binaries' (by
4275         assuming .deb).
4276
4277         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
4278         (check_files): set up files[file]["dbtype"].
4279         (install): use files[file]["dbtype"] to set up the 'type' field in
4280         the 'binaries' table.
4281
4282         * init_pool.sql: add a 'type' field to the 'binaries' table to
4283         distinguisgh between ".udeb" and ".deb" files.
4284
4285         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
4286         dest ? dirname(dest)" type check instead.
4287
4288         * katie (check_dsc): handle the case of an .orig.tar.gz not found
4289         in the pool without crashing.  Also handle the case of being asked
4290         to look for something other than an .orig.tar.gz in the pool.
4291
4292 2000-10-26  James Troup  <james@nocrew.org>
4293
4294         * katie (install): fix filenames put into files table during
4295         poolification of legacy source.
4296
4297         * utils.py (move): work around a bug in os.path.basename() which
4298         cunningly returns '' if there is a trailing slash on the path
4299         passed to it.
4300
4301         * katie (check_dsc): Remove more cruft.  If we find the
4302         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
4303         location, make a note of that so we can fix things in install().
4304         (install): as above.  Move any old source out of legacy locations
4305         so that 'apt-get source' will work.
4306         (process_it): reset the flag that indicates to install that the
4307         source needs moved.
4308
4309         * cron.daily: more.  Nowhere near complete yet though.
4310
4311         * katie (install): don't run os.makedirs, a) utils.move() does
4312         this now, b) we weren't removing the user's umask and were
4313         creating dirs with SNAFU permissions.
4314         (check_dsc): rewrite the .orig.tar.gz handling to take into
4315         account, err, package pools.  i.e. look anywhere in the pool
4316         rather than faffing around with two simple paths.
4317
4318         * neve (process_sources): add the .dsc to dsc_files too.
4319
4320 2000-10-25  James Troup  <james@nocrew.org>
4321
4322         * neve (process_sources): don't duplicate .orig.tar.gz's.
4323
4324 2000-10-23  James Troup  <james@nocrew.org>
4325
4326         * utils.py (re_extract_src_version): moved here.
4327
4328         * neve: move re_extract_src_version to utils.
4329         (process_packages): reflect change.
4330
4331         * katie (install): reflect change.
4332
4333 2000-10-19  James Troup  <james@nocrew.org>
4334
4335         * jenna (generate_src_list): handle locations with null
4336         components.
4337         (generate_bin_list): likewise.
4338