]> git.decadent.org.uk Git - dak.git/blob - ChangeLog
Added Changes file to the 822 queue report
[dak.git] / ChangeLog
1 2008-12-30  Michael Casadevall  <sonicmctails@gmail.com>
2
3         * src/sql-aptvc.cpp     - Fixed to work on modern postgresql version
4
5         * src/Makefile          - Gave it a brain on finding postgres headers
6
7         * queue-report.py       - Added changes file to the 822 output for QA team
8
9 2008-12-30  Joerg Jaspert  <joerg@debian.org>
10
11         * config/debian/cron.hourly: Generate the 822 format for accepted,
12         new, byhand and proposed-updates
13
14 2008-12-30  Michael Casadevall <sonicmctails@gmail.com>
15
16         * dak/queue_report.py   - Added directories option to queue report
17
18 2008-12-28  Frank Lichtenheld  <djpig@debian.org>
19
20         * dak/override.py (main): Handle source-only packages better
21
22 2008-12-26  Michael Casadevall <sonicmctails@gmail.com>
23
24        * dak/queue_report.py - Added Last Modified in asctime() for QA team
25
26 2008-12-23  Michael Casadevall <sonicmctails@gmail.com>
27
28         * dak/queue_report.py - Added 822 output format
29
30         * dak/queue_report.py - Fixed display of BYHAND packages
31
32         * dak/queue_report.py - Added queue field
33
34         * config/debian/dak.conf - Added 822 output location
35
36         * dak/process_accepted.py - Added orig.tar.gz copying when going
37           inbetween two components
38
39 2008-12-23  Joerg Jaspert  <joerg@debian.org>
40
41         * dak/make_suite_file_list.py (stable_dislocation_p): Removed
42
43         * config/debian/dak.conf, config/debian-security/dak.conf: Remove "StableDislocationSupport "false";"
44
45 2008-12-19  Joerg Jaspert  <joerg@debian.org>
46
47         * daklib/utils.py: move the html escape stuff here.
48
49         * dak/examine_package.py: Remove the html escape stuff.
50
51         * dak/queue_report.py: lotsa html changes to get more info on the
52         page and to get Tinchos css foo working.
53
54         * web/style.css: Added new stuff from Tincho
55
56 2008-12-18  Philipp Kern  <pkern@debian.org>
57
58         * config/debian-security/cron.buildd: simplify wanna-build update
59         by calling a trigger script on the wanna-build host
60         * config/debian-security/cron.daily: no need to refresh
61         packages-arch-specific anymore
62
63 2008-12-16  Joerg Jaspert  <joerg@debian.org>
64
65         * config/debian/cron.dinstall: Run logs.py as last command before
66         we mail the log.
67
68         * tools/logs.py: Added script from Thomas.
69         Modifications from me:
70          - Use path entries that fit ftpmaster dak user
71          - Make the bz2 extension optional for log files, so we can run it
72         out of cron.dinstall, where it is not yet compressed.
73          - Also show the two largest time killers in the totals graph.
74          - do not drop old entries from the cachefile
75          - fiddle with the color palette
76
77 2008-12-15  Joerg Jaspert  <joerg@debian.org>
78
79         * config/debian/cron.hourly: Call the removals.pl
80
81 2008-12-09  Joerg Jaspert  <joerg@debian.org>
82
83         * config/debian/cron.hourly: Added queue_rss.py to hourly cron.
84
85 2008-12-09  Filippo Giunchedi <filippo@debian.org>
86
87         * tools/queue_rss.py: Added, generates RSS feeds of NEW.
88
89 2008-12-09  Philipp Kern  <pkern@debian.org>
90
91         * daklib/queue.py (cross_suite_version_check): add an additional
92         parameter to specify if an upload is sourceful or not; do not reject
93         uploads that do not satisfy the "must be newer than" criteria and
94         are binary-only
95         * daklib/queue.py (check_source_against_db, check_binary_against_db):
96         invoke cross_suite_version_check as above
97
98 2008-12-04  Philipp Kern  <pkern@debian.org>
99
100         * dak/process_new.py (recheck): call reject for
101         Upload.check_{binary,source}_against_db with an empty prefix to not
102         reject on warnings
103
104 2008-11-30  Philipp Kern  <pkern@debian.org>
105
106         * dak/process_unchecked.py (do_stableupdate, do_oldstableupdate):
107         move files to NEW for {old,}stable-proposed-updates world-readable
108         (Closes: #368056)
109
110 2008-11-30  Joerg Jaspert  <joerg@debian.org>
111
112         * config/debian/apt.conf: Lets generate experimental content
113         files.
114
115         * dak/daklib/queue.py (Upload.cross_suite_version_check): Add a
116         few () to make cross_suite_version_check finally work as
117         intended (well, we hope). Thanks to Philipp Kern for spotting this.
118
119 2008-11-28  Mark Hymers  <mhy@debian.org>
120
121         * dak/new_security_install.py: Don't attempt to delete the .changes files
122         which have already been moved to queue/done by now.
123
124 2008-11-27  Mark Hymers  <mhy@debian.org>
125
126         * dak/new_security_install.py: Attempt to tidy up the buildd queue.  The
127         buildd team believes that the fact that the packages are in the security
128         pool after this point should be good enough.
129
130 2008-11-25  Joerg Jaspert  <joerg@debian.org>
131
132         * dak/process_unchecked.py (queue_(un)embargo): (Hopefully) enable
133         sending mails again, which got broken when testing-security
134         handling was (not completly correctly) implemented. Closes: #440004
135
136 2008-11-24  Joerg Jaspert  <joerg@debian.org>
137
138         * dak/process_unchecked.py (check_signed_by_key): remove the
139         binary-upload restriction stuff. unused.
140
141         * config/debian-security/apt.conf.buildd: byebye sarge
142
143         * scripts/nfu/get-w-b-db: remove m68k
144
145         * scripts/debian/update-ftpstats: remove m68k
146
147         * config/debian/dak.conf: remove m68k
148         remove the binary-upload-restrictions
149
150         * config/debian/vars (archs): Remove m68k
151
152 2008-11-23  Joerg Jaspert  <joerg@debian.org>
153
154         * dak/process_unchecked.py (check_files): fix this armel mess
155
156         * config/debian-security/dak.conf: Set ValidTime
157
158         * config/debian-security/cron.weekly: Added
159
160 2008-11-17  Joerg Jaspert  <joerg@debian.org>
161
162         * dak/security-install.py: Removed, no longer in use.
163
164 2008-11-16  Joerg Jaspert  <joerg@debian.org>
165
166         * scripts/debian/mkfilesindices: useless typical, doesnt have
167         i18n/ dirs. Force them in (i hope).
168
169 2008-11-15  Thomas Viehmann <tv@beamnet.de>
170
171         * dak/show_deferred.py: handle uploads that do not close bugs
172
173 2008-11-11  Joerg Jaspert  <joerg@debian.org>
174
175         * config/debian/dak.conf: good bye oldstable/o-p-u
176
177 2008-11-10  Joerg Jaspert  <joerg@debian.org>
178
179         * config/debian/cron.unchecked: how about us ignoring bugs.d.o
180         down? It's not like it is time critical or something to transfer
181         this stuff, it doesn't hurt to have it there a bit later...
182
183 2008-11-08  Joerg Jaspert  <joerg@debian.org>
184
185         * config/debian/cron.hourly: Create new tracefile format.
186
187 2008-11-05  Joerg Jaspert  <joerg@debian.org>
188
189         * dak/new_security_install.py (_do_Approve): This sudo call
190         definitely wants the -H option.
191
192 2008-11-01  Joerg Jaspert  <joerg@debian.org>
193
194         * dak/process_unchecked.py (check_files): Also check the
195         upload_suite for uploads. I guess we could kill the default_suite
196         totally, but for now we just look into the upload_suite one too.
197
198         * config/debian-security/dak.conf: Let DefaultSuite be stable
199
200 2008-10-27  Joerg Jaspert  <joerg@debian.org>
201
202         * scripts/debian/mkfilesindices: Remove oldstable
203
204         * config/debian/vars: Remove sarge
205
206         * config/debian/dak.conf: Untouchable o-p-u, until we removed all
207         of sarge and its files.
208
209         * config/debian/apt.conf.oldstable: Removed
210
211         * config/debian/apt.conf: Remove oldstable
212
213 2008-10-14  Thomas Viehmann <tv@beamnet.de>
214
215         * dak/show_deferred.py: produce .changes and improve status
216
217 2008-10-07  Joerg Jaspert  <joerg@debian.org>
218
219         * config/debian/cron.dinstall: Only keep the last 60 days of
220         dinstall logfiles on disc.
221
222 2008-10-05  Thomas Viehmann <tv@beamnet.de>
223
224         * daklib/database.py: added get_suites
225         * dak/dak.py, dak/show_deferred.py: add show-deferred to dak.
226
227 2008-09-23  Joerg Jaspert  <joerg@debian.org>
228
229         * config/debian/dak.conf: Add the validtime fields, set to 7
230         days.
231
232         * dak/generate_releases.py (main): Add a "Valid-Until" line into
233         our release files, meaning "$receiver shouldn't trust this files
234         after that date". Should be used by apt and similar tools to
235         detect some kind of MITM attacks, see #499897
236
237 2008-09-21  Joerg Jaspert  <joerg@debian.org>
238
239         * config/debian/cron.hourly: Generate the DEFERRED queue
240         overview.
241
242 2008-09-13  Philipp Kern  <pkern@debian.org>
243
244         * dak/queue.py (dump_vars): make .dak u,g=rw,o=r; James'
245         assumption (as stated in 2002-05-18's ChangeLog entry)
246         was that people will use the information therein albeit
247         it is "just" a duplication of information present in
248         other control files; people should still not use it
249         as source of information but access to those files makes
250         dak debugging easier and there is no leak of sensitive
251         information involved
252
253 2008-09-12  Philipp Kern  <pkern@debian.org>
254
255         * dak/new_security_install.py (actually_upload): remove
256         oldstable-security/amd64 check; Etch, as the next oldstable,
257         already had proper amd64 support
258
259 2008-09-12  Joerg Jaspert  <joerg@debian.org>
260
261         * scripts/debian/update-pseudopackages.sh: s/i/file/
262
263 2008-09-11  Joerg Jaspert  <joerg@debian.org>
264
265         * config/debian/pseudo-packages.description, ...maintainers:
266         Removed, now with the bts people
267
268         * scripts/debian/update-pseudopackages.sh: Added, fetching
269         pseudo-packages from new bts location
270
271         * scripts/debian/mkmaintainers: Use new location
272
273 2008-09-08  Philipp Kern  <pkern@debian.org>
274
275         * dak/check_archive.py (check_checksums): rewind the files
276         before the sha1sum/sha256sum checks as they got seeked by
277         md5sum
278
279         * daklib/utils.py (build_file_list): do not die on very
280         old dsc files without format header
281
282 2008-09-07  Philipp Kern  <pkern@debian.org>
283
284         * daklib/utils.py (check_hash): try..except..finally only
285         works on python >=2.5.
286
287         * dak/process_accepted.py (install): better use dsc_file
288         instead of the (for the loop iteration) static file
289         variable
290
291 2008-09-07  Philipp Kern  <pkern@debian.org>
292
293         * daklib/utils.py (check_hash): change the comment and warn
294         if a file is not found when checking the hashes (i.e. when
295         it is probably in the pool)
296
297         * daklib/utils.py (check_size): do not bail out if the file
298         is not found, because it may be in the pool
299
300         * dak/process_accepted.py (install): bail out and skip the
301         upload when ensure_hashes fails, print the rejection messages
302         as warnings
303
304 2008-08-28  Philipp Kern  <pkern@debian.org>
305
306         * daklib/utils.py (check_hashes): adapt to different API, check
307         sizes separately
308
309         * daklib/utils.py (parse_changes, parse_deb822): refactor
310         the string-based logic of parse_changes into a new function
311         parse_deb822; parse_changes itself remains file-based
312
313         * daklib/utils.py (hash_key): gives the key of a hash in the
314         files dict
315
316         * daklib/utils.py (create_hash, check_size): made more readable
317
318         * daklib/utils.py (check_hash): just check the hashes and complain
319         about missing checksums
320
321         * daklib/utils.py (check_hash_fields): function to reject unknown
322         checksums fields
323
324         * daklib/utils.py (_ensure_changes_hash, _ensure_dsc_hash): helper
325         functions for ensure_hashes; check their corresponding manifests'
326         hashes
327
328         * daklib/utils.py (ensure_hashes): retrieve the checksums fields
329         from the original filecontents blob so that they do not need to
330         be present in the .dak; refactored the actual checks by calling
331         the aforementioned helper functions
332
333         * daklib/utils.py (parse_checksums): parse a given checksums field
334         in a manifest and insert the values found into the files dict,
335         checking the file sizes on the way
336
337 2008-09-06  Philipp Kern  <pkern@debian.org>
338
339         * dak/process_new.py (is_source_in_queue_dir): Access the right
340         variable to check if the given entry in the queue is the sourceful
341         upload we are looking for.
342
343 2008-09-02  Joerg Jaspert  <joerg@debian.org>
344
345         * config/debian/pseudo-packages.description: Added debian-i18n and
346         buildd.emdebian.org
347
348         * dak/process_new.py (_accept): Fix Philipps new helper function
349         to not break by moving Upload.build_summaries there.
350
351 2008-08-31  Philipp Kern  <pkern@debian.org>
352
353         * dak/process_new.py (_accept): new helper function to accept
354         an upload regularly, obeying no-action if set
355         * dak/process_new.py (do_accept): use _accept
356         * dak/process_new.py (do_accept_stableupdate): bail out in else
357         on binary uploads, in case we missed something; use the _accept
358         helper
359
360 2008-08-30  Philipp Kern  <pkern@debian.org>
361
362         * dak/process_new.py (is_source_in_queue_dir): join the queue path
363         because os.listdir entries come with their path stripped
364
365 2008-08-30  Philipp Kern  <pkern@debian.org>
366
367         * dak/process_new.py (do_accept_stableupdate): state what we intend
368         to do
369
370 2008-08-26  Philipp Kern  <pkern@debian.org>
371
372         * dak/process_new.py (is_source_in_queue_dir): fix variable usage
373         * dak/process_new.py (move_to_holding): just state what we intend
374         to do in no-action mode
375         * dak/process_new.py (do_accept_stableupdate): fetch summaries,
376         fix invokation of is_source_in_queue_dir, actually accept sourceful
377         uploads in p-u holding
378
379 2008-08-26  Philipp Kern  <pkern@debian.org>
380
381         * dak/process_new.py (do_accept): do not try to free the unchecked
382         lockfile in no-action mode
383
384 2008-08-16  Joerg Jaspert  <joerg@debian.org>
385
386         * config/debian/cron.dinstall: We dont want i18n to ever fail
387         dinstall, add a || true
388
389 2008-08-15  Mark Hymers  <mhy@debian.org>
390
391         * daklib/utils.py: Actually import a module before using it.
392
393         * daklib/utils.py: Actually check we have basedict before trying to
394         use it.
395
396         *  dak/process_accepted.py, dak/process_unchecked.py,
397         daklib/database.py: Don't change get_files_id to use sha1sum and
398         sha256sum.
399
400         * setup/init_pool.sql, dak/check_archive.py, dak/decode_dot_dak.py,
401         dak/process_accepted.py, dak/process_unchecked.py, daklib/database.py,
402         daklib/queue.py, daklib/utils.py: Attempt to add sha1sum and
403         sha256sums into the database.  The complication is that we have to
404         keep backwards compatibility with the .dak files already in existance.
405         Note that import_archive hasn't been hacked to deal with this yet.
406
407 2008-08-14  Joerg Jaspert  <joerg@debian.org>
408
409         * config/debian/cron.dinstall: Added the i18n retrieval of package
410         description translations
411
412 2008-08-12  Joerg Jaspert  <joerg@debian.org>
413
414         * config/debian/cron.dinstall: Complicate the i18n export a little
415         by using date/hour based directories which we then link into the
416         web view. They contain a signed timestamp file now, which means
417         the i18n people can take a long time to generate files, yet we
418         still know exactly on which dataset their data is based on, and
419         can then verify it with that. Ensures we only get descriptions for
420         packages we know off (or knew of in the past 2 days).
421
422 2008-08-11  Joerg Jaspert  <joerg@debian.org>
423
424         * web/dinstall.html: Added
425
426         * config/debian/dak.conf: Added back the pgp keyrings for now, as
427         it seems that we should keep it for a few more days, until we
428         somehow got ll those oldtimers to get a newer key into the
429         keyring. Unfortunately our logic to look for uploads done from
430         that keyring wasnt the most perfect one, so well, it is actually
431         used. Damn.
432
433 2008-08-09  Joerg Jaspert  <joerg@debian.org>
434
435         * config/debian/dak.conf: No longer use the pgp keyring - no
436         uploads recorded for any of the pgp keys for a long time.
437
438         * config/debian/cron.dinstall: Export the i18n foo.
439
440 2008-08-08  Joerg Jaspert  <joerg@debian.org>
441
442         * config/debian/cron.dinstall: Create a hardlinked tree of the
443         ftp/ in mirror/ so we have more atomic mirror updates for the
444         buildds
445
446         * config/debian/cron.unchecked: Added signing of buildd incoming
447
448 2008-08-07  Philipp Kern  <pkern@debian.org>
449
450         * dak/process_new.py (do_accept): handle uploads to (oldstable-)
451           proposed-updates differently and put them into p-u holding
452           for review instead of unconditionally accepting them into
453           p-u proper; additional care needed to be taken to look
454           out for the source if a binary-only upload is being handled
455
456 2008-08-07  Joerg Jaspert  <joerg@debian.org>
457
458         * dak/cruft_report.py (parse_nfu): call utils.warn instead of warn
459         (main): Only do the nfu stuff if nfu is a check we want to run
460         later.
461         (main): And another place where we dont want to do nfu foo unless
462         we need nfu
463
464         * dak/make_suite_file_list.py (main): Fix a bug that has been
465         there for ages, but "just" never triggered.
466
467 2008-08-07  Stephen Gran  <sgran@debian.org>
468
469         * Drop use of exec to eval variable interpolation
470 2008-08-07  Joerg Jaspert  <joerg@debian.org>
471
472         * dak/process_accepted.py (install): Error out with the new
473         exception if we dont know the source package for a file we want to
474         install. Shouldn't ever hit us, but better safe than sorry.
475
476         * daklib/dak_exceptions.py (dakerrors): new exception - no source field.
477
478 2008-08-05  Joerg Jaspert  <joerg@debian.org>
479
480         * config/debian/cron.unchecked: disable the ssh-move insanity (and
481         as soon as rietz is back online - replace it with a one-line scp
482         or rsync statement followed by a one-line rm)
483         And now replaced this 128 line perl "not-invented-here" with a
484         one-line rsync command, using a feature rsync only understands
485         since sarge - damn new-fangled technology.
486
487 2008-08-05  Joachim Breitner <nomeata@debian.org>
488
489         * dak/cruft_report.py: In full mode, report out-of-date binaries on
490         architectures that have set Not-For-Us for that package.
491
492         * scripts/nfu/get-w-b-db: Script to fetch the wanna-build database
493         dump from http://buildd.debian.org/
494
495         * config/debian/cron.weekly: Run the above script
496
497 2008-08-03  Mark Hymers <mhy@debian.org>
498
499         * dak/process_new.py: Apply jvw's patch so that process_new shows
500         packages which need binary uploads sorted earlier than other packages.
501
502 2008-07-26  Joerg Jaspert  <joerg@debian.org>
503
504         * templates/reject-proposed-updates.rejected,dak/reject_proposed_updates.py:
505         applied a patch by luk modifying the stable rejection mails to fit
506         reality a bit more
507
508         * config/debian/dak.conf: no m68k in testing, so no m68k in t-p-u
509         r4 now
510
511 2008-06-19  Thomas Viehmann  <tv@beamnet.de>
512
513         * dak/process_unchecked.py (check_dsc,check_hashes): Catch
514         UnknownFormatError and reject
515
516 2008-06-15  Joerg Jaspert  <joerg@debian.org>
517
518         * config/debian/cron.weekly: Work around a git bug until git is
519         fixed upstream and the fix is on backports.org
520
521         * config/debian/cron.dinstall: (various ssh calls): Make them use
522         batchmode/connect/setuptimeout to not take too long with
523         connections... Also || true them, no need to die in dinstall if
524         one host isn't reachable.
525         Also do not die when the ldap server is unreachable, just ignore
526         that error.
527
528         * README: Updated mailing list location
529
530 2008-06-14  Otavio Salvador  <otavio@debian.org>
531
532         * docs/manpages/clean-suites.1.sgml: Minor typo fix
533
534         * dak/import_archive.py: Add support to udeb packages
535
536         * dak/control_suite.py (main): Handle SystemError exception in
537         case of a incompatible commandline parameter
538
539         * dak/check_overrides.py (main): Use case-insensitive comparing
540         for codename
541
542 2008-06-14  Joerg Jaspert  <joerg@debian.org>
543
544         * scripts/debian/byhand-task: Merged patch from Frans Pop to
545         fail on byhand-task uploads if they do not go to unstable.
546
547         * config/debian/cron.weekly: Do a little git cleanup work too.
548
549         * config/debian/cron.buildd: Add batchmode and also
550         Connect/SetupTimeout parameters to ssh
551
552         * config/debian/cron.dinstall (POSTDUMP): Compress all
553         uncompressed psql backups
554
555 2008-06-08  Joerg Jaspert  <joerg@debian.org>
556
557         * dak/process_unchecked.py (check_urgency): Lowercase urgency
558         before we (eventually) warn on it. Patch taken from Russ Allbery.
559
560 2008-06-01  Otavio Salvador  <otavio@debian.org>
561
562         * daklib/queue.py (check_valid): allow debian-installer specific
563         sources to have 'debian-installer' section.
564
565 2008-05-28  Frans Pop  <fjp@debian.org>
566
567         * add autobyhand support for task overrides (from tasksel)
568
569 2008-05-27  Joerg Jaspert  <joerg@debian.org>
570
571         * config/debian/pseudo-packages.maintainers: Change ftp.debian.org
572         pseudopackage maintainer name.
573
574 2008-05-12  Joerg Jaspert  <joerg@debian.org>
575
576         * dak/transitions.py: use yaml.dump instead of syck.dump, as syck
577         seems to have a bug in its dump(), causing it to write illegal entries
578         And also do this for load.
579
580 2008-05-10  Stephen Gran   <sgran@debian.org>
581        * tools/debianqueued-0.9/debianqueued: First pass at a send_mail
582          implementation that sucks less
583        * Update debian/control to reflect new perl dependency
584
585 2008-05-09  Joerg Jaspert  <joerg@debian.org>
586
587         * dak/override.py (main): substitute value in X-Debian-Package
588         header
589
590         * templates/override.bug-close: Add X-Debian-Package header
591         * templates/reject-proposed-updates.rejected: dito
592         * templates/queue.rejected: dito
593         * templates/process-unchecked.new: dito
594         * templates/process-unchecked.bug-nmu-fixed: dito
595         * templates/process-unchecked.bug-experimental-fixed: dito
596         * templates/process-unchecked.bug-close: dito
597         * templates/process-unchecked.announce: dito
598         * templates/process-unchecked.accepted: dito
599         * templates/process-new.prod: dito
600         * templates/process-accepted.unaccept: dito
601         * templates/process-accepted.install: dito
602         * templates/process-unchecked.override-disparity: dito
603
604 2008-05-08  Joerg Jaspert  <joerg@debian.org>
605
606         * templates/override.bug-close: Add X-Debian header
607         * templates/rm.bug-close: dito
608         * templates/reject-proposed-updates.rejected: dito
609         * templates/queue.rejected: dito
610         * templates/process-unchecked.new: dito
611         * templates/process-unchecked.bug-nmu-fixed: dito
612         * templates/process-unchecked.bug-experimental-fixed: dito
613         * templates/process-unchecked.bug-close: dito
614         * templates/process-unchecked.announce: dito
615         * templates/process-unchecked.accepted: dito
616         * templates/process-new.prod: dito
617         * templates/process-accepted.unaccept: dito
618         * templates/process-accepted.install: dito
619         * templates/process-unchecked.override-disparity: dito, but also
620         mention that people should include the package lists with the
621         override disparities.
622
623 2008-05-06  Joerg Jaspert  <joerg@debian.org>
624
625         * config/debian/cron.dinstall: Put the timestamp stuff into an own
626         function, call that from everywhere. Also change the timestamp
627         format to not be local dependent.
628
629 2008-05-05  Joerg Jaspert  <joerg@debian.org>
630
631         * daklib/dak_exceptions.py (dakerrors): add TransitionsError
632         * dak/transitions.py: Use it, instead of the own definition
633
634 2008-05-05  Mark Hymers  <mhy@debian.org>
635
636         * daklib/dak_exceptions.py: Add a default message and tidy up our string
637         representation
638
639 2008-05-05  Joerg Jaspert  <joerg@debian.org>
640
641         * daklib/dak_exceptions.py: New file, central place for all those
642         own exceptions dak may raise.
643
644         * daklib/utils.py: Use dak_exceptions and delete all those string
645         exception raising stuff, which is depcreated.
646         During that delete the unknown_hostname_exc, as it wasnt used.
647
648         * dak/import_archive.py: use the new Exception class
649         * dak/rm.py: dito
650         * dak/generate_releases.py: dito
651         * dak/queue_report.py: dito
652         * daklib/queue.py: dito
653
654 2008-05-04  Joerg Jaspert  <joerg@debian.org>
655
656         * daklib/queue.py: Various pychecker cleanups
657
658         * dak/import_keyring.py: Remove unused daklib.logging and Logger
659         and add the actually used daklib/utils
660
661         * dak/examine_package.py: remove daklib.queue import, never used
662
663         * dak/check_proposed_updates.py: Import stuff from daklib as
664         "import daklib.foo as foo"
665         * dak/clean_proposed_updates.py: likewise
666         * dak/clean_queues.py: likewise
667         * dak/clean_suites.py: likewise
668         * dak/compare_suites.py: likewise
669         * dak/cruft_report.py: likewise
670         (get_suite_binaries): Seperated in own function, out of main. More
671         of main should be splitted. (Or well, cruft_report redesigned a
672         little, so its easier to run on multiple suites with differing tests)
673
674         * dak/examine_package.py: likewise
675         * dak/find_null_maintainers.py: likewise
676         * dak/generate_index_diffs.py: likewise
677         * dak/generate_releases.py: likewise
678         * dak/import_archive.py: likewise
679         * dak/import_ldap_fingerprints.py: likewise
680         * dak/import_users_from_passwd.py: likewise
681         * dak/init_db.py: likewise
682         * dak/init_dirs.py: likewise
683         * dak/ls.py: likewise
684         * dak/make_maintainers.py: likewise
685         * dak/make_overrides.py: likewise
686         * dak/make_suite_file_list.py: likewise
687         * dak/new_security_install.py: likewise
688         * dak/override.py: likewise
689         * dak/process_accepted.py: likewise
690         * dak/process_new.py: likewise
691         * dak/process_unchecked.py: likewise
692         * dak/rm.py: likewise
693         * dak/show_new.py: likewise
694         * dak/split_done.py: likewise
695         * dak/stats.py: likewise
696         * dak/transitions.py: likewise
697
698         * dak/check_archive.py (check_files_not_symlinks): Remove
699         long-time unused and commented code. Import stuff from daklib as
700         "import daklib.foo as foo"
701
702 2008-05-04  Thomas Viehmann  <tv@beamnet.de>
703
704         * dak/process_unchecked.py (check_signed_by_key): cater for uid_email
705         None in sponsor notification
706
707 2008-05-03  Joerg Jaspert  <joerg@debian.org>
708
709         * dak/examine_package.py: clean up pychecker warnings (merged with
710         Thomas changes to the NEW display)
711
712 2008-05-03  Mark Hymers <mhy@debian.org>
713
714         * dak/check_archive.py: clean up pychecker warnings
715         * dak/check_overrides.py: likewise
716         * dak/check_proposed_updates.py: likewise
717         * dak/clean_proposed_updates.py: likewise
718         * dak/clean_queues.py: likewise
719         * dak/control_overrides.py: likewise
720         * dak/control_suite.py: likewise
721         * dak/decode_dot_dak.py: likewise
722         * dak/examine_package.py: likewise
723         * dak/process_new.py: likewise
724         * dak/process_unchecked.py: likewise
725         * dak/queue_report.py: likewise
726         * dak/reject_proposed_updates.py: likewise
727         * dak/security_install.py: likewise
728         * dak/show_new.py: likewise
729         * dak/stats.py: likewise
730         * dak/symlink_dists.py: likewise
731         * dak/transitions.py: likewise
732 >>>>>>> sec-merge:ChangeLog
733
734 2008-05-03  Joerg Jaspert  <joerg@debian.org>
735
736         * config/debian/cron.daily: Rename to
737         * config/debian/cron.dinstall: this, as its not really something run
738         daily for some time now. And while dinstall is an OLD name, its
739         recognized pretty well within Debian
740         Also add some more timing information
741         Do not allow automated [o-]p-u-new processing to break dinstall
742
743 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
744
745         * web/,web/style.css: add web dir and current style.css
746
747         * dak/examine_package.py, dak/show_new.py: improve NEW html pages,
748         based on mock-up by M. Ferrari.
749         remove Checksums-* from examine-package output
750
751 2008-05-03  Thomas Viehmann  <tv@beamnet.de>
752
753         * dak/process_unchecked.py (check_hashes): Reject on error while
754         parsing Checksums-*.
755
756 2008-05-02  Joerg Jaspert  <joerg@debian.org>
757
758         * config/debian/pseudo-packages*: Removed listarchives, closes #468667
759         added wiki.debian.org (currently pointing to debian-www), closes #194206
760         added security-tracker, closes #436152
761         added release.debian.org, closes #451005
762
763         * config/debian/cron.buildd: Cleanup unreachable code. (If someone
764         still wants it - its in revision control...)
765
766         * config/debian/cron.daily: Modify call to update-ftpstats to only
767         use files log/2*, instead of log/*, so it ignores the new cron/
768         subdir. Makes sure it can't get confused, and is also safe for
769         nearly thousand years. If this code is really in use in year 3000,
770         im sure people can adjust it! :)
771
772         * config/debian/vars: Add logdir as a place for cronjob log output
773
774         * config/debian/cron.daily: Use a logfile and be more verbose of
775         whats going on.
776           Also moved the commented VACUUM ; VACUUM ANALYZE calls over to
777         cron.weekly, ...
778         * config/debian/cron.weekly: likewise,
779           ... and activate those calls again. Once a week, as an
780         additional safety bet to be sure the stuff does get run is ok,
781         even if we have autovacuum by default.
782
783 2008-05-02  Thomas Viehmann  <tv@beamnet.de>
784
785         * dak/process_unchecked.py (check_hashes): fix typo in
786           checksum reject message.
787
788 2008-05-02  Joerg Jaspert  <joerg@debian.org>
789
790         * config/debian/extensions.py: used reindent.py from the python
791         2.x source examples to get all dak code use the same indentation
792         style, no longer a mix of 4 spaces / 1 tab.
793         * dak/check_archive.py: likewise
794         * dak/check_overrides.py: likewise
795         * dak/check_proposed_updates.py: likewise
796         * dak/clean_proposed_updates.py: likewise
797         * dak/clean_queues.py: likewise
798         * dak/clean_suites.py: likewise
799         * dak/compare_suites.py: likewise
800         * dak/control_overrides.py: likewise
801         * dak/control_suite.py: likewise
802         * dak/cruft_report.py: likewise
803         * dak/dak.py: likewise
804         * dak/decode_dot_dak.py: likewise
805         * dak/examine_package.py: likewise
806         * dak/find_null_maintainers.py: likewise
807         * dak/generate_index_diffs.py: likewise
808         * dak/generate_releases.py: likewise
809         * dak/import_archive.py: likewise
810         * dak/import_keyring.py: likewise
811         * dak/import_ldap_fingerprints.py: likewise
812         * dak/import_users_from_passwd.py: likewise
813         * dak/init_db.py: likewise
814         * dak/init_dirs.py: likewise
815         * dak/ls.py: likewise
816         * dak/make_maintainers.py: likewise
817         * dak/make_overrides.py: likewise
818         * dak/make_suite_file_list.py: likewise
819         * dak/mirror_split.py: likewise
820         * dak/new_security_install.py: likewise
821         * dak/override.py: likewise
822         * dak/poolize.py: likewise
823         * dak/process_accepted.py: likewise
824         * dak/process_new.py: likewise
825         * dak/process_unchecked.py: likewise
826         * dak/queue_report.py: likewise
827         * dak/reject_proposed_updates.py: likewise
828         * dak/rm.py: likewise
829         * dak/security_install.py: likewise
830         * dak/show_new.py: likewise
831         * dak/split_done.py: likewise
832         * dak/stats.py: likewise
833         * dak/symlink_dists.py: likewise
834         * dak/test/001/test.py: likewise
835         * dak/test/002/test.py: likewise
836         * dak/transitions.py: likewise
837         * daklib/extensions.py: likewise
838         * daklib/logging.py: likewise
839         * daklib/queue.py: likewise
840         * daklib/utils.py: likewise
841         * scripts/debian/insert_missing_changedby.py: likewise
842
843         * dak/process_new.py (recheck): Make the path check more robust,
844         so we no longer have to keep process_new seperate trees between
845         security and normal archive.
846
847 2008-04-27  Joerg Jaspert  <joerg@debian.org>
848
849         * dak/process_accepted.py (Urgency_Log.__init__): Warn if the
850         configured path does not exist or is not writeable by us. Use a
851         tmp path if so, so we do not lose the urgencies in such cases.
852
853         * config/debian/dak.conf: Changed path for UrgencyLog
854         Same for the ReleaseTransitions file
855
856         * config/debian/cron.daily: Notify qa user on merkel of dinstall
857         start, Remove the britney call
858
859 2008-04-26  Joerg Jaspert  <joerg@debian.org>
860
861         * dak/process_new.py: Call end() whenever we try to leave by
862         pressing Q
863
864         * config/debian/cron.daily: Also report NBS in experimental
865
866 2008-04-25  Joerg Jaspert  <joerg@debian.org>
867
868         * dak/cruft_report.py (main): Make it possible to look at
869         experimental too, especially NBS
870
871         * dak/split_done.py (main): Only move files into their subdirs if
872         they are older than 30 days. That enables us to run this script as
873         part of a cronjob.
874
875         * config/debian/cron.weekly: Run dak split-done
876
877 2008-04-23  Thomas Viehmann  <tviehmann@debian.org>
878
879         * dak/process_unchecked.py: add changes["sponsoremail"]
880           for sponsored uploads if desired
881         * daklib/queue.py: add changes["sponsoremail"] to
882           Subst["__MAINTAINER_TO__"] if present
883         * daklib/utils.py: add functions
884           is_email_alias to check which accounts allow email forwarding,
885           which_alias_file to find the alias file, and
886           gpg_get_key_addresses to find uid addresses for a given
887             fingerprint
888
889 2008-04-22  Joerg Jaspert  <joerg@debian.org>
890
891         * setup/init_pool.sql: added a function/aggregate for the release
892         team to base some script on it.
893
894         * config/debian/cron.daily: push katie@merkel to immediately start
895         the sync of projectb there.
896
897 2008-04-21  Joerg Jaspert  <joerg@debian.org>
898
899         * scripts/debian/expire_dumps: New script, expires old database
900         dumps, using a scheme to keep more of the recent dumps.
901
902         * config/debian/cron.daily: Use the new script. Also - compress
903         all files older than 7 days, instead of 30.
904
905         * dak/process_accepted.py (install): Do not break if a
906         source/maintainer combination is already in src_uploaders, "just"
907         warn us.
908
909 2008-04-20  Thomas Viehmann  <tviehmann@debian.org>
910
911         * daklib/utils.py (build_file_list): Deal with "Format 3 style"
912         Format lines (ie. those having extra text appended).
913
914 2008-04-19  Joerg Jaspert  <joerg@debian.org>
915
916         * dak/process_unchecked.py (check_files): Sanity check the
917         provides field, which closes #472783
918
919 2008-04-18  Joerg Jaspert  <joerg@debian.org>
920
921         * config/debian/dak.conf: Add mapping stable-proposed-updates
922           -> proposed-updates.
923
924         * dak/transitions.py (load_transitions): Additionally check for
925         invalid package list indentation
926
927 2008-04-17  Joerg Jaspert  <joerg@debian.org>
928
929         * config/debian/dak.conf: Add TempPath statement for the Release
930         Transitions script
931
932         * dak/transitions.py (temp_transitions_file): Use the TempPath
933         (write_transitions_from_file): Check if the file we should get our
934         transitions from is in our TempPath, error out if it isnt
935         (main): Check for TempPath existance
936
937 2008-04-12  James Troup  <troup@debian.org>
938
939         * dak/clean_proposed_updates.py: add support for -s/--suite and
940         -n/--no-action.
941
942 2008-04-11  Anthony Towns  <ajt@debian.org>
943
944         * dak/utils.py: build_file_list() extra parameters so it can
945         build a file list for checksums-foo fields. Don't use float() to
946         compare formats, because Format: 1.10 should compare greater than
947         Format: 1.9 (use "1.9".split(".",1) and tuple comparison instead)
948
949         * dak/process_unchecked.py: check_md5sum becomes check_hashes
950         and check_hash. If changes format is 1.8 or later, also check
951         checksums-sha1 and checksums-sha256 for both .changes and .dsc,
952         and reject on presence/absence of un/expected checksums-* fields.
953
954 2008-04-07  Joerg Jaspert  <joerg@debian.org>
955
956         * daklib/utils.py (build_file_list): Check for dpkg .changes
957         adjusted to reject newer (and right now broken) 1.8 version, until
958         dpkg (or debsign) is fixed and doesn't produce invalid .changes anymore
959
960 2008-03-22  Joerg Jaspert  <joerg@debian.org>
961
962         * dak/transitions.py (load_transitions): Check if all our keys are
963         defined, if there are only keys defined we want and also the types
964         of the various keys.
965
966 2008-03-22  Anthony Towns  <ajt@debian.org>
967
968         * dak/edit_transitions.py: Add --import option.
969         Add --use-sudo option. Use fcntl locking for writing.
970         Move writing into a function (write_transitions).
971         Reinvoke self using sudo and --import if necessary.
972         Move temporary file creation into a function, use mkstemp.
973         Rename to "dak transitions".
974
975 2008-03-21  Joerg Jaspert  <joerg@debian.org>
976
977         * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
978         edited file back in place
979         (check_transitions): Use proper locking and also use sudo to copy
980         the new file in place
981
982 2008-03-21  Anthony Towns <ajt@debian.org>
983
984         * config/debian/extensions.py: Add infrastructure for replacing
985         functions in dak modules; add upload blocking for dpkg.
986
987 2008-03-12  Joerg Jaspert  <joerg@debian.org>
988
989         * dak/edit_transitions.py: Done a number of cleanups to make code
990         working. Also changed the way prompting/answering goes, to not
991         have to import daklib/queue.
992         (edit_transitions): When done with a successful edit - also print
993         a final overview about defined transitions
994
995 2008-03-11  Joerg Jaspert  <joerg@debian.org>
996
997         * dak/process_unchecked.py: Import syck module directly, not "from
998         syck import *"
999         (check_transition): Do the check for sourceful upload in here
1000         Also adjust the syck loading commands, rename new_vers to
1001         expected, curvers to current, to make it more clear what they mean.
1002
1003         * daklib/database.py (get_suite_version): Renamed from
1004         get_testing_version. Also changed the cache variables name
1005
1006         * The above changes are based on modifications from Anthony.
1007
1008         * dak/dak.py (init): Renamed check -> edit transitions
1009
1010         * dak/edit_transitions.py: Renamed from check_transitions.py
1011         (main): Also rename new_vers/curvers to expected/current
1012         Basically a nice rewrite, so it now does checks and edit,
1013         depending on how you call it. Check also removes old transitions,
1014         if user wants it.
1015
1016 2008-03-02  Joerg Jaspert  <joerg@debian.org>
1017
1018         * debian/control (Suggests): Add python-syck to Depends:
1019
1020         * dak/dak.py (init): Tell it about check_transitions
1021
1022         * dak/check_transitions.py (usage): Added, checks the transitions
1023         file (if any)
1024
1025         * daklib/database.py (get_testing_version): Added. Returns the
1026         version for the source in testing, if any
1027
1028         * dak/process_unchecked.py (check_transition): Added. Checks if a
1029         release team member defined a transition, and rejects based on
1030         that data.
1031         (process_it): Use it.
1032         (check_transition): Warn on broken transitions file and return,
1033         not doing anything.
1034         (check_transition): Moved out of here, into daklib/queue
1035         (process_it): Call check_transitions only if
1036         changes[architecture] has source included.
1037         (check_transition): Now call the database.get_testing_version
1038
1039 2008-02-09  Christoph Berg <myon@debian.org>
1040
1041         * daklib/queue.py (get_type): fubar does not exist in global
1042         namespace.
1043
1044         * setup/add_constraints.sql setup/init_pool.sql: Add changedby column
1045         to source table, and move src_uploaders after source so the REFERNCES
1046         clause works.
1047         * dak/process_accepted.py (install): Fill the changedby column from
1048         the information found in the .changes. This will allow to identify
1049         NMUs and sponsored uploads more precisely in tools querying projectb.
1050         * scripts/debian/insert_missing_changedby.py: Script to import yet
1051         missing fields from filippo's uploads-history DB.
1052
1053 2008-02-06  Joerg Jaspert  <joerg@debian.org>
1054
1055         * daklib/utils.py (check_signature): Make variable key available,
1056         so we can access it.
1057
1058 2008-01-07  Joerg Jaspert  <joerg@debian.org>
1059
1060         * dak/examine_package.py (check_deb): Remove linda call. It
1061         provides no added benefit to lintian anymore.
1062
1063 2008-01-07  Joerg Jaspert  <joerg@debian.org>
1064
1065         * dak/examine_package.py (check_deb): Remove linda call. It
1066         provides no added benefit to lintian anymore.
1067
1068 2008-01-06  Joerg Jaspert  <joerg@debian.org>
1069
1070         * dak/examine_package.py (do_lintian): lintian now supports html
1071         coloring, so use it.
1072         (do_command): Dont escape html chars if param escaped = 1
1073
1074 2008-01-06  Joerg Jaspert  <joerg@debian.org>
1075
1076         * dak/examine_package.py (do_lintian): lintian now supports html
1077         coloring, so use it.
1078         (do_command): Dont escape html chars if param escaped = 1
1079
1080 2007-12-31  Anthony Towns  <ajt@debian.org>
1081
1082         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
1083         when processing result of check_dsc_against_db so we don't promote
1084         warnings to rejections.
1085
1086 2007-12-31  Anthony Towns  <ajt@debian.org>
1087
1088         * dak/process_new.py (recheck): pass "" for prefix_str to reject()
1089         when processing result of check_dsc_against_db so we don't promote
1090         warnings to rejections.
1091
1092 2007-12-30  Joerg Jaspert  <joerg@debian.org>
1093
1094         * dak/dak.py (init): add show-new. This is based on a patch
1095         submitted by Thomas Viehmann in Bug #408318, but large parts of
1096         handling it are rewritten and show-new is done by me.
1097
1098         * dak/queue_report.py (table_row): Add link to generated html page
1099         for NEW package.
1100
1101         * dak/show_new.py: new file, generates html overview for NEW
1102         packages, similar to what we see with examine-package.
1103
1104         * config/debian/cron.hourly: Add show-new call
1105
1106         * config/debian/dak.conf: Add HTMLPath for Show-New
1107
1108         * dak/examine_package.py (print_copyright): ignore stderr when
1109         finding copyright file.
1110         (main): add html option
1111         (html_escape): new function
1112         (escape_if_needed): ditto
1113         (headline): ditto
1114         (colour_output): ditto
1115         (print_escaped_text): ditto
1116         (print_formatted_text): ditto
1117         - use those functions everywhere where we generate output, as they
1118         easily know if we want html or not and just DTRT
1119         (do_lintian): new function
1120         (check_deb): use it
1121         (output_deb_info): Use print_escaped_text, not print_formatted_text.
1122         Also import daklib.queue, determine_new now lives there
1123
1124         Also add a variable to see if we want html output. Default is
1125         disabled, show_new enables it for its use.
1126         Most of html, besides header/footer are in examine_package instead
1127         of show_new, as it makes it a whole lot easier to deal with it at
1128         the point the info is generated.
1129
1130
1131         * dak/process_new.py (determine_new): Moved out of here.
1132         (check_valid): Moved out of here.
1133         (get_type): Moved out of here.
1134
1135         * daklib/queue.py (determine_new): Moved here.
1136         (check_valid): Moved here.
1137         (get_type): Moved here.
1138
1139         * dak/init_db.py (do_section): Remove non-US code
1140
1141         * dak/make_overrides.py (main): ditto
1142
1143         * dak/process_new.py (determine_new): ditto
1144
1145         * daklib/queue.py (Upload.in_override_p),
1146         (Upload.check_override): ditto
1147
1148         * daklib/utils.py (extract_component_from_section):,
1149         (poolify): ditto
1150
1151         * dak/import_archive.py (update_section): ditto
1152
1153         * dak/symlink_dists.py (fix_component_section): ditto
1154
1155         * scripts/debian/mkmaintainers: ditto
1156
1157         * scripts/debian/update-mirrorlists (masterlist): ditto
1158
1159         * config/debian-non-US/*: Remove subdir
1160
1161         * scripts/debian/update-readmenonus: Removed.
1162
1163
1164 2007-12-30  Joerg Jaspert  <joerg@debian.org>
1165
1166         * dak/dak.py (init): add show-new. This is based on a patch
1167         submitted by Thomas Viehmann in Bug #408318, but large parts of
1168         handling it are rewritten and show-new is done by me.
1169
1170         * dak/queue_report.py (table_row): Add link to generated html page
1171         for NEW package.
1172
1173         * dak/show_new.py: new file, generates html overview for NEW
1174         packages, similar to what we see with examine-package.
1175
1176         * config/debian/cron.hourly: Add show-new call
1177
1178         * config/debian/dak.conf: Add HTMLPath for Show-New
1179
1180         * dak/examine_package.py (print_copyright): ignore stderr when
1181         finding copyright file.
1182         (main): add html option
1183         (html_escape): new function
1184         (escape_if_needed): ditto
1185         (headline): ditto
1186         (colour_output): ditto
1187         (print_escaped_text): ditto
1188         (print_formatted_text): ditto
1189         - use those functions everywhere where we generate output, as they
1190         easily know if we want html or not and just DTRT
1191         (do_lintian): new function
1192         (check_deb): use it
1193         (output_deb_info): Use print_escaped_text, not print_formatted_text.
1194         Also import daklib.queue, determine_new now lives there
1195
1196         Also add a variable to see if we want html output. Default is
1197         disabled, show_new enables it for its use.
1198         Most of html, besides header/footer are in examine_package instead
1199         of show_new, as it makes it a whole lot easier to deal with it at
1200         the point the info is generated.
1201
1202
1203         * dak/process_new.py (determine_new): Moved out of here.
1204         (check_valid): Moved out of here.
1205         (get_type): Moved out of here.
1206
1207         * daklib/queue.py (determine_new): Moved here.
1208         (check_valid): Moved here.
1209         (get_type): Moved here.
1210
1211         * dak/init_db.py (do_section): Remove non-US code
1212
1213         * dak/make_overrides.py (main): ditto
1214
1215         * dak/process_new.py (determine_new): ditto
1216
1217         * daklib/queue.py (Upload.in_override_p),
1218         (Upload.check_override): ditto
1219
1220         * daklib/utils.py (extract_component_from_section):,
1221         (poolify): ditto
1222
1223         * dak/import_archive.py (update_section): ditto
1224
1225         * dak/symlink_dists.py (fix_component_section): ditto
1226
1227         * scripts/debian/mkmaintainers: ditto
1228
1229         * scripts/debian/update-mirrorlists (masterlist): ditto
1230
1231         * config/debian-non-US/*: Remove subdir
1232
1233         * scripts/debian/update-readmenonus: Removed.
1234
1235
1236 2007-12-28  Anthony Towns  <ajt@debian.org>
1237
1238         * daklib/utils.py (check_signature): add NOTATION_DATA and
1239         NOTATION_NAME to known keywords.
1240
1241         * daklib/queue.py (Upload.check_source_against_db):
1242
1243         * dak/make_suite_file_list.py: add -f/--force option.
1244
1245         * dak/generate_releases.py: add -a/--apt-conf=FILE and
1246         -f/--force-touch options.  Pull version info from the database.
1247         Make suite description optional.
1248
1249         * config/debian/dak.conf: update
1250         Reject-Proposed-Updates::MoreInfoURL.  Comment out
1251         Suite::Stable::Version and ::Description.
1252
1253         * config/debian/apt.conf: Add hurd-i386 to unstable
1254         debian-installer stanza.
1255
1256 2007-12-28  Joerg Jaspert  <joerg@debian.org>
1257
1258         * KEYEXPIRED is actually a known keyword. We do check it earlier
1259         on and reject in case the sig is bad (or unknown)
1260
1261 2007-12-28  Anthony Towns  <ajt@debian.org>
1262
1263         * daklib/utils.py (check_signature): add NOTATION_DATA and
1264         NOTATION_NAME to known keywords.
1265
1266         * daklib/queue.py (Upload.check_source_against_db):
1267
1268         * dak/make_suite_file_list.py: add -f/--force option.
1269
1270         * dak/generate_releases.py: add -a/--apt-conf=FILE and
1271         -f/--force-touch options.  Pull version info from the database.
1272         Make suite description optional.
1273
1274         * config/debian/dak.conf: update
1275         Reject-Proposed-Updates::MoreInfoURL.  Comment out
1276         Suite::Stable::Version and ::Description.
1277
1278         * config/debian/apt.conf: Add hurd-i386 to unstable
1279         debian-installer stanza.
1280
1281 2007-12-28  Joerg Jaspert  <joerg@debian.org>
1282
1283         * KEYEXPIRED is actually a known keyword. We do check it earlier
1284         on and reject in case the sig is bad (or unknown)
1285
1286 2007-12-24  Joerg Jaspert  <joerg@debian.org>
1287
1288         * Also run lintian on the .dsc file to check the source itself.
1289
1290         * Fix the direct usage of ar | tar etc to get the copyright file
1291         and use dpkg-deb, which is made for this and makes us able to
1292         process data.tar.bz2 (or whatever format it will be in the
1293         future).
1294
1295 2007-12-24  Joerg Jaspert  <joerg@debian.org>
1296
1297         * Also run lintian on the .dsc file to check the source itself.
1298
1299         * Fix the direct usage of ar | tar etc to get the copyright file
1300         and use dpkg-deb, which is made for this and makes us able to
1301         process data.tar.bz2 (or whatever format it will be in the
1302         future).
1303
1304 2007-12-21  Joerg Jaspert  <joerg@debian.org>
1305
1306         * Remove the (now useless) check for a pre-depends on dpkg for
1307           binaries that contain bzip2 compressed data tarballs.
1308
1309 2007-12-21  Joerg Jaspert  <joerg@debian.org>
1310
1311         * Remove the (now useless) check for a pre-depends on dpkg for
1312           binaries that contain bzip2 compressed data tarballs.
1313
1314 2007-08-28  Anthony Towns  <ajt@debian.org>
1315
1316         * process_unchecked.py: Add support for automatic BYHAND
1317         processing.
1318         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
1319         processing of tag-overrides.
1320         * examine_package.py: Summarise duplicate copyright file entries
1321         (same md5sum) with a reference to the previous instance, rather
1322         than repeating them.
1323         * process_new.py: When rejecting from the p-u-new or o-p-u-new
1324         holding queues, don't worry if dak has its own reasons for
1325         rejecting the package as well as the SRMs.
1326
1327 2007-08-28  Anthony Towns  <ajt@debian.org>
1328
1329         * process_unchecked.py: Add support for automatic BYHAND
1330         processing.
1331         * config/debian/dak.conf, scripts/debian/byhand-tag: Automatic
1332         processing of tag-overrides.
1333         * examine_package.py: Summarise duplicate copyright file entries
1334         (same md5sum) with a reference to the previous instance, rather
1335         than repeating them.
1336         * process_new.py: When rejecting from the p-u-new or o-p-u-new
1337         holding queues, don't worry if dak has its own reasons for
1338         rejecting the package as well as the SRMs.
1339
1340 2007-06-19  Anthony Towns  <ajt@debian.org>
1341
1342         * Add nm.debian.org pseudopackage
1343
1344 2007-06-19  Anthony Towns  <ajt@debian.org>
1345
1346         * Add nm.debian.org pseudopackage
1347
1348 2007-06-18  Anthony Towns  <ajt@debian.org>
1349
1350         * daklib/logging.py: Set umask to not exclude group-writability
1351         so we don't get reminded at the start of each month. Thanks to
1352         Random J.
1353         * dak/override.py: More changes from Herr von Wifflepuck: warn
1354         if section of source is different to binary section; restore
1355         functionality on source-only overrides; croak if trying to set
1356         priority of a source override; never set priority of source
1357         overrides; correct typo in logging (s/priority/section/ at
1358         one place)
1359
1360         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
1361         * config/debian/cron.daily: auotmatically accept/reject
1362         oldstable-proposed-updates based on COMMENTS directory
1363
1364 2007-06-18  Anthony Towns  <ajt@debian.org>
1365
1366         * config/debian/apt.conf, config/debian/apt.conf.stable,
1367         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
1368         (sarge), support for oldstable-proposed-updates, dropping m68k
1369         from etch, creating etch-m68k suite, creating lenny.
1370
1371         * config/debian/vars: update for lenny
1372
1373         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
1374         drop upload limitations, add release postgres user
1375
1376         * dak/process_new.py: support for automatically accepting and rejecting
1377         packages from proposed-updates holding queues via COMMENTS directory
1378         * cron.daily: automatically process COMMENTS-based approvals
1379         and rejections for proposed-updates holding queues
1380
1381         * dak/process_unchecked.py: add support for oldproposedupdates
1382         holding queue
1383
1384         * dak/control_suite.py: allow control-suite to work with etch-m68k
1385
1386         * dak/generate_releases.py: unlink old Release files before updating
1387         them if nlinks > 1 (ie, if two files used to be the same, maybe they
1388         shouldn't be when generate-releases is run)
1389
1390         * dak/generate_releases.py: add a couple of commented lines to make
1391         it easier to deal with point releases
1392
1393         * dak/make_overrides.py: generate overrides for !contrib udebs
1394
1395         * docs/README.stable-point-release: update docs for doing a
1396         point release
1397
1398 2007-06-18  Anthony Towns  <ajt@debian.org>
1399
1400         * daklib/logging.py: Set umask to not exclude group-writability
1401         so we don't get reminded at the start of each month. Thanks to
1402         Random J.
1403         * dak/override.py: More changes from Herr von Wifflepuck: warn
1404         if section of source is different to binary section; restore
1405         functionality on source-only overrides; croak if trying to set
1406         priority of a source override; never set priority of source
1407         overrides; correct typo in logging (s/priority/section/ at
1408         one place)
1409
1410         * config/debian/apt.conf.oldstable: Added for oldstable point releases.
1411         * config/debian/cron.daily: auotmatically accept/reject
1412         oldstable-proposed-updates based on COMMENTS directory
1413
1414 2007-06-18  Anthony Towns  <ajt@debian.org>
1415
1416         * config/debian/apt.conf, config/debian/apt.conf.stable,
1417         config/debian/dak.conf: update for 4.0r0 (etch), and 3.1r6
1418         (sarge), support for oldstable-proposed-updates, dropping m68k
1419         from etch, creating etch-m68k suite, creating lenny.
1420
1421         * config/debian/vars: update for lenny
1422
1423         * config/debian/dak.conf: typo fix for Dinstall::GPGKeyring,
1424         drop upload limitations, add release postgres user
1425
1426         * dak/process_new.py: support for automatically accepting and rejecting
1427         packages from proposed-updates holding queues via COMMENTS directory
1428         * cron.daily: automatically process COMMENTS-based approvals
1429         and rejections for proposed-updates holding queues
1430
1431         * dak/process_unchecked.py: add support for oldproposedupdates
1432         holding queue
1433
1434         * dak/control_suite.py: allow control-suite to work with etch-m68k
1435
1436         * dak/generate_releases.py: unlink old Release files before updating
1437         them if nlinks > 1 (ie, if two files used to be the same, maybe they
1438         shouldn't be when generate-releases is run)
1439
1440         * dak/generate_releases.py: add a couple of commented lines to make
1441         it easier to deal with point releases
1442
1443         * dak/make_overrides.py: generate overrides for !contrib udebs
1444
1445         * docs/README.stable-point-release: update docs for doing a
1446         point release
1447
1448 2007-03-05  Anthony Towns  <ajt@debian.org>
1449
1450         * config/debian/dak.conf: update for 3.1r5.
1451         * scripts/debian/ssh-move: add ssh-move script from debbugs
1452         * config/debian/cron.unchecked: push version info to debbugs using
1453         ssh-move.
1454
1455 2007-03-05  Anthony Towns  <ajt@debian.org>
1456
1457         * config/debian/dak.conf: update for 3.1r5.
1458         * scripts/debian/ssh-move: add ssh-move script from debbugs
1459         * config/debian/cron.unchecked: push version info to debbugs using
1460         ssh-move.
1461
1462 2007-02-14  James Troup  <troup@ries.debian.org>
1463
1464         * docs/README.config: remove Dinstall::GroupOverrideFilename.
1465         * config/debian/dak.conf: likewise.
1466         * config/debian-non-US/dak.conf: likewise.
1467         * config/debian-security/dak.conf: likewise.
1468
1469         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
1470         experimental differently, just close the bugs and let version
1471         tracking sort it out.
1472          (nmu_p): remove entire class - now unused.
1473          (Upload.__init__): don't use nmu_p.
1474
1475 2007-02-14  James Troup  <troup@ries.debian.org>
1476
1477         * docs/README.config: remove Dinstall::GroupOverrideFilename.
1478         * config/debian/dak.conf: likewise.
1479         * config/debian-non-US/dak.conf: likewise.
1480         * config/debian-security/dak.conf: likewise.
1481
1482         * daklib/queue.py (Upload.close_bugs): no longer handle NMUs or
1483         experimental differently, just close the bugs and let version
1484         tracking sort it out.
1485          (nmu_p): remove entire class - now unused.
1486          (Upload.__init__): don't use nmu_p.
1487
1488 2007-02-08  Anthony Towns  <ajt@debian.org>
1489
1490         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
1491         signing key.  Drop maximum index diffs down to 14.
1492
1493         * config/debian/apt.conf: add udeb support for non-free (testing,
1494         unstable) and experimental.
1495         * config/debian/dak.conf: likewise.
1496
1497         * dak/generate_releases.py (main): handle udebs in any component.
1498
1499         * daklib/queue.py (Upload.build_summaries): handle files without a
1500         'type' gracefully.
1501
1502         * dak/generate_releases.py (print_sha256_files): new function.
1503         (main): use it.
1504
1505         * dak/process_accepted.py (stable_install): fix name of template
1506         mail.
1507
1508         * dak/process_unchecked.py (is_stableupdate): fix invocation of
1509         database.get_suite_id().
1510
1511         * templates/process-new.bxa_notification: Update on request
1512         of/after discussion with BIS staff.
1513
1514         * scripts/debian/mkfilesindices: also handle proposed-updates.
1515
1516 2007-02-08  Ryan Murray  <rmurray@debian.org>
1517
1518         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
1519         group name for chgrp of mail archives.
1520
1521         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
1522         orig.tar.gz's by picking the first one by file id.
1523
1524         * dak/override.py (main): limit to binary overrides only for now.
1525         (usage): update to match.
1526
1527         * config/debian/cron.daily: track when we have the accepted lock
1528         and clean it up on exit if we have it.  Take/check the
1529         cron.unchecked lock just before traping to cleanup on exit.
1530         Remove potato override handling.  Remove any dangling symlinks in
1531         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
1532
1533         * config/debian/apt.conf: change default compression scheme for
1534         both Sources and Packages to gzip and bzip2 rather than
1535         uncompressed and gzip (Packages) and gzip (Sources).  Use old
1536         defaults for proposed-updates.
1537
1538         * dak/control_overrides.py (main): refuse to operate on
1539         untouchable suites.
1540
1541         * config/debian/pseudo-packages.maintainers: drop install,
1542         installation, boot-floppy, slink-cd, potato-cd and
1543         nonus.debian.org.  Update base.
1544         * config/debian/pseudo-packages.description: likewise.
1545
1546         * daklib/utils.py (re_srchasver): new regex.
1547         (parse_changes): use regex to split 'Source (Version)' style
1548         Source fields into 'source' and 'source-version'.
1549
1550         * config/debian/cron.daily: use $base instead of hardcoding path
1551         name.
1552
1553         * scripts/debian/mkfilesindices: source 'vars' file and use it's
1554         variables instead of hardcoding path names.
1555
1556         * config/debian/apt.conf: switch from /org to /srv.
1557         * config/debian/apt.conf.buildd: likewise.
1558         * config/debian/apt.conf.stable: likewise.
1559         * config/debian/cron.daily: likewise.
1560         * config/debian/cron.hourly: likewise.
1561         * config/debian/cron.monthly: likewise.
1562         * config/debian/cron.unchecked: likewise.
1563         * config/debian/cron.weekly: likewise.
1564         * config/debian/dak.conf: likewise.
1565         * config/debian/vars: likewise.
1566         * scripts/debian/mkfilesindices: likewise.
1567
1568 2007-02-08  James Troup  <james@nocrew.org>
1569
1570         * dak/process_unchecked.py (check_signed_by_key): new function to
1571         ensure .changes files are signed by an authorized uploader.
1572         (process_it): use it.
1573
1574         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
1575         to configure per suite/component/architecture binary upload
1576         restrictions.
1577
1578 2007-02-08  Anthony Towns  <ajt@debian.org>
1579
1580         * config/debian/dak.conf: update for 3.1r4.  Use new 'etch'
1581         signing key.  Drop maximum index diffs down to 14.
1582
1583         * config/debian/apt.conf: add udeb support for non-free (testing,
1584         unstable) and experimental.
1585         * config/debian/dak.conf: likewise.
1586
1587         * dak/generate_releases.py (main): handle udebs in any component.
1588
1589         * daklib/queue.py (Upload.build_summaries): handle files without a
1590         'type' gracefully.
1591
1592         * dak/generate_releases.py (print_sha256_files): new function.
1593         (main): use it.
1594
1595         * dak/process_accepted.py (stable_install): fix name of template
1596         mail.
1597
1598         * dak/process_unchecked.py (is_stableupdate): fix invocation of
1599         database.get_suite_id().
1600
1601         * templates/process-new.bxa_notification: Update on request
1602         of/after discussion with BIS staff.
1603
1604         * scripts/debian/mkfilesindices: also handle proposed-updates.
1605
1606 2007-02-08  Ryan Murray  <rmurray@debian.org>
1607
1608         * config/debian/cron.monthly: use $ftpgroup instead of hardcoding
1609         group name for chgrp of mail archives.
1610
1611         * daklib/queue.py (Upload.check_dsc_against_db): handle multiple
1612         orig.tar.gz's by picking the first one by file id.
1613
1614         * dak/override.py (main): limit to binary overrides only for now.
1615         (usage): update to match.
1616
1617         * config/debian/cron.daily: track when we have the accepted lock
1618         and clean it up on exit if we have it.  Take/check the
1619         cron.unchecked lock just before traping to cleanup on exit.
1620         Remove potato override handling.  Remove any dangling symlinks in
1621         /srv/incoming.d.o/buildd.  Clean up apt-ftparchive's databases.
1622
1623         * config/debian/apt.conf: change default compression scheme for
1624         both Sources and Packages to gzip and bzip2 rather than
1625         uncompressed and gzip (Packages) and gzip (Sources).  Use old
1626         defaults for proposed-updates.
1627
1628         * dak/control_overrides.py (main): refuse to operate on
1629         untouchable suites.
1630
1631         * config/debian/pseudo-packages.maintainers: drop install,
1632         installation, boot-floppy, slink-cd, potato-cd and
1633         nonus.debian.org.  Update base.
1634         * config/debian/pseudo-packages.description: likewise.
1635
1636         * daklib/utils.py (re_srchasver): new regex.
1637         (parse_changes): use regex to split 'Source (Version)' style
1638         Source fields into 'source' and 'source-version'.
1639
1640         * config/debian/cron.daily: use $base instead of hardcoding path
1641         name.
1642
1643         * scripts/debian/mkfilesindices: source 'vars' file and use it's
1644         variables instead of hardcoding path names.
1645
1646         * config/debian/apt.conf: switch from /org to /srv.
1647         * config/debian/apt.conf.buildd: likewise.
1648         * config/debian/apt.conf.stable: likewise.
1649         * config/debian/cron.daily: likewise.
1650         * config/debian/cron.hourly: likewise.
1651         * config/debian/cron.monthly: likewise.
1652         * config/debian/cron.unchecked: likewise.
1653         * config/debian/cron.weekly: likewise.
1654         * config/debian/dak.conf: likewise.
1655         * config/debian/vars: likewise.
1656         * scripts/debian/mkfilesindices: likewise.
1657
1658 2007-02-08  James Troup  <james@nocrew.org>
1659
1660         * dak/process_unchecked.py (check_signed_by_key): new function to
1661         ensure .changes files are signed by an authorized uploader.
1662         (process_it): use it.
1663
1664         * config/debian/dak.conf (Binary-Upload-Restrictions): new stanza
1665         to configure per suite/component/architecture binary upload
1666         restrictions.
1667
1668 2006-10-09  James Troup  <james.troup@canonical.com>
1669
1670         * dak/process_unchecked.py (check_timestamps): change match to
1671         search as recent versions of python-apt prefix the string with 'E: '.
1672
1673 2006-10-09  James Troup  <james.troup@canonical.com>
1674
1675         * dak/process_unchecked.py (check_timestamps): change match to
1676         search as recent versions of python-apt prefix the string with 'E: '.
1677
1678 2006-06-26  Ryan Murray  <rmurray@debian.org>
1679
1680         * dak/process_unchecked.py (check_files): strip optional source version
1681         from Source: field in changes file, and ensure what is left is a valid
1682         package name.
1683
1684 2006-06-26  Ryan Murray  <rmurray@debian.org>
1685
1686         * dak/process_unchecked.py (check_files): strip optional source version
1687         from Source: field in changes file, and ensure what is left is a valid
1688         package name.
1689
1690 2006-06-23  Ryan Murray  <rmurray@debian.org>
1691
1692         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1693         queue for source.
1694
1695 2006-06-23  Ryan Murray  <rmurray@debian.org>
1696
1697         * dak/process_unchecked.py (check_files): also check ProposedUpdates
1698         queue for source.
1699
1700 2006-06-18  Ryan Murray  <rmurray@debian.org>
1701
1702         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1703         the log, too.
1704
1705         * dak/process_unchecked.py (check_files): only check embargoed and
1706         unembargoed queues if the keys are set.
1707
1708         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1709         and bzip2 for etch.
1710
1711 2006-06-18  Ryan Murray  <rmurray@debian.org>
1712
1713         * dak/scripts/debian/update-ftpstats: look for dak named processes in
1714         the log, too.
1715
1716         * dak/process_unchecked.py (check_files): only check embargoed and
1717         unembargoed queues if the keys are set.
1718
1719         * dak/config/debian-security/apt.conf: set Packages::Compress to gzip
1720         and bzip2 for etch.
1721
1722 2006-06-16  James Troup  <james@nocrew.org>
1723
1724         * dak/dak.py (init): add new-security-install.
1725
1726         * dak/new_security_install.py: cleanups and adapt for new naming
1727         scheme and other changes.
1728
1729 2006-06-16  Anthony Towns  <ajt@debian.org>
1730
1731         * dak/new_security_install.py: initial version imported from
1732         klecker.
1733
1734 2006-06-16  James Troup  <james@nocrew.org>
1735
1736         [Merged changes from klecker - original author unknown.]
1737
1738         * daklib/queue.py (Upload.dump_vars): also save changes["adv id"].
1739
1740         * dak/security_install.py (do_upload): fix check for oldstable and
1741         upload file list handling.
1742
1743         * dak/process_unchecked.py (check_files): update "check for
1744         source" code to also look in Embargoed and Unembargoed queues.
1745         (is_unembargo): fix handling of Dir::Queue::Disembargo.
1746
1747         * dak/decode_dot_dak.py (main): add support for changes["adv id"].
1748
1749         * config/debian-security/vars (disembargo): add.
1750
1751         * config/debian-security/dak.conf (Dinstall::SigningKeyIds):
1752         update.
1753         (Process-Unchecked::AcceptedLockFile): add.
1754         (Suite::Testing): clean up Version and Description.
1755         (SuiteMappings): add silent map from etch-secure to testing.
1756
1757         * config/debian-security/cron.unchecked: add support for
1758         disembargoed queues.
1759
1760         * config/debian-security/apt.conf.buildd: add bzip2ed Packages
1761         files too.
1762
1763         * config/debian-security/apt.conf: add amd64 to architectures for
1764         testing-security.
1765
1766 2006-06-11  James Troup  <troup@spohr.debian.org>
1767
1768         * config/debian/cron.daily: invoke process-accepted not
1769         process-unchecked.
1770
1771         * config/debian/vars (scriptsdir): new variable.
1772         * config/debian/cron.daily: use it.
1773
1774         * scripts/debian/mkmaintainers: put Maintainers_Versions-non-US in
1775         $base/misc/ instead of versioned $masterdir.  Correct 'dak
1776         make-maintainers' invocation to look in $configdir for
1777         pseudo-packages.maintainers.
1778
1779         * daklib/queue.py (Upload.do_reject): use correct name for
1780         rejection template.
1781
1782 2006-06-11  James Troup  <james@nocrew.org>
1783
1784         * dak/override.py (main): temporarily add content of old X-Katie
1785         header back as the PTS apparently filters on it.
1786         * dak/process_accepted.py (main): likewise.
1787         * dak/process_new.py (main): likewise.
1788         * dak/process_unchecked.py (main): likewise.
1789         * dak/reject_proposed_updates.py (main): likewise.
1790         * dak/rm.py (main): likewise.
1791         * daklib/queue.py (Upload.do_reject): likewise.
1792
1793         * config/debian/cron.unchecked: set -u to error out on undefined
1794         variables.  Preset LOCKDAILY to "" accordingly.
1795         * config/debian/cron.hourly: likewise.
1796         * config/debian/cron.monthly: likewise.
1797         * config/debian/cron.weekly: likewise.
1798
1799         * config/debian/vars (configdir): add new variable pointing to
1800         this directory.
1801
1802         * config/debian/cron.daily: use $configdir inplace of $masterdir
1803         when that's what we mean, and don't cd into $masterdir just to run
1804         dak scripts as we don't need to do that anymore.
1805         * config/debian/cron.hourly: likewise.
1806         * config/debian/cron.unchecked: likewise.
1807         * config/debian/cron.weekly: likewise.
1808
1809         * config/debian/dak.conf
1810         (Import-Users-From-Passwd::KnownPostgres): temporarily add 'katie'
1811         user back to list of known users as it's non-trivial to entirely
1812         change the owner of a database with postgresql 7.4.
1813
1814         * daklib/queue.py (Upload.source_exists): use string object
1815         methods rather than string module.
1816         (Upload.get_anyversion): likewise.
1817
1818         * daklib/utils.py (validate_changes_file_arg): update filename
1819         slicing to cope with new .dak filenames.
1820
1821         * dak/ls.py (main): add back 'heidi' as a valid argument for
1822         -f/--format as people are using it in scripts and breaking that
1823         without warning seems rude.
1824
1825 2006-05-21  James Troup  <james@nocrew.org>
1826
1827         * dak/rm.py (main): use string .isdigit() rather than
1828         utils.str_isnum().
1829         * dak/process_new.py (edit_overrides): likewise.
1830
1831         * daklib/utils.py (str_isnum): removed accordingly.  Also drop
1832         string import.
1833
1834 2006-05-21  James Troup  <james@nocrew.org>
1835
1836         * dak/check_archive.py (check_indices_files_exist): use list
1837         comprehension instead of map().  No longer need to import
1838         deprecated string module as a side-effect.
1839         * dak/check_overrides.py (process): likewise.
1840         (main): likewise.
1841         * dak/cruft_report.py (do_obsolete_source): likewise.
1842         (main): likewise.
1843         * dak/ls.py (main): likewise.
1844         * dak/make_suite_file_list.py (write_filelists): likewise.
1845         * dak/process_accepted.py (stable_install): likewise.
1846         * dak/rm.py (main): likewise.
1847         * dak/stats.py (number_of_packages): likewise.
1848         * daklib/logging.py (Logger.log): likewise.
1849         * daklib/queue.py (Upload.source_exists): likewise.
1850         (Upload.cross_suite_version_check): likewise.
1851         * daklib/utils.py (parse_args): likewise.
1852
1853 2006-05-21  James Troup  <james@nocrew.org>
1854
1855         * daklib/utils.py (process_gpgv_output): new function, split out
1856         of check_signature().
1857         (check_signature): adapt accordingly.
1858         (retrieve_key): new function that will try to retrieve the key
1859         that signed a given file from a keyserver.
1860         (check_signature): add 'autofetch' argument that if not set
1861         defaults to the value of Dinstall::KeyAutoFetch (if that exists).
1862         If 'autofetch' is true, invoke retrieve_key().
1863
1864         * docs/README.config: document Dinstall::KeyAutoFetch and
1865         Dinstall:KeyServer.
1866
1867 2006-05-20  James Troup  <james@nocrew.org>
1868
1869         * dak/find_null_maintainers.py (main):
1870         s/createtimestamp/createTimestamp/ to make things work with modern
1871         slapd.
1872
1873         * config/debian/dak.conf: Update StableRejector, MoreInfoURL,
1874         Stable::Version and Stable::Description for 3.1r2.
1875
1876         * config/debian-non-US/dak.conf: sync with klecker - update
1877         version number of 3.0 and MoreInfoURL.
1878
1879         * docs/README.stable-point-release: Add notes about updating
1880         dak.conf and Reject-Proposed-Updates section in particular.
1881         s/woody/stable/.  Also need to update README.html.
1882
1883         * scripts/debian/mklslar: drop support for uncompressed ls-lR file.
1884
1885         * config/debian/apt.conf: Add udeb tree for proposed-updates.
1886
1887 2006-05-20  Ryan Murray  <rmurray@debian.org>
1888
1889         * scripts/debian/update-ftpstats: new script to update daily
1890         architecture size graph data.
1891
1892         * config/debian/cron.buildd: sync with spohr - due to ftp-master /
1893         buildd split, simply ssh to buildd.d.o and call 'trigger.often'
1894         there.
1895
1896         * config/debian/cron.daily: ssh to buildd and run 'trigger.daily'
1897         before we finish.  Don't push to merkel.
1898
1899         * dak/process_unchecked.py (check_changes): Also look in
1900         ProposedUpdates queue dir.
1901         (check_files): likewise.
1902
1903 2006-05-20  Anthony Towns  <ajt@debian.org>
1904
1905         * scripts/debian/mkfilesindices: new script to generate file
1906         indices used for partial mirroring.
1907
1908         * config/debian/cron.daily: add progress timestamps.
1909
1910         * config/debian/dak.conf: update Dinstall::SigningKeyIds. Add
1911         amd64 to testing, unstable and experimental.  Drop sh from
1912         experimental.  Move Experimental to dists/experimental.  Add
1913         Dir::ProposedUpdates.  Add Architectures::amd64.
1914
1915         * config/debian/apt.conf: add amd64 to testing, unstable and
1916         experimental.  Drop uncompressed Packages files from testing. Drop
1917         sh from experimental.  Move experimental to dists/experimental/.
1918
1919         * config/debian/vars (archs): add amd64.
1920
1921         * dak/process_unchecked.py (action): Add support for
1922         proposed-updates approval queue.
1923         (is_stableupdate): new function - checks if the upload is targeted
1924         at proposed-updates.
1925         (do_stableupdate): likewise - moves upload to proposed-updates
1926         holding area.
1927
1928         * dak/process_new.py (do_new): warn if original or new target
1929         suite are invalid.
1930
1931         * dak/generate_releases.py (print_md5sha_files): less whitespace
1932         between the hash and size.
1933
1934         * dak/generate_index_diffs.py (genchanges): don't say we're not
1935         doing anything.  Better formatting of other messages.
1936         (main): don't skip experimental and remove some 'doing stuff'
1937         prints.
1938
1939 2006-05-18  James Troup  <james@nocrew.org>
1940
1941         * dak/clean_suites.py (clean_binaries): remove debug print of SQL
1942         query.
1943
1944         * dak/init_dirs.py: pylint cleanups - long lines, unused globals,
1945         docstrings, untabify, don't shadow builtins, lowercase non-global
1946         variable names, spaces after commas.  Also bail if given any
1947         arguments since we don't accept any.
1948         * dak/init_db.py: likewise.  Also split large main() into
1949         subfunctions and rename get() to sql_get().
1950
1951         * dak/init_db.py (main): check returned value from
1952         database.get_archive_id().
1953
1954         * dak/dak.py: renamed from shell.py.  Update to support new source
1955         layout.  Created init() and usage() functions.  Various
1956         pylint-inspired cleanups.  Use daklib utils.warn() and
1957         utils.fubar().  Change 'functionality' variable to only have
1958         (command, description) and always invoke main() when running the
1959         module.  Also support -h.
1960
1961 2006-05-17  James Troup  <james@nocrew.org>
1962
1963         * dak/check_archive.py: remove $Id$ and $Revision$ strings.  Update
1964         imports of and calls to daklib modules.  Change script name
1965         everywhere, i.e. in output, mails, comments and configuration tree
1966         + filenames.  Also update references to other renamed scripts,
1967         classes and templates.  Use '.dak' instead of '.katie' for the
1968         queue info storage files.
1969         (Renamed from tea)
1970         * dak/check_overrides.py: likewise.  (Renamed from cindy)
1971         * dak/check_proposed_updates.py: likewise.  (Renamed from jeri)
1972         * dak/clean_proposed_updates.py: likewise.  (Renamed from halle)
1973         * dak/clean_queues.py: likewise.  (Renamed from shania)
1974         * dak/clean_suites.py: likewise.  (Renamed from rhona)
1975         * dak/compare_suites.py: likewise.  (Renamed from andrea)
1976         * dak/control_overrides.py: likewise.  (Renamed from natalie)
1977         * dak/control_suite.py: likewise.  (Renamed from heidi)
1978         * dak/cruft_report.py: likewise.  (Renamed from rene)
1979         * dak/decode_dot_dak.py: likewise.  (Renamed from ashley)
1980         * dak/find_null_maintainers.py: likewise.  (Renamed from rosamund)
1981         * dak/generate_index_diffs.py: likewise.  (Renamed from tiffani)
1982         * dak/generate_releases.py: likewise.  (Renamed from ziyi)
1983         * dak/import_archive.py: likewise.  (Renamed from neve)
1984         * dak/import_ldap_fingerprints.py: likewise. (Renamed from emilie)
1985         * dak/import_users_from_passwd.py: likewise. (Renamed from julia)
1986         * dak/init_db.py: likewise. (Renamed from alyson)
1987         * dak/init_dirs.py: likewise. (Renamed from rose)
1988         * dak/ls.py: likewise. (Renamed from madison)
1989         * dak/make_maintainers.py: likewise.  (Renamed from charisma)
1990         * dak/make_overrides.py: likewise.  (Renamed from denise)
1991         * dak/make_suite_file_list.py: likewise.  (Renamed from jenna)
1992         * dak/mirror_split.py: likewise.  (Renamed from billie)
1993         * dak/override.py: likewise.  (Renamed from alicia)
1994         * dak/poolize.py: likewise.  (Renamed from catherine)
1995         * dak/process_accepted.py: likewise.  (Renamed from kelly)
1996         * dak/process_new.py: likewise.  (Renamed from lisa)
1997         * dak/process_unchecked.py: likewise.  (Renamed from jennifer)
1998         * dak/queue_report.py: likewise.  (Renamed from helena)
1999         * dak/reject_proposed_updates.py: likewise.  (Renamed from lauren)
2000         * dak/rm.py: likewise.  (Renamed from melanie)
2001         * dak/security_install.py: likewise.  (Renamed from amber)
2002         * dak/split_done.py: likewise.  (Renamed from nina)
2003         * dak/stats.py: likewise.  (Renamed from saffron)
2004         * dak/symlink_dists.py: likewise.  (Renamed from saffron)
2005         * daklib/database.py: likewise.  (Renamed from db_access)
2006         * daklib/queue.py: likewise.  'Katie' class -> 'Upload'. (Renamed from katie)
2007         * daklib/utils.py: likewise.
2008
2009         * dak/cruft_report.py: Use '[auto-cruft]' as the magic "this removal
2010         doesn't need to notify anyone" string.
2011         * dak/rm.py: likewise, look for '[auto-cruft]' as the magic string.
2012
2013         * dak/process_accepted.py (init): drop -V/--version argument.
2014         * dak/process_new.py (init): likewise.
2015         * dak/process_unchecked.py (init): likewise.
2016         * dak/reject_proposed_updates.py (init): likewise
2017
2018         * dak/shell.py: Renamed from dak.  ".katie" -> ".dak"
2019
2020         * dak/stats.py: in usage() output change STAT to MODE.
2021
2022 2006-05-15  James Troup  <james@nocrew.org>
2023
2024         * dak/queue_report.py: remove unused encodings imports.
2025
2026         * dak/mirror_split.py: drop unused pg, pwd, db_access and logging
2027         imports.  Initalize 'Cnf' as a global.
2028         (BillieDB._internal_recurse): fix 'util.' typo.
2029
2030         * dak/import_ldap_fingerprints.py (main): drop unused time import and
2031         commented out time check for LDAP search.
2032
2033 2005-12-16  Ryan Murray  <rmurray@debian.org>
2034
2035         * halle: add support for udebs
2036         * kelly: stable_install: add support for binNMU versions
2037
2038 2005-12-05  Anthony Towns  <aj@erisian.com.au>
2039
2040         * katie.py: Move accept() autobuilding support into separate function 
2041         (queue_build), and generalise to build different queues
2042
2043         * db_access.py: Add get_or_set_queue_id instead of hardcoding accepted=0
2044
2045         * jennifer: Initial support for enabling embargo handling with the
2046         Dinstall::SecurityQueueHandling option.
2047         * jennifer: Shift common code into remove_from_unchecked and move_to_dir
2048         functions.
2049
2050         * katie.conf-security: Include embargo options
2051         * katie.conf-security: Add Lock dir
2052         * init_pool.sql-security: Create disembargo table
2053         * init_pool.sql-security: Add constraints for disembargo table
2054
2055 2005-11-26  Anthony Towns  <aj@erisian.com.au>
2056
2057         * Merge of changes from klecker, by various people
2058
2059         * amber: special casing for not passing on amd64 and oldstable updates
2060         * amber: security mirror triggering
2061         * templates/amber.advisory: updated advisory structure
2062         * apt.conf.buildd-security: update for sarge's release
2063         * apt.conf-security: update for sarge's release
2064         * cron.buildd-security: generalise suite support, update for sarge's release
2065         * cron.daily-security: update for sarge's release, add udeb support
2066         * vars-security: update for sarge's release
2067         * katie.conf-security: update for sarge's release, add amd64 support,
2068         update signing key
2069
2070         * docs/README.names, docs/README.quotes: include the additions
2071
2072 2005-11-25  Anthony Towns  <aj@erisian.com.au>
2073
2074         * Changed accepted_autobuild to queue_build everywhere.
2075         * Add a queue table.
2076         * Add a "queue" field in the queue_build table (currently always 0)
2077
2078         * jennifer: Restructure to make it easier to support special
2079         purpose queues between unchecked and accepted.
2080
2081 2005-11-25  Anthony Towns  <aj@erisian.com.au>
2082
2083         * Finishing merge of changes from spohr, by various people still
2084
2085         * jennifer: If changed-by parsing fails, set variables to "" so REJECT
2086         works
2087         * jennifer: Re-enable .deb ar format checking
2088         * katie.py: Convert to +bX binNMU special casing
2089         * rhona: Add some debug output when deleting binaries
2090         * cron.daily: Add emilie
2091         * cron.unchecked: Add lock files
2092
2093 2005-11-15  Anthony Towns  <aj@erisian.com.au>
2094
2095         * Merge of changes from spohr, by various people.
2096
2097         * tiffani: new script to do patches to Packages, Sources and Contents
2098         files for quicker downloads.
2099         * ziyi: update to authenticate tiffani generated files
2100
2101         * dak: new script to provide a single binary with less arbitrary names
2102         for access to dak functionality.
2103
2104         * cindy: script implemented
2105
2106         * saffron: cope with suites that don't have a Priority specified
2107         * heidi: use get_suite_id()
2108         * denise: don't hardcode stable and unstable, or limit udebs to unstable
2109         * denise: remove override munging for testing (now done by cindy)
2110         * helena: expanded help, added new, sort and age options, and fancy headers
2111         * jennifer: require description, add a reject for missing dsc file
2112         * jennifer: change lock file
2113         * kelly: propogation support
2114         * lisa: honour accepted lock, use mtime not ctime, add override type_id
2115         * madison: don't say "dep-retry"
2116         * melanie: bug fix in output (missing %)
2117         * natalie: cope with maintainer_override == None; add type_id for overrides
2118         * nina: use mtime, not ctime
2119
2120         * katie.py: propogation bug fixes
2121         * logging.py: add debugging support, use | as the logfile separator
2122
2123         * katie.conf: updated signing key (4F368D5D)
2124         * katie.conf: changed lockfile to dinstall.lock
2125         * katie.conf: added Lisa::AcceptedLockFile, Dir::Lock
2126         * katie.conf: added tiffani, cindy support
2127         * katie.conf: updated to match 3.0r6 release
2128         * katie.conf: updated to match sarge's release
2129
2130         * apt.conf: update for sarge's release
2131         * apt.conf.stable: update for sarge's release
2132         * apt.conf: bump daily max Contents change to 25MB from 12MB
2133
2134         * cron.daily: add accepted lock and invoke cindy
2135         * cron.daily: add daily.lock
2136         * cron.daily: invoke tiffani
2137         * cron.daily: rebuild accepted buildd stuff
2138         * cron.daily: save rene-daily output on the web site
2139         * cron.daily: disable billie
2140         * cron.daily: add stats pr0n
2141
2142         * cron.hourly: invoke helena
2143
2144         * pseudo-packages.maintainers,.descriptions: miscellaneous updates
2145         * vars: add lockdir, add etch to copyoverrides
2146         * Makefile: add -Ipostgresql/server to CXXFLAGS
2147
2148         * docs/: added README.quotes
2149         * docs/: added manpages for alicia, catherine, charisma, cindy, heidi,
2150         julia, katie, kelly, lisa, madison, melanie, natalie, rhona.
2151
2152         * TODO: correct spelling of "conflicts"
2153
2154 2005-05-28  James Troup  <james@nocrew.org>
2155
2156         * helena (process_changes_files): use MTIME rather than CTIME (the
2157         C's not for 'creation', stupid).
2158         * lisa (sort_changes): likewise.
2159
2160         * jennifer (check_distributions): use has_key rather than an 'in'
2161         test which doesn't work with python2.1.  [Probably by AJ]
2162
2163 2005-03-19  James Troup  <james@nocrew.org>
2164
2165         * rene (main): use Suite::<suite>::UdebComponents to determine
2166         what components have udebs rather than assuming only 'main' does.
2167
2168 2005-03-18  James Troup  <james@nocrew.org>
2169
2170         * utils.py (rfc2047_encode): use codecs.lookup() rather than
2171         encodings.<encoding>.Codec().decode() as encodings.utf_8 no longer
2172         has a Codec() module in python2.4.  Thanks to Andrew Bennetts
2173         <andrew@ubuntu.com>.
2174
2175 2005-03-06  Joerg Jaspert  <ganneff@debian.org>
2176
2177         * helena: add -n/--new HTML output option and improved sorting
2178         options.
2179
2180 2005-03-06  Ryan Murray  <rmurray@debian.org>
2181
2182         * shania(main): use Cnf::Dir::Reject instead of REJECT
2183
2184 2005-02-08  James Troup  <james@nocrew.org>
2185
2186         * rene (main): add partial NBS support by checking that binary
2187         packages are built by their real parent and not some random
2188         stranger.
2189         (do_partial_nbs): likewise.
2190
2191 2005-01-18  James Troup  <james@nocrew.org>
2192
2193         * katie.py (Katie.build_summaries): avoid leaking file handle when
2194         extracting package description.
2195         (Katie.force_reject): remember and close each file descriptor we
2196         use.
2197         (Katie.do_reject): s/file/temp_fh/ to avoid pychecker warning.
2198         s/reason_file/reason_fd/ because it's a file descriptor.
2199         (Katie.check_dsc_against_db): avoid leaking file handle whenever
2200         invoking apt_pkg.md5sum().
2201
2202         * jennifer (check_deb_ar): new function: sanity check the ar
2203         contents of a .deb.
2204         (check_files): use it.
2205         (check_timestamps): check for data.tar.bz2 if data.tar.gz can't be
2206         found.
2207         (check_files): accept 'raw-installer' as an alias for 'byhand'.
2208
2209 2005-01-14  Anthony Towns  <ajt@debian.org>
2210
2211         * kelly: when UNACCEPTing, don't double up the "Rejecting:"
2212
2213         * propup stuff (thanks to Andreas Barth)
2214         * katie.conf: add stable MustBeOlderThan testing, add -security
2215           propup
2216         * jennifer: set distribution-version in .katie if propup may be needed
2217         * katie.py: add propogation to cross_suite_version_check
2218
2219 2004-11-27  James Troup  <james@nocrew.org>
2220
2221         * nina: new script to split monolithic queue/done into date-based
2222         hierarchy.
2223
2224         * rene (usage): document -s/--suite.
2225         (add_nbs): use .setdefault().
2226         (do_anais): likewise.
2227         (do_nbs): don't set a string to "" and then += it.
2228         (do_obsolete_source): new function - looks for obsolete source
2229         packages (i.e source packages whose binary packages are ALL a)
2230         claimed by someone else and b) newer when built from the other
2231         source package).
2232         (main): support -s/--suite.  Add 'obsolete source' to both 'daily'
2233         and 'full' check modes.  Check for obsolete source packages.
2234         linux-wlan-ng has been fixed - remove hideous bodge.
2235
2236         * jennifer (check_distributions): support 'reject' suite map type.
2237
2238         * utils.py (validate_changes_file_arg): s/file/filename/.
2239         s/fatal/require_changes/.  If require_changes is -1, ignore errors
2240         and return the .changes filename regardless.
2241         (re_no_epoch): s/\*/+/ as there must be a digit in an epoch.
2242         (re_no_revision): don't escape '-', it's not a special character.
2243         s/\*/+/ as there must be at least one non-dash character after the
2244         dash in a revision.  Thanks to Christian Reis for noticing both of
2245         these.
2246
2247         * ashley (main): pass require_changes=-1 to
2248         utils.validate_changes_file_arg().
2249
2250         * pseudo-packages.maintainers (kernel): switch to 'Debian Kernel
2251         Team <debian-kernel@lists.debian.org>'.
2252
2253         * katie.py (Katie.in_override_p): fix .startswith() usage.
2254
2255         * katie.conf (Dinstall::DefaultSuite): add as 'unstable'.
2256         (Lauren::MoreInfoURL): update to 3.0r3.
2257         (Suite::Stable::Version): likewise.
2258         (Suite::Stable::Description): likewise.
2259
2260         * cron.daily: disable automatic task override generation.
2261
2262         * cindy (process): restrict "find all packages" queries by
2263         component.  Respect Options["No-Action"].
2264         (main): add -n/--no-action support.  Only run on unstable.  Rename
2265         type to otype (pychecker).
2266
2267 2004-11-27  Daniel Silverstone  <dsilvers@digital-scurf.org>
2268
2269         * katie.conf (Billie::BasicTrees): add all architectures.
2270         (Billie::CombinationTrees): remove 'welovehp' and 'embedded', add
2271         'everything'.
2272
2273         * cron.daily: Update a 'current' symlink when creating the
2274         post-daily-cron-job database backup to aid mirroring to merkel.
2275         Run billie.
2276
2277         * billie (BillieTarget.poolish_match): handle .udeb too.
2278
2279 2004-10-13  Ryan Murray  <rmurray@debian.org>
2280
2281         * amber (do_upload): Sort changes files in "katie" order so that
2282           source always arrives before binary-only rebuilds
2283
2284 2004-10-05  James Troup  <james@nocrew.org>
2285
2286         * jennifer (check_dsc): correct reject message on invalid
2287         Maintainer field.
2288
2289 2004-09-20  James Troup  <james@nocrew.org>
2290
2291         * alicia: remove unused 'pwd' import.
2292
2293         * tea (check_override): underline suite name in output properly.
2294
2295         * rene (main): read a compressed Packages file.
2296         * tea (validate_packages): likewise.
2297
2298         * katie.py (re_fdnic): add 'r' prefix.
2299         (re_bin_only_nmu_of_mu): likewise.
2300         (re_bin_only_nmu_of_nmu): likewise.
2301
2302         * madison (main): retrieve component information too and display
2303         it if it's not 'main'.
2304         * melanie (reverse_depends_check): likewise.
2305
2306         * utils.py (pp_dep): renamed...
2307         (pp_deps): ... to this.
2308         * jeri (check_dep): update calls to utils.pp_deps().
2309         * melanie (reverse_depends_check): likewise.
2310
2311         * jennifer (check_changes): move initalization of email variables
2312         from here...
2313         (process_it): ...to here as we no longer always run
2314         check_changes().  Don't bother to initialize
2315         changes["architecture"].
2316
2317         * denise (list): renamed to...
2318         (do_list): ...this to avoid name clash with builtin 'list'.
2319         Similarly, s/file/output_file/, s/type/otype/.  Use .setdefault()
2320         for dictionaries.
2321         (main): Likewise for name clash avoidance and also
2322         s/override_type/suffix/.  Adjust call to do_list().
2323
2324 2004-09-01  Ryan Murray  <rmurray@debian.org>
2325
2326         * tea (check_files): check the pool/ directory instead of dists/
2327
2328 2004-08-04  James Troup  <james@nocrew.org>
2329
2330         * jenna (cleanup): use .setdefault() for dictionaries.
2331         (write_filelists): likewise.
2332
2333         (write_filelists): Use utils.split_args() not split() to split
2334         command line arguments.
2335         (stable_dislocation_p): likewise.
2336
2337         (write_filelists): Add support for mapping side of suite-based
2338         "Arch: all mapping".
2339         (do_da_do_da): ensure that if we're not doing all suites that we
2340         process enough to be able correct map arch: all packages.
2341
2342         * utils.py (cant_open_exc): correct exception string,
2343         s/read/open/, s/.$//.
2344
2345         * templates/amber.advisory: update to match reality a little
2346         better.
2347
2348         * melanie (reverse_depends_check): read Packages.gz rather than
2349         Packages.
2350
2351         * jennifer (check_files): check for unknown component before
2352         checking for NEWness.
2353
2354         * katie.py (Katie.in_override_p): use .startswith in favour of a
2355         slice.
2356
2357         * docs/melanie.1.sgml: document -R/--rdep-check.
2358
2359 2004-07-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
2360
2361         * billie (main): Make the verbatim lists include all the README
2362           elements.
2363         * docs/README.names: Add billie in (correcting oversight)
2364
2365 2004-07-01  James Troup  <james@nocrew.org>
2366
2367         * emilie (main): handle woody's case-sensitive python-ldap,
2368         s/keyfingerprint/keyFingerPrint/.
2369
2370 2004-06-25  James Troup  <james@nocrew.org>
2371
2372         * debian/control (Depends): add dpkg-dev since jennifer uses
2373         dpkg-source.
2374
2375 2004-06-24  James Troup  <james@nocrew.org>
2376
2377         * melanie (main): s/file/temp_file/ and close file handle before
2378         removing the temporary file.
2379         (main): don't warn about needing a --carbon-copy if in no-action
2380         mode.
2381
2382         * rene (do_nbs): pcmcia-cs has been fixed - remove hideous bodge.
2383         (main): likewise.
2384
2385         * test/006/test.py (main): check bracketed email-only form.
2386
2387         * utils.py (fix_maintainer): if the Maintainer string is bracketed
2388         email-only, strip the brackets so we don't end up with
2389         <<james@nocrew.org>>.
2390
2391 2004-06-20  James Troup  <james@nocrew.org>
2392
2393         * jennifer (process_it): only run check_changes() if
2394         check_signature() returns something.  (Likewise)
2395
2396         * utils.py (changes_compare): if there's no changes["version"] use
2397         "0" rather than None.  (Avoids a crash on unsigned changes file.)
2398
2399 2004-06-17  Martin Michlmayr  <tbm@cyrius.com>
2400
2401         * jeri (pp_dep): moved from here to ...
2402         * utils.py (pp_dep): here.
2403
2404         * melanie (main): add reverse dependency checking.
2405
2406 2004-06-17  James Troup  <james@nocrew.org>
2407
2408         * jennifer (check_dsc): s/dsc_whitespace_rules/signing_rules/.
2409         * tea (check_dscs): likewise.
2410
2411         * utils.py (parse_changes): s/dsc_whitespace_rules/signing_rules/,
2412         change from boolean to a variable with 3 possible values, 0 and 1
2413         as before, -1 means don't require a signature.  Makes
2414         parse_changes() useful for parsing arbitary RFC822-style files,
2415         e.g. 'Release' files.
2416         (check_signature): add support for detached signatures by passing
2417         the files the signature is for as an optional third argument.
2418         s/filename/sig_filename/g.  Add a fourth optional argument to
2419         choose the keyring(s) to use.  Don't os.path.basename() the
2420         sig_filename before checking it for taint.
2421         (re_taint_free): allow '/'.
2422
2423 2004-06-11  James Troup  <james@nocrew.org>
2424
2425         * tea (check_files): make override.unreadable optional.
2426         (validate_sources): close the Sources file handle.
2427
2428         * docs/README.first: clarify that 'alyson' and running
2429         add_constraints.sql by hand is something you only want to do if
2430         you're not running 'neve'.
2431
2432         * docs/README.config (Location::$LOCATION::Suites): document.
2433
2434         * db_access.py (do_query): also print out the result of the query.
2435
2436 2004-06-10  James Troup  <james@nocrew.org>
2437
2438         * katie.py (Katie.cross_suite_version_check): post-woody versions
2439         of python-apt's apt_pkg.VersionCompare() function apparently
2440         returns variable integers for less than or greater than results -
2441         update our result checking to match.
2442         * jenna (resolve_arch_all_vs_any): likewise.
2443         * charisma (main): likewise.
2444
2445 2004-06-09  James Troup  <james@nocrew.org>
2446
2447         * jennifer (process_it): s/changes_valid/valid_changes_p/.  Add
2448         valid_dsc_p and don't run check_source() if check_dsc() failed.
2449         (check_dsc): on fatal failures return 0 so check_source() isn't
2450         run (since it makes fatal assumptions about the presence of
2451         mandatory .dsc fields).
2452         Remove unused and obsolete re_bad_diff and re_is_changes regexps.
2453
2454 2004-05-07  James Troup  <james@nocrew.org>
2455
2456         * katie.conf (Rhona::OverrideFilename): unused and obsolete, remove.
2457         * katie.conf-non-US (Rhona::OverrideFilename): likewise.
2458
2459         * katie.conf (Dir::Override): remove duplicate definition.
2460
2461         * neve (get_or_set_files_id): add an always-NULL last_used column
2462         to output.
2463
2464 2004-04-27  James Troup  <james@nocrew.org>
2465
2466         * apt.conf-security (tree "dists/stable/updates"): add
2467         ExtraOverride - noticed by Joey Hess (#246050).
2468         (tree "dists/testing/updates"): likewise.
2469
2470 2004-04-20  James Troup  <james@nocrew.org>
2471
2472         * jennifer (check_files): check for existing .changes or .katie
2473         files of the same name in the Suite::<suite>::Copy{Changes,Katie}
2474         directories.
2475
2476 2004-04-19  James Troup  <james@nocrew.org>
2477
2478         * jennifer (check_source): handle failure to remove the temporary
2479          directory (used for source tree extraction) better, specifically:
2480          if we fail with -EACCES, chmod -R u+rwx the temporary directory
2481          and try again and if that works, REJECT the package.
2482
2483 2004-04-17  James Troup  <james@nocrew.org>
2484
2485         * docs/madison.1.sgml: document -b/--binary-type,
2486         -g/--greaterorequal and -G/--greaterthan.
2487
2488         * madison (usage): -b/--binary-type only takes a single argument.
2489         Document -g/--greaterorequal and -G/--greaterthan.
2490         (main): add support for -g/--greaterorequal and -G/--greaterthan.
2491
2492 2004-04-12  Daniel Silverstone  <dsilvers@digital-scurf.org>
2493
2494         * billie: Cleaned up a load of comments, added /README.non-US to
2495           the verbatim matches list.
2496
2497 2004-04-07  Daniel Silverstone  <dsilvers@digital-scurf.org>
2498
2499         * utils.py (size_type): Make it use real binary megabytes and
2500           kilobytes, instead of the marketing terms used before.
2501
2502 2004-04-07  James Troup  <james@nocrew.org>
2503
2504         * katie.py (Katie.check_dsc_against_db): in the case we're
2505         ignoring an identical-to-existing orig.tar.gz remember the path to
2506         the existent version in pkg.orig_tar_gz.  Adjust query to grab
2507         location.path too to be able to do so.
2508
2509 2004-04-03  James Troup  <james@nocrew.org>
2510
2511         * debian/control (Depends): add python2.1-email | python (>= 2.2)
2512         needed for new utils.rfc2047_encode() function.
2513
2514         * utils.py (re_parse_maintainer): allow whitespace inside the
2515         email address.
2516         (Error): new exception base class.
2517         (ParseMaintError): new exception class.
2518         (force_to_utf8): new function.
2519         (rfc2047_encode): likewise.
2520         (fix_maintainer): rework.  use force_to_utf8() to force name and
2521         rfc822 return values to always use UTF-8.  use rfc2047_encode() to
2522         return an rfc2047 value.  Validate the address to catch missing
2523         email addresses and (some) broken ones.
2524
2525         * katie.py (nmu_p.is_an_nmu): adapt for new utils.fix_maintainer()
2526         by adopting foo2047 return value.
2527         (Katie.dump_vars): add changedby2047 and maintainer2047 as
2528         mandatory changes fields.  Promote changes and maintainer822 to
2529         mandatory fields.
2530         (Katie.update_subst): default maintainer2047 rather than
2531         maintainer822.  User foo2047 rather than foo822 when setting
2532         __MAINTAINER_TO__ or __MAINTAINER_FROM__.
2533
2534         * jennifer (check_changes): set default changes["maintainer2047"]
2535         and changes["changedby2047"] values rather than their 822
2536         equivalents.  Makes changes["changes"] a mandatory field.  Adapt
2537         to new utils.fix_maintainer() - reject on exception and adopt
2538         foo2047 return value.
2539         (check_dsc): if a mandatory field is missing don't do any further
2540         checks and as a result reduce paranoia about dsc[var] existence.
2541         Validate the maintainer field by calling new
2542         utils.fix_maintainer().
2543
2544         * ashley (main): add changedby2047 and maintainer2047 to mandatory
2545         changes fields.  Promote maintainer822 to a mandatory changes
2546         field.  add "pool name" to files fields.
2547
2548         * test/006/test.py: new file - tests for new
2549         utils.fix_maintainer().
2550
2551 2004-04-01  James Troup  <james@nocrew.org>
2552
2553         * templates/lisa.prod (To): use __MAINTAINER_TO__ not __MAINTAINER__.
2554
2555         * jennifer (get_changelog_versions): create a symlink mirror of
2556         the source files in the temporary directory.
2557         (check_source): if check_dsc_against_db() couldn't find the
2558         orig.tar.gz bail out.
2559
2560         * katie.py (Katie.check_dsc_against_db): if the orig.tar.gz is not
2561         part of the upload store the path to it in pkg.orig_tar_gz and if
2562         it can't be found set pkg.orig_tar_gz to -1.
2563
2564         Explicitly return the second value as None in the (usual) case
2565         where we don't have to reprocess.  Remove obsolete diagnostic
2566         logs.
2567
2568         * lisa (prod_maintainer): don't return anything, no one cares. (pychecker)
2569
2570         * utils.py (temp_filename): new helper function that wraps around
2571         tempfile.mktemp().
2572
2573         * katie.py (Katie.do_reject): use it and don't import tempfile.
2574         * lisa (prod_maintainer): likewise.
2575         (edit_note): likewise.
2576         (edit_new): likewise.
2577         * lauren (reject): likewise.
2578         * melanie (main): likewise.
2579         * neve (do_sources): likewise.
2580         * rene (main): likewise.
2581         * tea (validate_sources): likewise.
2582
2583 2004-03-31  James Troup  <james@nocrew.org>
2584
2585         * tea (validate_sources): remove unused 's' temporary variable.
2586
2587 2004-03-15  James Troup  <james@nocrew.org>
2588
2589         * jennifer (check_dsc): check changes["architecture"] for
2590         source before we do anything else.
2591
2592 2004-03-21  Daniel Silverstone  <dsilvers@digital-scurf.org>
2593
2594         * billie: Added
2595         * katie.conf (Billie): Added sample Billie stanza to katie.conf
2596
2597 2004-03-12  James Troup  <james@nocrew.org>
2598
2599         * docs/README.config (Dir::Queue::BTSVersionTrack): document.
2600
2601         * katie.conf (Dir::Queue::BTSVersionTrack): define.
2602
2603         * katie.py (Katie.accept): add support for DebBugs Version
2604         Tracking by writing out .versions (generated in jennifer's
2605         get_changelog_versions()) and .debinfo (mapping of binary ->
2606         source) files.
2607
2608         * ashley (main): add dsc["bts changelog"].
2609
2610         * katie.py (Katie.dump_vars): store dsc["bts changelog"] too.
2611
2612         * jennifer (check_diff): obsoleted by check_source(), removed.
2613         (check_source): new function: create a temporary directory and
2614         move into it and call get_changelog_versions().
2615         (get_changelog_versions): new function: extract the source package
2616         and optionally parse debian/changelog to obtain the version
2617         history for the BTS.
2618         (process_it): call check_source() rather than check_diff().
2619
2620 2004-03-08  James Troup  <james@nocrew.org>
2621
2622         * lisa (edit_index): Fix logic swapo from 'use "if varfoo in
2623         listbar" rather than "if listbar.count(varfoo)"' change on
2624         2004-02-24.
2625
2626 2004-03-05  James Troup  <james@nocrew.org>
2627
2628         * alicia (main): don't warn about not closing bugs - we don't
2629         manage overrides through the BTS.
2630
2631 2004-02-27  Martin Michlmayr  <tbm@cyrius.com>
2632
2633         * docs/README.config: lots of updates and corrections.
2634         * docs/README.first: likewise.
2635
2636         * docs/README.config: drop unused Dir::Queue::Root.
2637         * katie.conf-non-US: likewise.
2638         * katie.conf: likewise.
2639         * katie.conf-security: likewise.
2640
2641 2004-02-27  James Troup  <james@nocrew.org>
2642
2643         * rose (process_tree): use 'if var in [ list ]' rather than long
2644         'if var == foo or var == bar or var == baz'.  Suggested by Martin
2645         Michlmayr.
2646
2647         * jennifer (check_files): reduce 'if var != None' to 'if var' as
2648         suggested by Martin Michlmayr.
2649         * catherine (poolize): likewise.
2650         * charisma (main): likewise.
2651         * halle (check_changes): likewise.
2652         * heidi (main): likewise.
2653         (process_file): likewise.
2654         * kelly (install): likewise.
2655         (stable_install): likewise.
2656         * utils.py (fix_maintainer): likewise.
2657
2658         * apt.conf: add support for debian-installer in testing-proposed-updates.
2659         * katie.conf (Suite::Testing-Proposed-Updates::UdebComponents):
2660         add - set to main.
2661
2662         * mkmaintainers: add "-T15" option to wget of non-US packages file
2663         so that we don't hang cron.daily if non-US is down.
2664
2665         * templates/lisa.prod (Subject): Prefix with "Comments regarding".
2666
2667         * templates/jennifer.bug-close: add Source and Source-Version
2668         pseudo-headers that may be used for BTS Version Tracking someday
2669         [ajt@].
2670
2671         * rene (do_nbs): special case linux-wlan-ng like we do for pcmcia.
2672         (main): likewise.
2673
2674         * cron.unchecked: it's /org/ftp.debian.org not ftp-master.
2675
2676 2004-02-25  James Troup  <james@nocrew.org>
2677
2678         * katie.conf (SuiteMappings): don't map testing-security to
2679         proposed-updates.
2680
2681 2004-02-24  James Troup  <james@nocrew.org>
2682
2683         * katie.py (Katie.__init__): remove unused 'values' field.
2684
2685         * utils.py (extract_component_from_section): use 's.find(c) != -1'
2686         rather than 's.count(c) > 0'.
2687
2688         * katie.py (Katie.source_exists): use "if varfoo in listbar"
2689         rather than "if listbar.count(varfoo)".
2690         * halle (check_joey): likewise.
2691         * jeri (check_joey): likewise.
2692         * lisa (edit_index): likewise.
2693         * jenna (stable_dislocation_p): likewise.
2694
2695         * jennifer (main): remove unused global 'nmu'.
2696
2697 2004-02-03  Daniel Silverstone  <dsilvers@digital-scurf.org>
2698
2699         * pseudo-packages.maintainers (ftp.debian.org): Changed the maintainer
2700           to be ftpmaster@ftp-master.debian.org to bring it into line with how
2701           the dak tools close bugs.
2702
2703 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2704
2705         * katie.conf (Alicia): Added an Alicia section with email address
2706         * templates/alicia.bug-close: Added
2707         * docs/alicia.1.sgml: Added the docs for the -d/--done argument
2708         * alicia (main): Added a -d/--done argument
2709
2710 2004-02-02  Daniel Silverstone  <dsilvers@digital-scurf.org>
2711
2712         * templates/lisa.prod: Oops, missed a BITCH->PROD conversion
2713
2714 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2715
2716         * lisa (prod_maintainer): Added function to prod the maintainer without
2717           accepting or rejecting the package
2718         * templates/lisa.prod: Added this template for the prodding mail
2719
2720         * .cvsignore: Added neve-files which turns up in new installations
2721
2722 2004-01-30  Daniel Silverstone  <dsilvers@digital-scurf.org>
2723
2724         * alicia (usage): Fixed usage message to offer section and priority
2725           as seperately optional arguments.
2726         * alicia (main): Added a % (arg) interpolation needed when only
2727           one of section or priority is provided and it cannot be found.
2728
2729 2004-01-29  Daniel Silverstone  <dsilvers@digital-scurf.org>
2730
2731         * alicia: Added
2732         * docs/alicia.1.sgml: Added
2733         * docs/Makefile: Added alicia to the list of manpages to build
2734         * docs/README.names: Noted what alicia does
2735         * docs/README.first: Noted where alicia is useful
2736
2737 2004-01-21  James Troup  <james@nocrew.org>
2738
2739         * madison (main): add -b/--binary-type.
2740         (usage): likewise.
2741
2742         * denise (main): generate debian-installer overrides for testing
2743         too.
2744         * apt.conf: add support for debian-installer in testing.
2745         * katie.conf (Suite::Testing::UdebComponents): set to main.
2746
2747         * katie.conf (Dinstall::SigningKeyIds): 2004 key.
2748         * katie.conf-non-US (Dinstall::SigningKeyIds): likewise.
2749         * katie.conf-security (Dinstall::SigningKeyIds): likewise.
2750
2751         * utils.py (parse_changes): don't process data not inside the
2752         signed data.  Thanks to Andrew Suffield <asuffield@debian.org> for
2753         pointing this out.
2754         * test/005/test.py (main): new test to test for above.
2755
2756 2004-01-04  James Troup  <james@nocrew.org>
2757
2758         * jenna (write_filelists): correct typo, s/Components/Component/
2759         for Options.
2760
2761 2004-01-04  Ryan Murray  <rmurray@debian.org>
2762
2763         * cron.buildd: move update of overrides and Packages file...
2764         * cron.unchecked: to here.
2765         * katie.conf-non-US: (Dinstall::SingingKeyIds) update for 2003v2 key
2766         * katie.conf-security: likewise
2767
2768 2003-11-20  James Troup  <james@nocrew.org>
2769
2770         * jenna (main): don't use utils.try_with_debug(), it produces way
2771         too much output.
2772
2773         * halle (check_changes): don't error out if a .changes refers to a
2774         non-existent package, just warn and skip the file.
2775
2776         * docs/README.stable-point-release: mention halle and .changes
2777         obsoleted by removal through melanie.  Update for 3.0r2.
2778
2779         * katie.conf (Suite::Stable::Version): bump to 3.0r2.
2780         (Suite::Stable::Description): update for 3.0r2.
2781         (Lauren::MoreInfoURL): likewise.
2782         * katie.conf-non-US (Suite::Stable::Version): likewise.
2783         (Suite::Stable::Description): likewise.
2784         (Lauren::MoreInfoURL): likewise.
2785
2786         * apt.conf.stable (Default): don't define MaxContentsChange.
2787         * apt.conf.stable-non-US (Default): likewise.
2788
2789         * lauren (reject): hack to work around partial replacement of an
2790         upload, i.e. one or more binaries superseded by another source
2791         package.
2792
2793 2003-11-17  James Troup  <james@nocrew.org>
2794
2795         * pseudo-packages.maintainers: point installation-reports at
2796         debian-boot@l.d.o rather than debian-testing@l.d.o at jello@d.o's
2797         request.
2798
2799         * utils.py (parse_changes): calculate the number of lines once
2800         with len() rather than max().
2801
2802         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
2803         files, since check_dsc_against_db() deletes the .orig.tar.gz
2804         entry.
2805
2806 2003-11-13  Ryan Murray  <rmurray@debian.org>
2807
2808         * apt.conf: specify a src override file for debian-installer
2809
2810 2003-11-10  James Troup  <james@nocrew.org>
2811
2812         * fernanda.py (strip_pgp_signature): new function - strips PGP
2813         signature from a file and returns the modified contents of the
2814         file in a string.
2815         (display_changes): use it.
2816         (read_dsc): likewise.
2817
2818 2003-11-09  Ryan Murray  <rmurray@debian.org>
2819
2820         * cron.buildd: export accepted_autobuild table for unstable, and use
2821         it to generate the incoming Packages/Sources rather than having apt
2822         walk the directory.
2823         * apt.conf.buildd: use exported table from cron.buildd to generate
2824         Packages/Sources
2825
2826 2003-11-07  James Troup  <james@nocrew.org>
2827
2828         * kelly: import errno.
2829
2830         * katie.py (Katie.build_summaries): sort override disparities.
2831
2832         * kelly (install): set dsc_component based on the .dsc's component
2833         not a random binaries.
2834
2835 2003-10-29  James Troup  <james@nocrew.org>
2836
2837         * katie.py (Katie.build_summaries): don't assume changes["source"]
2838         exists since it might not.
2839
2840 2003-10-20  James Troup  <james@nocrew.org>
2841
2842         * pseudo-packages.maintainers: update security.d.o to use
2843         team@s.d.o at joy@'s request.
2844
2845 2003-10-17  James Troup  <james@nocrew.org>
2846
2847         * jennifer (check_dsc): use .startswith rather than .find() == 0.
2848
2849 2003-10-17  Martin Michlmayr  <tbm@cyrius.com>
2850
2851         * tea (chk_bd_process_dir): use .endswith rather than slice.
2852
2853 2003-10-14  James Troup  <james@nocrew.org>
2854
2855         * tea (check_build_depends): new function.
2856         (chk_bd_process_dir): likewise.  Validates build-depends in .dsc's
2857         in the archive.
2858         (main): update for new function.
2859         (usage): likewise.
2860
2861         * katie.py (Katie.do_reject): sanitize variable names,
2862         s/reject_filename/reason_filename/, s/fd/reason_fd/.  Move shared
2863         os.close() to outside if clause.
2864
2865         * jennifer (check_dsc): check build-depends and
2866         build-depends-indep by running them past apt_pkg.ParseSrcDepends.
2867         Fold the ARRAY check into the same code block and tidy up it's
2868         rejection message.
2869         (check_changes): ensure that the Files field is non-empty.
2870         Suggested by Santiago Vila <sanvila@unex.es>
2871         (check_changes): normalize reject messages.
2872         (check_dsc): instead of doing most of the checks inside a for loop
2873         and an if, find the dsc_filename in a short loop over files first
2874         and then do all the checks.  Add check for more than one .dsc in a
2875         .changes which we can't handle.  Normalize reject messages.
2876
2877 2003-10-13  James Troup  <james@nocrew.org>
2878
2879         * katie.conf (Dinstall::Reject::NoSourceOnly): set to true.
2880         * katie.conf-non-US (Dinstall::Reject::NoSourceOnly): likewise.
2881
2882         * jennifer (check_files): Set 'has_binaries' and 'has_source'
2883         variables while iterating over 'files'.  Don't regenerate it when
2884         checking for source if source is mentioned.
2885
2886         Reject source only uploads if the config variable
2887         Dinstall::Reject::NoSourceOnly is set.
2888
2889 2003-10-03  James Troup  <james@nocrew.org>
2890
2891         * rene (main): add nasty hardcoded reference to debian-installer
2892         so we detect NBS .udebs.
2893
2894 2003-09-29  James Troup  <james@nocrew.org>
2895
2896         * apt.conf (old-proposed-updates): remove.
2897         * apt.conf-non-US (old-proposed-updates): likewise.
2898
2899 2003-09-24  James Troup  <james@nocrew.org>
2900
2901         * tea (check_files_not_symlinks): new function, ensure files
2902         mentioned in the database aren't symlinks.  Includes code to
2903         update any files that are like this to their real filenames +
2904         location; commented out by though.
2905         (usage): update for new function.
2906         (main): likewise.
2907
2908 2003-09-24  Anthony Towns  <ajt@debian.org>
2909
2910         * vars: external-overrides variable added
2911         * cron.daily: Update testing/unstable Task: overrides from joeyh
2912         managed external source.
2913
2914 2003-09-22  James Troup  <james@nocrew.org>
2915
2916         * kelly (install): if we can't move the .changes into queue/done,
2917         fail don't warn and carry on.  The old behaviour pre-dates NI and
2918         doesn't make much sense now since jennifer checks both
2919         queue/accepted and queue/done for any .changes files it's
2920         processing.
2921
2922         * utils.py (move): don't throw exceptions on existing files or
2923         can't overwrite, instead just fubar out.
2924
2925         * jennifer (check_dsc): also check Build-Depends-Indep for
2926         ARRAY-lossage.  Noticed by Matt Zimmerman <mdz@debian.org>.
2927
2928 2003-09-18  James Troup  <james@nocrew.org>
2929
2930         * katie.py (Katie.close_bugs): only log the bugs we've closed
2931         once.
2932
2933         * kelly (main): log as 'kelly', not 'katie'.
2934
2935 2003-09-16  James Troup  <james@nocrew.org>
2936
2937         * katie.py (Katie.check_binary_against_db): likewise noramlize.
2938
2939         * jennifer (check_changes): normalize reject message for "changes
2940         file already exists" to be %s: <foo>.
2941         (check_dsc): add a check for 'Build-Depends: ARRAY(<hex>)'
2942         produced by broken dpkg-source in 1.10.11.  Tone down and
2943         normalize rejection message for incompatible 'Format' version
2944         numbers.
2945         (check_diff): likewise tone down and normalize.
2946
2947 2003-09-07  James Troup  <james@nocrew.org>
2948
2949         * utils.py (parse_changes): if dsc_whitespace_rules is false,
2950         don't bomb out on bogus empty lines.
2951         (build_file_list): check for changes["files"] earlier.  use Dict
2952         to create files[name] dictionary.
2953         (send_mail): don't bother validating arguments.
2954         (check_signature): minor improvements to some of the rejection
2955         messages including listing the key id of the key that wasn't found
2956         in the keyring.
2957         (wrap): new function.
2958
2959         * tea: add new check 'validate-indices' that ensures all files
2960         mentioned in indices (Packages, Sources) files do in fact exist.
2961
2962         * catherine (poolize): use a local re_isadeb which handles legacy
2963         (i.e. no architecture) style .deb filenames.
2964
2965         * rosamund: new script.
2966
2967         * rhona (check_binaries): when checking for binary packages not in
2968         a suite, don't bother selecting files that already have a
2969         last_used date.
2970         (check_sources): likewise.
2971
2972         * rhona: change all SQL EXISTS sub-query clauses to use the
2973         postgres suggested convention of "SELECT 1 FROM".
2974         * andrea (main): likewise.
2975         * tea (check_override): likewise.
2976         * catherine (main): likewise.
2977
2978         * katie.conf (Suite): remove OldStable and Old-Proposed-Updates
2979         entries and in other suites MustBeNewerThan's.
2980         (SuiteMappings): likewise
2981         * katie.conf-non-US: likewise.
2982         * katie.conf-security: likewise.
2983
2984         * apt.conf-security: remove oldstable.
2985         * apt.conf.stable: likewise.
2986         * apt.conf.stable-non-US: likewise.
2987         * cron.buildd-security: likewise.
2988         * cron.daily-security: likewise.
2989         * vars-security (suites): likewise.
2990         * wanna-build/trigger.daily: likewise.
2991
2992         * claire.py (clean_symlink): move...
2993         * utils.py (clean_symlink): here.
2994
2995         * claire.py (find_dislocated_stable): update accordingly.
2996
2997 2003-08-16  Anthony Towns  <ajt@debian.org>
2998
2999         * katie.py (source_exists): expand the list of distributions
3000         the source may exist in to include any suite that's mapped to
3001         the destination suite (even transitively (a->b->c)). This should
3002         unbreak binary uploads to *-proposed-updates.
3003
3004 2003-08-09  Randall Donald  <rdonald@debian.org>
3005
3006         * lisa (recheck): change changes["distribution"].keys() to
3007         Katie.pkg.changes...
3008
3009 2003-08-08  Randall Donald  <rdonald@debian.org>
3010
3011         * katie.py: only tag bugs as fixed-in-experimental for
3012         experimental uploads
3013
3014 2003-07-26  Anthony Towns  <ajt@debian.org>
3015
3016         * katie.py (source_exists): add an extra parameter to limit the
3017         distribution(s) the source must exist in.
3018         * kelly, lisa, jennifer: update to use the new source_exists
3019
3020 2003-07-15  Anthony Towns  <ajt@debian.org>
3021
3022         * ziyi: quick hack to support a FakeDI line in apt.conf to generate
3023         checksums for debian-installer stuff even when it's just a symlink to
3024         another suite
3025
3026         * apt.conf: add the FakeDI line
3027
3028 2003-06-09  James Troup  <james@nocrew.org>
3029
3030         * kelly (check): make sure the 'file' we're looking for in 'files'
3031         hasn't been deleted by katie.check_dsc_against_db().
3032
3033 2003-05-07  James Troup  <james@nocrew.org>
3034
3035         * helena (time_pp): fix s/years/year/ typo.
3036
3037 2003-04-29  James Troup  <james@nocrew.org>
3038
3039         * madison (usage): document -c/--component.
3040
3041         * madison (usage): Fix s/seperated/separated/.
3042         * melanie (usage): likewise.
3043         * jenna (usage): likewise.
3044
3045 2003-04-24  James Troup  <james@nocrew.org>
3046
3047         * cron.daily-non-US: if there's nothing for kelly to install, say
3048         so.
3049
3050         * jennifer (check_timestamps): print sys.exc_value as well as
3051         sys.exc_type when capturing exceptions.  Prefix 'timestamp check
3052         failed' with 'deb contents' to make it clearer what timestamp(s)
3053         are being checked.
3054
3055 2003-04-15  James Troup  <james@nocrew.org>
3056
3057         * cron.daily-non-US: only run kelly if there are some .changes
3058         files in accepted.
3059
3060         * rene: add -m/--mode argument which can be either daily (default)
3061         or full.  In daily mode only 'nviu' and 'nbs' checks are run.
3062         Various changes to make this possible including a poor attempt at
3063         splitting main() up a little.  De-hardcode suite numbers from SQL
3064         queries and return quietly from do_nviu() if experimental doesn't
3065         exist (i.e. non-US).  Hardcode pcmcia-cs as dubious NBS since it
3066         is.
3067
3068         * debian/control (Depends): remove python-zlib as it's obsolete.
3069
3070         * charisma (main): don't slice the \n off strings when we're
3071         strip()-ing it anyway.
3072         * heidi (set_suite): likewise.
3073         (process_file): likewise.
3074         * natalie (process_file): likewise.
3075
3076 2003-04-08  James Troup  <james@nocrew.org>
3077
3078         * katie.py (Katie.check_dsc_against_db): improve the speed of two
3079         slow queries by using one LIKE '%foo%' and then matching against
3080         '%s' or '/%s$' in python.  Also only join location when we need it
3081         (i.e. the .orig.tar.gz query).  On auric, this knocks ~3s of each
3082         query, so 6s for each sourceful package.
3083
3084         * cron.daily: invoke rene and send the report to ftpmaster.
3085         * cron.daily-non-US: likewise.
3086
3087 2003-03-14  James Troup  <james@nocrew.org>
3088
3089         * utils.py (send_mail): default filename to blank.
3090         * amber (make_advisory): adapt.
3091         * jennifer (acknowledge_new): likewise.
3092         * katie.py (Katie.close_bugs): likewise.
3093         (Katie.announce): likewise.
3094         (Katie.accept): likewise.
3095         (Katie.check_override): likewise.
3096         (Katie.do_reject): likewise.
3097         * kelly (do_reject): likewise.
3098         (stable_install): likewise.
3099         * lisa (do_bxa_notification): likewise.
3100         * lauren (reject): likewise.
3101         * melanie (main): likewise.
3102
3103         * rene (add_nbs): check any NBS packages against unstable to see
3104         if they haven't been removed already.
3105
3106         * templates/katie.rejected: remove paragraph about rejected files
3107         since they're o-rwx due to c-i-m and the uploader can't do
3108         anything about them and shania will take care of them anyway.
3109
3110         * madison (usage): update usage example to use comma seperation.
3111         * melanie (usage): likewise.
3112
3113         * utils.py (split_args): new function; splits command line
3114         arguments either by space or comma (whichever is used).  Also has
3115         optional-but-default DWIM spurious space detection to avoid
3116         'command -a i386, m68k' problems.
3117         (parse_args): use it.
3118         * melanie (main): likewise.
3119
3120         * melanie (main): force the admin to tell someone if we're not
3121         doing a rene-led removal (or closing a bug, which counts as
3122         telling someone).
3123
3124 2003-03-05  James Troup  <james@nocrew.org>
3125
3126         * katie.conf (Section): add embedded, gnome, kde, libdevel, perl
3127         and python sections.
3128         * katie.conf-security (Section): likewise.
3129
3130         * add_constraints.sql: add uid and uid_id_seq to grants.
3131
3132         * lisa (determine_new): also warn about adding overrides to
3133         oldstable.
3134
3135         * madison (main): make the -S/--source-and-binary query obey
3136         -s/--suite restrictions.
3137
3138 2003-03-03  James Troup  <james@nocrew.org>
3139
3140         * madison (main): if the Archive_Maintenance_In_Progress lockfile
3141         exists, warn the user that our output might seem strange.  (People
3142         get confused by multiple versions in a suite which happens
3143         post-kelly but pre-jenna.)
3144
3145 2003-02-21  James Troup  <james@nocrew.org>
3146
3147         * kelly (main): we don't need to worry about StableRejector.
3148
3149         * melanie (main): sort versions with apt_pkg.VersionCompare()
3150         prior to output.
3151
3152         * lauren: new script to manually reject packages from
3153         proposed-updates.  Updated code from pre-NI kelly (nee katie).
3154
3155 2003-02-20  James Troup  <james@nocrew.org>
3156
3157         * kelly (init): remove unused -m/--manual-reject argument.
3158
3159         * katie.py (Katie.force_reject): renamed from force_move to make
3160         it more explicit what this function does.
3161         (Katie.do_reject): update to match.
3162
3163         * utils.py (prefix_multi_line_string): add an optional argument
3164         include_blank_lines which defaults to 0.  If non-zero, blank lines
3165         will be includes in the output.
3166
3167         * katie.py (Katie.do_reject): don't add leading space to each line
3168         of the reject message.  Include blank lines when showing the
3169         message to the user.
3170
3171 2003-02-19  Martin Michlmayr  <tbm@cyrius.com>
3172
3173         * utils.py (fix_maintainer): replace pointless re.sub() with
3174         simple string format.
3175
3176 2003-02-11  James Troup  <james@nocrew.org>
3177
3178         * lisa (edit_overrides): only strip-to-one-char and upper-case
3179         non-numeric answers.  Fixes editing of items with indices >= 10;
3180         noticed by Randall.
3181         (edit_overrides): correct order of arguments to "not a valid
3182         index" error message.
3183
3184         * jenna (cleanup): call resolve_arch_all_vs_any() rather than
3185         remove_duplicate_versions(); thanks to aj for the initial
3186         diagnosis.
3187         (remove_duplicate_versions): correct how we return
3188         dominant_versions.
3189         (resolve_arch_all_vs_any): arch_all_versions needs to be a list of
3190         a tuple rather than just a tuple.
3191
3192 2003-02-10  James Troup  <james@nocrew.org>
3193
3194         * emilie: new script - sync fingerprint and uid tables with a
3195         debian.org LDAP DB.
3196
3197         * init_pool.sql: new table 'uid'; contains user ids.  Reference it
3198         in 'fingerprint'.
3199
3200         * db_access.py (get_or_set_uid_id): new function.
3201
3202         * jennifer (main): update locking to a) not used FCNTL (deprecated
3203         in python >= 2.2) and b) acknowledge upstream's broken
3204         implementation of lockf (see Debian bug #74777), c) try to acquire
3205         the lock non-blocking.
3206         * kelly (main): likewise.
3207
3208         * contrib/python_1.5.2-fcntl_lockf.diff: obsolete, removed.
3209
3210         * madison (main): only append the package to new_packages if it's
3211         not already in there; fixes -S/--source-and-binary for cases where
3212         the source builds a binary package of the same name.
3213
3214 2003-02-10  Anthony Towns  <ajt@debian.org>
3215
3216         * madison (main): use explicit JOIN syntax for
3217         -S/--source-and-binary queries to reduce the query's runtime from
3218         >10 seconds to negligible.
3219
3220 2003-02-08  James Troup  <james@nocrew.org>
3221
3222         * rene (main): in the NVIU output, append items to lists, not
3223         extend them; fixes amusing suggestion that "g n u m e r i c" (sic)
3224         should be removed.
3225
3226 2003-02-07  James Troup  <james@nocrew.org>
3227
3228         * apt.conf (tree "dists/unstable"): Add bzip2-ed Packages and
3229         Sources [aj].
3230
3231         * pseudo-packages.maintainers (bugs.debian.org): s/Darren
3232         O. Benham/Adam Heath/.
3233
3234         * katie.conf (Suite::Stable::Version): bump to 3.0r1a.
3235         (Suite::Stable::Description): update for 3.0r1a.
3236         (Dinstall::SigningKeyIds): update for 2003 key [aj].
3237
3238         * utils.py (gpgv_get_status_output): rename from
3239         get_status_output().
3240
3241         * neve (check_signature): use gpgv_get_status_output and Dict from
3242         utils().  Add missing newline to error message about duplicate tokens.
3243
3244         * saffron (per_arch_space_use): also print space used by source.
3245         (output_format): correct string.join() invocation.
3246
3247         * jennifer (check_signature): ignored duplicate EXPIRED tokens.
3248
3249 2003-02-04  James Troup  <james@nocrew.org>
3250
3251         * cron.buildd: correct generation of Packages/Sources and grep out
3252         non-US/non-free as well as non-free.
3253
3254 2003-02-03  Ryan Murray  <rmurray@debian.org>
3255
3256         * cron.buildd: generate quinn-diff output with full Packages/Sources
3257           files to get out-of-date vs. uncompiled right.
3258         * apt.conf.buildd: no longer generate uncompressed files, as they
3259           are generated in cron.buildd instead
3260         * add -i option to quinn-diff to ignore binary-all packages
3261         * apt.conf.buildd: remove and readd udeb to extensions.  If the udebs
3262           aren't in the packages file, the arch that uploaded them will build
3263           them anyways...
3264
3265 2003-01-30  James Troup  <james@nocrew.org>
3266
3267         * rene (main): only print suggested melanie command when there's
3268         some NBS to remove.
3269
3270 2003-01-30  Ryan Murray  <rmurray@debian.org>
3271
3272         * cron.buildd: fix incorrectly inverted lockfile check
3273
3274 2003-01-29  Ryan Murray  <rmurray@debian.org>
3275
3276         * cron.buildd: generate override.sid.all3.src
3277         * apt.conf.buildd: use generated override.sid.all3.src
3278
3279 2003-01-27  Martin Michlmayr  <tbm@cyrius.com>
3280
3281         * utils.py (get_status_output): moved from jennifer.
3282         (Dict): likewise.
3283         (check_signature): likewise.
3284
3285         * jennifer (get_status_output): moved to utils.py.
3286         (Dict): likewise.
3287         (check_signature): likewise.
3288
3289         * utils.py (check_signature): add an argument to specifiy which
3290         function to call when an error was found.
3291         (check_signature): document this function better.
3292
3293         * jennifer (check_files): pass the reject function as an argument
3294         to utils.check_signature.
3295         (process_it): likewise.
3296
3297 2003-01-20  James Troup  <james@nocrew.org>
3298
3299         * rene (main): lots of changes to improve the output and make it
3300         more useful.
3301
3302         * katie.py (Katie.check_override): make the override messages
3303         clearer (hopefully).
3304
3305 2002-12-26  James Troup  <james@nocrew.org>
3306
3307         * ziyi (usage): document the ability to pass suite(s) as
3308         argument(s).
3309         (main): read apt.conf after checking for -h/--help.
3310
3311         * tea (main): take the check to run as an argument.
3312
3313         * saffron.R: R script to graph daily install runs.
3314
3315         * saffron: new script; various stats functions.
3316
3317         * rhona (main): connect to the database after checking for -h/--help.
3318
3319         * neve (do_da_do_da): if no -a/--action option is given, bail out.
3320
3321         * melanie (main): sort versions with utils.arch_compare_sw().
3322
3323         * madison (usage): alphabetize order of options.
3324         * melanie (usage): likewise.
3325
3326         * kelly (usage): fix usage short description (we aren't dinstall).
3327
3328         * julia (usage): fix usage description and alphabetize order of
3329         options.
3330
3331         * jeri (usage): fix usage short description.
3332
3333         * jennifer (main): move --help and --version checks from here...
3334         (init): to here so that they work with an empty katie.conf.
3335         * kelly: likewise.
3336
3337         * alyson (usage): new function.
3338         (main): use it.
3339         * andrea: likewise.
3340         * ashley: likewise.
3341         * cindy: likewise.
3342         * denise: likewise.
3343         * helena: likewise.
3344         * neve: likewise.
3345         * rene: likewise.
3346         * rose: likewise.
3347         * tea: likewise.
3348
3349         * apt.conf.stable (tree "dists/stable"): add missing ExtraOverride
3350         entry that caused tasks to be omitted from 3.0r1.
3351
3352 2002-12-10  James Troup  <james@nocrew.org>
3353
3354         * jennifer (check_files): sanity check the Depends field to ensure
3355         it's non-empty if present since apt chokes on an empty one.
3356         Thanks to Ryan Murray for the idea.
3357
3358 2002-12-08  James Troup  <james@nocrew.org>
3359
3360         * katie.conf-security (Helena::Directories): new; include accepted
3361         in addition to byhand and new.
3362
3363         * helena (process_changes_files): use utils.arch_compare_sw().
3364         Justify things based on the longest [package, version,
3365         architecture].  Reduce '[note]' to '[N]' to save space, and remove
3366         the commas in architecture and version lists for the same reason.
3367         (main): make directories we process configurable through
3368         Helena::Directories in the config file; if that doesn't exist
3369         default to the old hardcoded values (byhand & new).
3370
3371         * utils.py (arch_compare_sw): moved here from madison.
3372         * madison (main): adjust to compensate.
3373
3374 2002-12-06  James Troup  <james@nocrew.org>
3375
3376         * ziyi (main): fix "suite foo not in apt.conf" msg to use the
3377         right filename.
3378
3379 2002-12-05  James Troup  <james@nocrew.org>
3380
3381         * katie.conf-non-US (Julia::KnownPostgres): add 'udmsearch'.
3382
3383 2002-11-28  Randall Donald  <rdonald@debian.org>
3384
3385         * fernanda.py (read_control): fix typo of 'Architecture'.
3386
3387 2002-11-26  James Troup  <james@nocrew.org>
3388
3389         * lisa (check_pkg): call less with '-R' so we see the colour from
3390         Randall's fernanda changes.
3391
3392         * neve (process_sources): if Directory points to a legacy location
3393         but the .dsc isn't there; assume it's broken and look in the pool.
3394         (update_section): new, borroed from alyson.
3395         (do_da_do_da): use it.
3396         (process_packages): add suite_it to the cache key used for
3397         arch_all_cache since otherwise we only add a package to the first
3398         suite it's in and ignore any subsequent ones.
3399
3400         * katie.conf-non-US (Location): fixed to reflect reality (all
3401         suites, except old-proposed-updates (which is legacy-mixed)) are
3402         pool.
3403
3404         * utils.py (try_with_debug): wrapper for print_exc().
3405         * jenna (main): use it.
3406         * neve (main): likewise.
3407
3408 2002-11-25  Randall Donald  <rdonald@debian.org>
3409
3410         * fernanda.py (main): added -R to less command line for raw control
3411         character support to print colours
3412         (check_deb): Instead of running dpkg -I on deb file, call
3413         output_deb_info, the new colourized control reporter.
3414         (check_dsc): add call to colourized dsc info reader, read_dsc, instead
3415         of printing out each .dsc line.
3416         (output_deb_info): new function. Outputs each key/value pair from
3417         read_control except in special cases where we highlight section,
3418         maintainer, architecture, depends and recommends.
3419         (create_depends_string): new function. Takes Depends tree and looks
3420         up it's compontent via projectb db, colourizes and constructs a
3421         depends string in original order.
3422         (read_dsc): new function. reads and parses .dsc info via
3423         utils.parse_changes. Build-Depends and Build-Depends-Indep are
3424         colourized.
3425         (read_control): new function. reads and parses control info via
3426         apt_pkg. Depends and Recommends are split in to list structures,
3427         Section and Architecture are colourized. Maintainer is colourized
3428         if it has a localhost.localdomain address.
3429         (split_depends): new function. Creates a list of lists of
3430         dictionaries of depends (package,version relation). Top list is
3431         colected from comma delimited items. Sub lists are | delimited.
3432         (get_comma_list): new function. splits string input among commas
3433         (get_or_list): new function. splits string input among | delimiters
3434         (get_depends_parts): new function. Creates dictionary of package name
3435         and version relation from dependancy string.
3436         Colours for section and depends are per component. Unfound depends
3437         are in bold. Lookups using version info is not supported yet.
3438
3439 2002-11-22  James Troup  <james@nocrew.org>
3440
3441         * katie.conf-security (Julia::KnownPostgres): add 'www-data' and
3442         'udmsearch'.
3443
3444         * amber (make_advisory): string.atol() is deprecated and hasn't
3445         been ported to string methods.  Use long() instead.
3446
3447         * init_pool.sql: explicitly specify the encoding (SQL_ASCII) when
3448         creating the database since we'll fail badly if it's created with
3449         e.g. UNICODE encoding.
3450
3451         * rose (main): AptCnf is a global.
3452
3453         * neve (get_location_path): new function determines the location
3454         from the the first (left-most) directory of a Filename/Directory.
3455         (process_sources): don't need 'location' anymore.  Use
3456         utils.warn().  Use the Directory: field for each package to find
3457         the .dsc.  Use get_location_path() to determine the location for
3458         each .dsc.
3459         (process_packages): do't need 'location' anymore.  Use
3460         utils.warn().  Use get_location_path().
3461         (do_sources): don't need 'location', drop 'prefix' in favour of
3462         being told the full path to the Sources file, like
3463         process_packages().
3464         (do_da_do_da): main() renamed, so that main can call us in a
3465         try/except.  Adapt for the changes in do_sources() and
3466         process_packages() above.  Assume Sources and Packages file are in
3467         <root>/dists/<etc.>.  Treat pool locations like we do legacy ones.
3468
3469         * katie.conf-security (Location): fixed to reflect reality (all
3470         suites are pool, not legacy).
3471
3472         * utils.py (print_exc): more useful (i.e. much more verbose)
3473         traceback; a recipe from the Python cookbook.
3474         * jenna (main): use it.
3475         * neve (main): likewise.
3476
3477 2002-11-19  James Troup  <james@nocrew.org>
3478
3479         * kelly (install): fix brain-damaged CopyChanges/CopyKatie
3480         handling which was FUBAR for multi-suite uploads.  Now we just
3481         make a dictionary of destinations to copy to and iterate over
3482         those.
3483
3484         * fernanda.py (check_deb): run linda as well as lintian.
3485
3486 2002-10-21  James Troup  <james@nocrew.org>
3487
3488         * melanie (main): change X-Melanie to X-Katie and prefix it with
3489         'melanie '.
3490
3491         * lisa (main): prefix X-Katie with 'lisa '.
3492
3493         * jennifer (clean_holding): fix typo in string method changes;
3494         s/file.find(file/file.find(/.
3495
3496         * cron.daily: invoke helena and send the report to ftpmaster.
3497         * cron.daily-non-US: likewise.
3498
3499 2002-10-16  James Troup  <james@nocrew.org>
3500
3501         * kelly (check): call reject() with a blank prefix when parsing
3502         the return of check_dsc_against_db() since it does its own
3503         prefix-ing.
3504
3505         * rose: new script; only handles directory creation initally.
3506
3507         * katie.conf (Dinstall::NewAckList): obsolete, removed.
3508         * katie.conf-non-US (Dinstall::NewAckList): likewise.
3509
3510 2002-10-06  James Troup  <james@nocrew.org>
3511
3512         * rene (main): remove bogus argument handling.
3513
3514         * kelly: katie, renamed.
3515         * cron.daily: adapt for katie being renamed to kelly.
3516         * cron.daily-non-US: likewise.
3517         * amber (main): likewise.
3518
3519         * Changes for python 2.1.
3520
3521         * kelly: time.strftime no longer requires a second argument of
3522         "time.localtime(time.time())".
3523         * logging.py: likewise.
3524         * rhona: likewise.
3525         * shania (init): likewise.
3526
3527         * amber: use augmented assignment.
3528         * catherine (poolize): likewise.
3529         * claire.py (fix_component_section): likewise.
3530         * halle (check_changes): likewise.
3531         * helena: likewise.
3532         * jenna: likewise.
3533         * jennifer: likewise.
3534         * jeri: likewise.
3535         * katie.py: likewise.
3536         * kelly: likewise.
3537         * lisa: likewise.
3538         * madison (main): likewise.
3539         * melanie: likewise.
3540         * natalie: likewise.
3541         * neve: likewise.
3542         * rhona: likewise.
3543         * tea: likewise.
3544         * utils.py: likewise.
3545         * ziyi: likewise.
3546
3547         * amber: use .endswith.
3548         * fernanda.py: likewise.
3549         * halle (main): likewise.
3550         * jennifer: likewise.
3551         * jeri: likewise.
3552         * katie.py: likewise.
3553         * kelly: likewise.
3554         * lisa: likewise.
3555         * neve: likewise.
3556         * shania (main): likewise.
3557         * utils.py: likewise.
3558
3559         * alyson: use string methods.
3560         * amber: likewise.
3561         * andrea: likewise.
3562         * ashley: likewise.
3563         * catherine: likewise.
3564         * charisma: likewise.
3565         * claire.py: likewise.
3566         * db_access.py: likewise.
3567         * denise: likewise.
3568         * halle: likewise.
3569         * heidi: likewise.
3570         * helena: likewise.
3571         * jenna: likewise.
3572         * jennifer: likewise.
3573         * jeri: likewise.
3574         * julia: likewise.
3575         * katie.py: likewise.
3576         * kelly: likewise.
3577         * lisa: likewise.
3578         * logging.py: likewise.
3579         * madison: likewise.
3580         * melanie: likewise.
3581         * natalie: likewise.
3582         * neve: likewise.
3583         * rene: likewise.
3584         * tea: likewise.
3585         * utils.py: likewise.
3586         * ziyi: likewise.
3587
3588 2002-09-20  Martin Michlmayr  <tbm@cyrius.com>
3589
3590         * utils.py (parse_changes): use <string>.startswith() rather than
3591         string.find().
3592
3593 2002-08-27  Anthony Towns  <ajt@debian.org>
3594
3595         * katie.py (in_override_p): when searching for a source override,
3596         and the dsc query misses, search for both udeb and deb overrides
3597         as well. Should fix the UNACCEPT issues with udebs.
3598
3599 2002-08-24  James Troup  <james@nocrew.org>
3600
3601         * melanie (main): remove gratuitous WHERE EXISTS sub-select from
3602         source+binary package finding code which was causing severe
3603         performance degradation with postgres 7.2.
3604
3605 2002-08-14  James Troup  <james@nocrew.org>
3606
3607         * julia (main): use the pwd.getpwall() to get system user info
3608         rather than trying to read a password file.  Add a -n/--no-action
3609         option.
3610
3611         * cron.hourly: julia no longer takes any arguments.
3612         * cron.hourly-non-US: likewise.
3613
3614 2002-08-07  James Troup  <james@nocrew.org>
3615
3616         * katie (install): handle multi-suite uploads when CopyChanges
3617         and/or CopyKatie are in use, ensuring we only copy stuff once.
3618
3619 2002-08-01  Ryan Murray  <rmurray@debian.org>
3620
3621         * wanna-build/trigger.daily: initial commit, with locking
3622         * cron.buildd: add locking against daily run
3623
3624 2002-07-30  James Troup  <james@nocrew.org>
3625
3626         * melanie (main): readd creation of suite_ids_list so melanie is
3627         remotely useful again.
3628
3629         * katie.conf: adopt for woody release; diable
3630         StableDislocationSupport, add oldstable, adjust other suites and
3631         mappings, fix up location.
3632         * katie.conf-non-US: likewise.
3633         * katie.conf-security: likewise.
3634
3635         * apt.conf.stable: adapt for woody release; add oldstable, adjust
3636         stable.
3637         * apt.conf.stable-non-US: likewise.
3638
3639         * apt.conf-security: adapt for woody release; adding oldstable,
3640         oldstable, adjust stable and testing.
3641         * cron.daily-security: likewise.
3642         * cron.buildd-security: likewise.
3643
3644         * apt.conf: adapt for woody release; rename woody-proposed-updates
3645         to testing-proposed-updates and proposed-updates to
3646         old-proposed-updates.
3647         * apt.conf-non-US: likewise.
3648
3649         * vars-non-US (copyoverrides): add sarge.
3650         * vars (copyoverrides): likewise.
3651
3652         * vars-security (suites): add oldstable.
3653
3654 2002-07-22  Ryan Murray  <rmurray@debian.org>
3655
3656         * apt.conf.security-buildd: use suite codenames instead of
3657           distnames.
3658
3659 2002-07-16  James Troup  <james@nocrew.org>
3660
3661         * denise (main): fix filenames for testing override files.
3662
3663 2002-07-14  James Troup  <james@nocrew.org>
3664
3665         * jennifer (process_it): call check_md5sums later so we can check
3666         files in the .dsc too
3667         (check_md5sums): check files in the .dsc too.  Check both md5sum
3668         and size.
3669
3670         * melanie (main): use parse_args() and join_with_commas_and() from
3671         utils.  If there's nothing to do, say so and exit, don't ask for
3672         confirmation etc.
3673
3674         * amber (join_with_commas_and): moved from here to ...
3675         * utils.py (join_with_commas_and): here.
3676
3677 2002-07-13  James Troup  <james@nocrew.org>
3678
3679         * madison (main): use parse_args() from utils.  Support
3680         -c/--component.
3681
3682         * jenna (parse_args): moved from here to ...
3683         * utils.py (parse_args): here.
3684
3685         * katie.conf (Architectures): minor corrections to the description
3686         for arm, mips and mipsel.
3687         * katie.conf-non-US (Architectures): likewise.
3688         * katie.conf-security (Architectures): likewise.
3689
3690         * cron.daily-security: use natalie's new -a/--add functionality to
3691         flesh out the security overrides.
3692
3693 2002-07-12  James Troup  <james@nocrew.org>
3694
3695         * cron.buildd (ARCHS): add arm.
3696
3697         * katie.conf: 2.2r7 was released.
3698         * katie.conf-non-US: likewise.
3699
3700         * utils.py (parse_changes): handle a multi-line field with no
3701         starting line.
3702
3703 2002-06-25  James Troup  <james@nocrew.org>
3704
3705         * templates/amber.advisory (To): add missing email address since
3706         __WHOAMI__ is only a name.
3707
3708         * katie.conf-security (Melane::LogFile): correct to go somewhere
3709         katie has write access to.
3710         (Location::/org/security.debian.org/ftp/dists/::Suites): add
3711         Testing.
3712
3713         * natalie: add support for -a/-add which adds packages only
3714         (ignoring changes and deletions).
3715
3716         * katie.py (Katie.announce): Dinstall::CloseBugs is a boolean so
3717         use FindB, not get.
3718
3719 2002-06-22  James Troup  <james@nocrew.org>
3720
3721         * jennifer (check_files): validate the package name and version
3722         field.  If 'Package', 'Version' or 'Architecture' are missing,
3723         don't try any further checks.
3724         (check_dsc): likewise.
3725
3726         * utils.py (re_taint_free): add '~' as a valid character.
3727
3728 2002-06-20  Anthony Towns  <ajt@debian.org>
3729
3730         * katie.conf-non-US: add OverrideSuite for w-p-u to allow uploads
3731
3732 2002-06-09  James Troup  <james@nocrew.org>
3733
3734         * jennifer (check_files): reduce useless code.
3735
3736         * cron.daily-security: run symlinks -dr on $ftpdir.
3737
3738         * vars-security (ftpdir): add.
3739
3740 2002-06-08  James Troup  <james@nocrew.org>
3741
3742         * neve (update_override_type): transaction is handled higher up in
3743         main().
3744         (update_priority): likewise.
3745         (process_sources): remove code that makes testing a duplicate of
3746         stable.
3747         (process_packages): likewise.
3748
3749         * templates/amber.advisory: add missing mail headers.
3750
3751         * cron.daily-security: also call apt-ftparchive clean for
3752         apt.conf.buildd-security.
3753         * cron.weekly: likewise.
3754
3755         * amber (do_upload): write out a list of source packages (and
3756         their version) uploaded for testing.
3757         (make_advisory): add more Subst mappings for the mail headers.
3758         (spawn): check for suspicious characters in the command and abort
3759         if their found.
3760
3761 2002-06-07  James Troup  <james@nocrew.org>
3762
3763         * ziyi (main): remove the 'nonus'/'security' hacks and use
3764         Dinstall::SuiteSuffix (if it exists) instead.  Always try to write
3765         the lower level Release files, even if they don't exist.  fubar
3766         out if we can't open a lower level Release file for writing.
3767
3768         * katie.conf-non-US (Dinstall): add SuiteSuffix, used to simplify
3769         ziyi.
3770         * katie.conf-security (Dinstall): likewise.
3771
3772         * amber (do_upload): renamed from get_file_list().  Determine the
3773         upload host from the original component.
3774         (init): Add a -n/--no-action option.  Fix how we get changes_files
3775         (i.e. from the return value of apt_pkg.ParseCommandLine(), not
3776         sys.argv).  Add an Options global.
3777         (make_advisory): support -n/--no-action.
3778         (spawn): likewise.
3779         (main): likewise.
3780         (usage): document -n/--no-action.
3781
3782         * cron.buildd-security: fix path to Packages-arch-specific in
3783         quinn-diff invocation.
3784
3785         * katie.conf-security (Dinstall::AcceptedAutoBuildSuites): change
3786         to proper suite names (i.e. stable, testing) rather than codenames
3787         (potato, woody).
3788         (Dinstall::DefaultSuite): likewise.
3789         (Suite): likewise.
3790         (Location::/org/security.debian.org/ftp/dists/::Suites): likewise.
3791         * vars-security (suites): likewise.
3792         * apt.conf-security: likewise.
3793
3794         * katie.conf-security (Component): add "updates/" prefix.
3795         (Suite::*::Components): likewise.
3796         (ComponentMappings): new; map all {ftp-master,non-US} components
3797         -> updates/<foo>.
3798
3799         * katie.conf-security (Natalie): removed; the options have
3800         defaults and ComponentPosition is used by alyson which doesn't
3801         work on security.d.o.
3802         (Amber): replace UploadHost and UploadDir with ComponentMappings
3803         which is a mapping of components -> URI.
3804         (Suite::*::CodeName): strip bogus "/updates" suffix hack.
3805         (SuiteMappings): use "silent-map" in preference to "map".
3806
3807         * cron.unchecked-security: fix call to cron.buildd-security.
3808
3809         * cron.daily-security: map local suite (stable) -> override suite
3810         (potato) when fixing overrides.  Correct component in natalie call
3811         to take into account "updates/" prefix.  Fix cut'n'waste in
3812         override.$dist.all3 generation, the old files weren't being
3813         removed, so they were endlessly growing.
3814
3815         * neve (main): don't use .Find for the CodeName since we require
3816         it.  Location::*::Suites is a ValueList.
3817         (check_signature): ignore duplicate SIGEXPIRED tokens.  Don't bomb
3818         out on expired keys, just warn.
3819         (update_override_type): new function; lifted from alyson.
3820         (update_priority): likewise.
3821         (main): use update_{override_type,priority}().
3822
3823         * jennifer (check_distributions): remove redunant test for
3824         SuiteMappings; ValueList("does-not-exist") returns [] which is
3825         fine.  Add support for a "silent-map" type which doesn't warn
3826         about the mapping to the user.
3827         (check_files): add support for ComponentMappings, similar to
3828         SuiteMappings, but there's no type, just a source and a
3829         destination and the original component is stored in "original
3830         component".
3831         * katie.py (Katie.dump_vars): add "original component" as an
3832         optionsal files[file] dump variable.
3833
3834         * claire.py (find_dislocated_stable): dehardcode 'potato' in SQL
3835         query.  Add support for section-less legacy locations like current
3836         security.debian.org through YetAnotherConfigBoolean
3837         'LegacyStableHasNoSections'.
3838         * katie.conf-security (Dinstall): LegacyStableHasNoSections is true.
3839
3840         * utils.py (real_arch): moved here from ziyi.
3841         * ziyi (real_arch): moved to utils.py.
3842         * ziyi (main): likewise.
3843
3844         * claire.py (find_dislocated_stable): use real_arch() with
3845         filter() to strip out source and all.
3846         * neve (main): likewise.
3847         * rene (main): likewise.
3848         * jeri (parse_packages): likewise.
3849
3850 2002-06-06  James Troup  <james@nocrew.org>
3851
3852         * tea (check_missing_tar_gz_in_dsc): modifed patch from Martin
3853         Michlmayr <tbm@cyrius.com> to be more verbose about what we're
3854         doing.
3855
3856 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3857
3858         * jeri (check_joey): check if the line contains two elements
3859         before accessing the second.  Also, strip trailing spaces as well
3860         as the newline.
3861         * halle (check_joey): likewise.
3862
3863 2002-06-05  James Troup  <james@nocrew.org>
3864
3865         * cron.unchecked-security: new file; like cron.unchecked but if
3866         there's nothing to do exit so we don't call cron.buildd-security.
3867
3868         * apt.conf.buildd-security: new file.
3869
3870         * vars (archs): alphabetize.
3871         * vars-non-US (archs): likewise.
3872
3873         * vars-security: add unchecked.
3874
3875         * madison (main): reduce rather bizarrely verbose and purposeless
3876         code to print arches to a simple string.join.
3877
3878         * katie.conf (Suites::Unstable): add UdebComponents, a new
3879         valuelist of suites, used by jenna to flesh out the list of
3880         <suite>_main-debian-installer-binary-<arch>.list files generated.
3881         (Dinstall): add StableDislocationSupport, a new boolean used by
3882         jenna to enable or disable stable dislocation support
3883         (i.e. claire), as true.
3884
3885         * katie.conf (Dinstall): add StableDislocationSupport, a new
3886         boolean used by jenna to enable or disable stable dislocation
3887         support (i.e. claire), as true.
3888         * katie.conf-non-US: likewise.
3889         * katie.conf-security: likewise.
3890
3891         * cron.daily-security: generate .all3 overrides for the buildd
3892         support.  Freshen a local copy of Packages-arch-specific from
3893         buildd.debian.org.
3894
3895         * claire.py (find_dislocated_stable): disable the support for
3896         files in legacy-mixed locations since none of the Debian archives
3897         have any anymore.
3898
3899         * helena: new script; produces a report on NEW and BYHAND
3900         packages.
3901
3902         * jenna: rewritten from scratch to fix speed problems.  Run time
3903         on auric goes down from 31.5 minutes to 3.5 minutes.  Of that 3.5
3904         minutes, 105 seconds are the monster query and 70 odd seconds is
3905         claire.
3906
3907         * apt.conf.buildd (Default): remove MaxContentsChange as it's
3908         irrelevant.
3909
3910 2002-06-05  Ryan Murray  <rmurray@debian.org>
3911
3912         * cron.buildd-security: new file.
3913
3914 2002-06-05  Matt Kraai  <kraai@alumni.cmu.edu>
3915
3916         * denise (list): take a file argument and use it.
3917         (main): don't abuse sys.stdout, just write to the file.
3918
3919         * claire.py (usage): Fix misspelling.
3920         (clean_symlink): Simplify.
3921         (find_dislocated_stable): Avoid unnecessary work.
3922
3923 2002-05-29  James Troup  <james@nocrew.org>
3924
3925         * cameron: removed; apt-ftparchive can simply walk the directory.
3926
3927 2002-05-26  Anthony Towns  <ajt@debian.org>
3928
3929         * katie.conf{,-non-US}: Map testing to testing-proposed-updates
3930         for the autobuilders.
3931
3932 2002-05-24  Ryan Murray  <rmurray@debian.org>
3933
3934         * cron.buildd: update override files before running apt-ftparchive
3935
3936 2002-05-23  Martin Michlmayr  <tbm@cyrius.com>
3937
3938         * amber (main): remove extra space in prompt.
3939
3940         * utils.py (validate_changes_file_arg): use original filename in
3941         error messages.
3942
3943         * jeri (check_joey): close file after use.
3944         (parse_packages): likewise.
3945         (main): setup debug option properly.
3946
3947         * melanie (main): remove unused packages variable and simplify the
3948         code to build up con_packages by using repr().
3949
3950 2002-05-23  James Troup  <james@nocrew.org>
3951
3952         * lisa (recheck): when we reject, also return 0 so the package is
3953         skipped.
3954         (sg_compare): fix note sorting.
3955         (recheck): remove the .katie file after rejection.
3956
3957         * katie.py (Katie.accept): accepted auto-build support take 3;
3958         this time adding support for security.  Security needs a) non-pool
3959         files copied rather than symlinked since accepted is readable only
3960         by katie/security and www-data needs to be able to see the files,
3961         b) needs per-suite directories.  SpecialAcceptedAutoBuild becomes
3962         AcceptedAutoBuildSuites and is a ValueList containing the suites.
3963         SecurityAcceptedAutoBuild is a new boolean which controls whether
3964         or not normal or security style is used.  The unstable_accepted
3965         table was renamed to accepted_autobuild and a suite column added.
3966         Also fix a bug noticed by Ryan where an existent orig.tar.gz
3967         didn't have it's last_used/in_accepted flags correctly updated.
3968         * katie (install): likewise.
3969         * rhona (clean_accepted_autobuild): likewise.
3970
3971 2002-05-22  James Troup  <james@nocrew.org>
3972
3973         * lisa (sort_changes): new function; sorts changes properly.
3974         Finally.
3975         (sg_compare): new function; helper for sort_changes().  Sorts by
3976         have note and time of oldest upload.
3977         (indiv_sg_compare): new function; helper for sort_changes().
3978         Sorts by source version, have source and filename.
3979         (main): use sort_changes().
3980         (changes_compare): obsoleted; removed.
3981
3982 2002-05-20  James Troup  <james@nocrew.org>
3983
3984         * rhona (clean_accepted_autobuild): don't die if a file we're
3985         trying to remove doesn't exist.  Makes rhona more friendly to
3986         katie/katie.py crashes/bugs without any undue cost.
3987
3988 2002-05-19  James Troup  <james@nocrew.org>
3989
3990         * lisa (main): if sorting a large number of changes give some
3991         feedback.
3992         (recheck): new function, run the same checks (modulo NEW,
3993         obviously) as katie does, if they fail do the standard
3994         reject/skip/quit dance.
3995         (do_pkg): use it.
3996
3997         * katie (install): don't try to unlink the symlink in the
3998         AcceptedAutoBuild support if the destination is not a symlink (or
3999         doesn't exist).  Avoids unnecessary bombs on previous partial
4000         accepts and will still bomb hard if the file exists and isn't a
4001         symlink.
4002
4003         * utils.py: blah, commands _is_ used when the mail stuff isn't
4004         commented out like it is in my test environment.
4005
4006         * lisa (changes_compare): "has note" overrides everything else.
4007         Use .katie files rather than running parse_changes, faster and
4008         allows "has note" to work.  Correct version compare, it was
4009         reversed.  Ctime check should only kick in if the source packages
4010         are not the same.
4011         (print_new): print out and return any note.  Rename 'ret_code' to
4012         'broken'.
4013         (edit_new): renamed from spawn_editor.  Don't leak file
4014         descriptors.  Clean up error message if editor fails.
4015         (edit_note): new function, allows one to edit notes.
4016         (do_new): add note support, editing and removing.
4017         (init): kill -s/--sort; with notes we always want to use our
4018         sorting method.
4019         (usage): likewise.
4020
4021         * katie.py (Katie.dump_vars): add "lisa note" as an optional
4022         changes field.
4023
4024         * utils.py (build_file_list): rename 'dsc' to 'is_a_dsc' and have
4025         it default to 0.  Adapt tests to assume it's boolean.
4026         * fernanda.py (check_changes): adjust call appropriately.
4027         * halle (check_changes): likewise.
4028         * jennifer (check_changes): likewise.
4029         * jeri (check_changes): likewise.
4030         * shania (flush_orphans): likewise.
4031
4032         * jennifer (check_dsc): pass is_a_dsc by name when calling
4033         build_file_list() for clarity.
4034         * shania (flush_orphans): likewise.
4035         * tea (check_missing_tar_gz_in_dsc): likewise.
4036
4037         * jennifer (check_dsc): pass dsc_whitespace_rules by name when
4038         calling parse_changes() for clarity.
4039         * tea (check_dscs): likewise.
4040
4041         * utils.py (parse_changes): make dsc_whitespace_rules default to
4042         not true.
4043         * halle (check_changes): adjust call appropriately.
4044         * jennifer (check_changes): likewise.
4045         * jeri (check_changes): likewise.
4046         * lisa (changes_compare): likewise.
4047         * utils.py (changes_compare): likewise.
4048         * melanie (main): likewise.
4049         * shania (flush_orphans): likewise.
4050         * fernanda.py (check_changes): likewise.
4051
4052 2002-05-18  James Troup  <james@nocrew.org>
4053
4054         * katie.py (Katie.dump_vars): make the .katie file unreadable,
4055         it's not useful and by and large a duplication of information
4056         available in readable format in other files.
4057
4058 2002-05-16  Ryan Murray  <rmurray@debian.org>
4059
4060         * melanie: Dir::TemplatesDir -> Dir::Templates
4061
4062 2002-05-15  Ryan Murray  <rmurray@debian.org>
4063
4064         * cameron: correct the use of os.path.join
4065
4066 2002-05-15  Anthony Towns  <ajt@debian.org>
4067
4068         * ziyi: Update to match the new format for Architectures/Components
4069         in katie.conf.
4070
4071 2002-05-14  James Troup  <james@nocrew.org>
4072
4073         * amber: new script; 'installer' wrapper script for the security
4074         team.
4075
4076         * katie.py (Katie.announce): remove unused 'dsc' local
4077         variable. (pychecker)
4078
4079         * ziyi: pre-define AptCnf and out globals to None. (pychecker)
4080
4081         * neve: don't import sys, we don't use it. (pychecker)
4082         (check_signature): fix return type mismatch. (pychecker)
4083
4084         * utils.py: don't import commands, we don't use it.  (pychecker)
4085
4086         * katie (install): SpecialAcceptedAutoBuild is a boolean.
4087
4088         * katie.py (Katie.dump_vars): don't store "oldfiles", it's
4089         obsoleted by the change to "othercomponents" handling in jennifer
4090         detailed below.
4091         (Katie.cross_suite_version_check): new function; implements
4092         cross-suite version checking rules specified in the conf file
4093         while also enforcing the standard "must be newer than target
4094         suite" rule.
4095         (Katie.check_binary_against_db): renamed, since it's invoked once
4096         per-binary, "binaries" was inaccurate.  Use
4097         cross_suite_version_check() and don't bother with the "oldfiles"
4098         rubbish as jennifer works out "othercomponents" herself now.
4099         (Katie.check_source_against_db): use cross_suite_version_check().
4100
4101         * katie (check): the version and file overwrite checks
4102         (check_{binary,source,dsc}_against_db) are not per-suite.
4103
4104         * jennifer (check_files): less duplication of
4105         'control.Find("Architecture", "")' by putting it in a local
4106         variable.
4107         (check_files): call check_binary_against_db higher up since it's
4108         not a per-suite check.
4109         (check_files): get "othercomponents" directly rather than having
4110         check_binary_against_db do it for us.
4111
4112         * heidi (main): 'if x:', not 'if x != []:'.
4113         * katie.py (Katie.in_override_p): likewise.
4114         (Katie.check_dsc_against_db): likewise.
4115         * natalie (main): likewise.
4116         * rene (main): likewise.
4117         * ziyi (real_arch): likewise.
4118
4119         * alyson (main): Suite::%s::Architectures, Suite::%s::Components
4120         and OverrideType are now value lists, not lists.
4121         * andrea (main): likewise.
4122         * cindy (main): likewise.
4123         * claire.py (find_dislocated_stable): likewise.
4124         * denise (main): likewise.
4125         * jenna (main): likewise.
4126         * jennifer (check_distributions): likewise.
4127         (check_files): likewise.
4128         (check_urgency): likewise (Urgency::Valid).
4129         * jeri (parse_packages): likewise.
4130         * neve (main): likewise (and Location::%s::Suites).
4131         * rene (main): likewise.
4132
4133 2002-05-13  James Troup  <james@nocrew.org>
4134
4135         * katie.py (Katie.check_source_against_db): correct case of reject
4136         message to be consistent with binary checks.
4137
4138         * jennifer (get_status_output): don't leak 2 file descriptors per
4139         invocation.
4140         (check_signature): add missing '\n' to "duplicate status token"
4141         error message.
4142
4143 2002-05-09  James Troup  <james@nocrew.org>
4144
4145         * utils.py (validate_changes_file_arg): new function; validates an
4146         argument which should be a .changes file.
4147         * ashley (main): use it.
4148         * lisa (main): likewise.
4149
4150         * katie.py (Katie.check_dsc_against_db): since there can be more
4151         than one .orig.tar.gz make sure we don't assume the .orig.tar.gz
4152         entry still exists in files.
4153
4154         * jennifer (check_dsc): handle the .orig.tar.gz disappearing from
4155         files, since check_dsc_against_db() deletes the .orig.tar.gz
4156         entry.
4157
4158         * cameron: cleanups.
4159
4160         * utils.py (changes_compare): change sort order so that source
4161         name and source version trump 'have source'; this should fix
4162         UNACCEPT problems in katie where -1 hppa+source & i386, -2
4163         i386&source & hppa lead to -1 i386 unaccept.  Problem worked out
4164         by Ryan.
4165
4166         * lisa (main): allow the arguments to be .katie files too.
4167
4168 2002-05-07  Ryan Murray  <rmurray@debian.org>
4169
4170         * cron.buildd: add s390 to arch list again
4171
4172 2002-05-05  Ryan Murray  <rmurray@debian.org>
4173
4174         * cron.buildd: new script, update w-b database from unstable_accepted
4175         table
4176         * cameron: new script, take list in unstable_accepted and write out
4177         a file list for apt-ftparchive
4178         * apt.conf.buildd: new apt configuration for Packages/Sources for
4179         unstable_accepted
4180         * vars: add s390 to arch list.
4181
4182 2002-05-03  James Troup  <james@nocrew.org>
4183
4184         * neve (main): don't hard code the calling user as that doesn't
4185         work with modern postgres installs.  Fix psql invocation for
4186         init_pool.sql (database name required).  Dont' hard code the
4187         database name.
4188         (process_sources): add support for fingerprint and install_date.
4189         (process_packages): add support for fingerprint.
4190         (do_sources): pass in the directory, fingerprint support needs it.
4191         (get_status_output): borrowed from jennifer.
4192         (reject): likewise.
4193         (check_signature): likewise.
4194
4195         * katie (install): only try to log urgencies if Urgency_Logger is
4196         defined.
4197         (main): only initialize Urgency_Logger is Dir::UrgencyLog is
4198         defined; only close Urgency_Logger if it's defined.
4199
4200         * catherine (poolize): adapt for Dir rationalization.
4201         * claire.py (find_dislocated_stable): likewise.
4202         * denise (main): likewise.
4203         * halle (check_joey): likewise.
4204         * jenna: likewise.
4205         * jennifer: likewise.
4206         * jeri: likewise.
4207         * katie.py: likewise.
4208         * katie: likewise.
4209         * lisa (do_bxa_notification): likewise.
4210         * logging.py (Logger.__init__): likewise
4211         * rene (main): likewise.
4212         * rhona (clean): likewise.
4213         * shania (init): likewise.
4214         * tea: likewise.
4215         * ziyi: likewise.
4216
4217         * lisa (add_overrides): Dinstall::BXANotify is a boolean, use
4218         FindB, not FindI.
4219
4220         * rhona (clean_accepted_autobuild): SpecialAcceptedAutoBuild is a
4221         boolean, use FindB, not get.
4222
4223         * katie.py (Katie.check_dsc_against_db): ignore duplicate
4224         .orig.tar.gz's which are an exact (size/md5sum) match.
4225
4226         * ashley (main): really allow *.katie files as arguments too;
4227         noticed by aj.
4228
4229         * sql-aptvc.cpp: postgres.h moved to a "server" subdirectory.
4230
4231 2002-05-03  Anthony Towns  <ajt@debian.org>
4232
4233         * ziyi: support for security.
4234
4235 2002-05-02  James Troup  <james@nocrew.org>
4236
4237         * jennifer (accept): call Katie.check_override() unconditional as
4238         no-mail check moved into that function.
4239         (do_byhand): likewise.
4240
4241         * katie.py (Katie.check_override): don't do anything if we're a)
4242         not sending mail or b) the override disparity checks have been
4243         disbled via Dinstall::OverrideDisparityCheck.
4244
4245         * jennifer (check_files): don't hard code Unstable as the suite
4246         used to check for architecture validity; use
4247         Dinstall::DefaultSuite instead, if it exists.
4248         (accept): conditionalize
4249
4250         * katie.py (Katie.update_subst): support global maintainer
4251         override with Dinstall::OverrideMaintainer.
4252
4253         * jennifer (check_distributions): new function, Distribution
4254         validation and mapping.  Uses new SuiteMappings variable from
4255         config file to abstract suite mappings.
4256         (check_changes): call it.
4257
4258         * natalie: renamed; nothing imports or likely will for some time.
4259
4260         * denise (main): remove unused natalie import and init().
4261
4262         * natalie.py (init): removed.
4263         (main): initalize here instead and don't hardcode the database
4264         name.
4265
4266 2002-04-30  James Troup  <james@nocrew.org>
4267
4268         * katie.py (Katie.close_bugs): new function, split out from
4269         announce().
4270         (Katie.announce): only call close_bugs() if Dinstall::CloseBugs is
4271         true.
4272         (Katie.close_bugs): new function, split out
4273         (Katie.close_bugs): return immediately if there are no bugs to
4274         close.
4275
4276         * jennifer (acknowledge_new): adapt for new utils.TemplateSubst().
4277         * katie (do_reject): likewise.
4278         (stable_install): likewise.
4279         * katie.py (Katie.announce): likewise.
4280         (Katie.accept): likewise.
4281         (Katie.check_override): likewise.
4282         (Katie.do_reject): likewise.
4283         * lisa (do_bxa_notification): likewise.
4284         * melanie (main): likewise.
4285
4286         * utils.py (TemplateSubst): change second argument to be a
4287         filename rather than a template since every caller opened a file
4288         on the fly which was ugly and leaked file descriptor.
4289
4290 2002-04-29  James Troup  <james@nocrew.org>
4291
4292         * katie.py (Katie.announce): (modified) patch from Raphael Hertzog
4293         <hertzog@debian.org> to send 'accepted' announce mails to the
4294         PTS. [#128140]
4295
4296 2002-04-24  James Troup  <james@nocrew.org>
4297
4298         * init_pool.sql (unstable_accepted): add two new fields to
4299         unstable_accepted; in_accepted is a boolean indicating whether or
4300         not the file is in accepted and last_used is a timestamp used by
4301         rhona to determine when to remove symlinks for installed packages.
4302
4303         * katie.py (Katie.accept): auto-build support take 2.  Create
4304         symlinks for all files into a seperate directory.  Add files to
4305         unstable_accepted as paths to the new directory; mark them as
4306         being in accepted for cameron.  Properly conditionalize it on a
4307         configuration variable.
4308
4309         * katie (install): likewise.  Update symlinks to point into the
4310         pool; mark the files for later deletion by rhona and mark them as
4311         not being in accepted for cameron.
4312
4313         * rhona (clean_accepted_autobuild): new function.
4314
4315 2002-04-22  James Troup  <james@nocrew.org>
4316
4317         * jennifer (check_files): handle db_access.get_location_id()
4318         returning -1 properly/better.
4319
4320         * rhona (clean_fingerprints): new function.
4321
4322 2002-04-21  James Troup  <james@nocrew.org>
4323
4324         * utils.py (touch_file): unused; remove.
4325         (plural): likewise.
4326
4327         * jennifer (check_files): close file descriptor used to get the
4328         control file.
4329         (check_md5sums): likewise.
4330         (callback): likewise.
4331
4332         * katie.py (Katie.do_reject): handle manual rejects much better;
4333         call the editor first and get confirmation from the user before
4334         proceeding.
4335
4336         * jennifer (check_signature): prefix_multi_line_string() moved to
4337         utils.
4338
4339         * utils.py (prefix_multi_line_string): moved here from jennifer.
4340
4341 2002-04-20  James Troup  <james@nocrew.org>
4342
4343         * lisa (main): handle non-existent files.
4344
4345         * ashley (main): allow *.katie files as arguments too.
4346
4347 2002-04-19  James Troup  <james@nocrew.org>
4348
4349         * katie.py (Katie.accept): add stuff to help auto-building from
4350         accepted; if the .orig.tar.gz is not part of the upload (i.e. it's
4351         in the pool), create a symlink to it in the accepted directory and
4352         add the .dsc and .{u,}deb(s) to a new 'unstable_accepted' table.
4353
4354         * katie (install): undo the "auto-building from accepted" stuff
4355         (i.e. remove the .orig.tar.gz symlink and remove the files from
4356         unstable_accepted table).
4357
4358 2002-04-16  James Troup  <james@nocrew.org>
4359
4360         * jennifer (upload_too_new): fix typo which was causing all
4361         timestamp comparisons to be against the .changes file.  Also move
4362         back to the original directory so we do the comparisons against
4363         accurate timestamps.
4364
4365         * tea (check_missing_tar_gz_in_dsc): new function.
4366
4367         * jennifer (check_dsc): add a check to ensure there is a .tar.gz
4368         file mentioned in the .dsc.
4369
4370         * lisa (main): use X-Katie in the mail headers, not X-Lisa; that
4371         way mails reach debian-{devel-,}changes@l.d.o.
4372
4373 2002-04-02  Ryan Murray  <rmurray@debian.org>
4374
4375         * cron.daily: run shania after rhona
4376         * cron.daily-non-US: likewise.
4377
4378 2002-04-01  James Troup  <james@nocrew.org>
4379
4380         * katie: re-add proposed-updates/stable install support.
4381
4382         * katie.py (Katie.dump_vars): add changes["changes"] as an
4383         optional field; should be mandatory later.
4384
4385 2002-03-31  James Troup  <james@nocrew.org>
4386
4387         * katie (install): support a Suite::<foo>::CopyKatie similar to
4388         CopyChanges.  Done seperately because .katie files don't need to
4389         be mirrored and will probably be copied to another directory as a
4390         result.
4391
4392         * halle (main): add missing debug to options.
4393
4394 2002-03-29  James Troup  <james@nocrew.org>
4395
4396         * madison (main): add a -r/--regex option.
4397
4398 2002-03-26  James Troup  <james@nocrew.org>
4399
4400         * lisa: don't trample on changes["distribution"]; make a copy of
4401         it as changes["suite"] instead and use that.
4402
4403 2002-03-16  Anthony Towns  <ajt@debian.org>
4404
4405         * templates/lisa.bxa_notification: Fix some grammatical errors.
4406         Encourage contact via bxa@ftp-master email address.
4407
4408 2002-03-15  James Troup  <james@nocrew.org>
4409
4410         * jennifer (check_timestamps): remove bogus raise in except.
4411
4412 2002-03-15  Anthony Towns  <ajt@debian.org>
4413
4414         * cron.monthly: rotate mail/archive/bxamail as well as
4415         mail/archive/mail. This is for a complete archive of
4416         correspondence with the BXA.
4417
4418 2002-03-14  Anthony Towns  <ajt@debian.org>
4419
4420         * crypto-in-main changes.
4421
4422         * utils.py (move, copy): add an optional perms= parameter to let you
4423         set the resulting permissions of the moved/copied file
4424         * katie.py (force_move): rejected/morgued files should be unreadable
4425         * jennifer (do_byhand, acknowledge_new): pending new and byhand files
4426         should be unreadable.
4427
4428 2002-03-07  Ryan Murray  <rmurray@debian.org>
4429
4430         * katie (install): check for existance of "files id" key as well as
4431         it being set to a valid value.
4432         * katie (install): check for existense and valid value for location
4433         id as well
4434
4435 2002-03-05  Ryan Murray  <rmurray@debian.org>
4436
4437         * katie.py (do_reject): reread the reason file after editing it.
4438
4439 2002-02-25  James Troup  <james@nocrew.org>
4440
4441         * jennifer (check_changes): don't enforce sanity in .changes file
4442         names since it doesn't seem to be possible; pcmica-cs and similar
4443         freak show packages in particular cause real problems.
4444
4445         * katie.py (Katie.check_dsc_against_db): initialize 'found' for
4446         each dsc_file since the .orig.tar.gz checking code now uses it as
4447         a boolean.  Fixes bizarro rejections which bogusly claimed
4448         .diff.gz md5sum/size was incorrect.
4449
4450 2002-02-24  James Troup  <james@nocrew.org>
4451
4452         * katie (process_it): reset reject_message.
4453
4454 2002-02-22  James Troup  <james@nocrew.org>
4455
4456         * db_access.py(set_files_id): disable use of
4457         currval('files_id_seq') because it was taking 3 seconds on auric
4458         which is insane (most calls take < 0.01) and simply call
4459         get_files_id() for the return value instead.
4460
4461         * katie.py (Katie.do_query): convenience function; unused by
4462         default, useful for profiling.
4463         * db_access.py (do_query): likewise.
4464
4465         * katie (install): fix insert SQL call when binary has no source.
4466
4467         * lisa (determine_new): auto-correct non-US/main to non-US.
4468         (determine_new): add a warning when adding things to stable.
4469         (edit_index): use our_raw_input().
4470         (edit_overrides): likewise.
4471         (do_new): likewise.  Use re.search() not re.match() since the
4472         default answer may not be the first one.
4473         (do_byhand): likewise.
4474         (do_new): Default to 'S'kip and never 'A'dd.
4475
4476         * jennifer (action): pass prompt to our_raw_input().
4477         * melanie (game_over): likewise.
4478         * katie (action): likewise.
4479
4480         * utils.py (our_raw_input): add an optional prompt argument to
4481         make the function more usable as a drop in replacement for
4482         raw_input().
4483
4484         * jennifer (check_files): correct reject() to not double prefix
4485         when using katie.py based functions.
4486         (check_dsc): likewise.
4487
4488         * katie.py (Katie.reject): prepend a new line if appropriate
4489         rathen than appending one to avoid double new lines when caller
4490         adds one of his own.
4491
4492         * lisa (determine_new): warn if the package is also in other
4493         components.
4494
4495 2002-02-20  James Troup  <james@nocrew.org>
4496
4497         * jennifer (check_files): if .changes file lists "source" in
4498         Architecture field, there must be a .dsc.
4499
4500 2002-02-15  James Troup  <james@nocrew.org>
4501
4502         * ashley (main): add some missing fields.
4503
4504         * katie.py (Katie.check_dsc_against_db): fix to take into account
4505         the fact that the .orig.tar.gz might be in byhand, accepted or
4506         new.  Also fix calling of reject().
4507         (Katie.check_binaries_against_db): fix calling of reject().
4508         (Katie.check_source_against_db): likewise.
4509         (Katie.dump_vars): add missing variables used for bug closures.
4510
4511         * lisa (changes_compare_by_time): sort by reverse time.
4512
4513         * katie.py (Katie.accept): log.
4514         (Katie.dump_vars): missing has_key test for optional changes fields.
4515
4516         * jennifer (main): print "Accepted blah blah" to stdout, not stderr.
4517         (process_it): traceback goes to stderr, not stdout.
4518         (acknowledge_new): log.
4519         (do_byhand): likewise.
4520
4521         * katie.py (Katie.update_subst): fix typo (Cnf vs. self.Cnf).
4522
4523         * add_constraints.sql: add grants for the new fingerprint table.
4524
4525 2002-02-13  James Troup  <james@nocrew.org>
4526
4527         * katie (do_reject): basename the .changes filename before trying
4528         to use it to construct the .reason filename.
4529         (process_it): call Katie.update_subst() so do_reject() DTRT with
4530         the mail template.
4531         (do_reject): setup the mail template correctly.
4532
4533 2002-02-12  James Troup  <james@nocrew.org>
4534
4535         * tea (process_dir): renamed 'arg' to 'unused' for clarity.
4536         (check_files): don't abuse global dictionaries.
4537         (Ent): use all variables.
4538         (check_timestamps): don't abuse global dictionaries.
4539
4540         * fernanda.py: renamed to .py so lisa can import it.
4541         (check_dsc): remove unused local variables (pychecker).
4542         (display_changes): split off from check_changes.
4543
4544         * katie: rewritten; most of the functionality moves to jennifer;
4545         what's left is the code to install packages once a day from the
4546         'accepted' directory.
4547
4548         * jennifer: new program, processes packages in 'unchecked'
4549         (i.e. most of the non-install functionality of old katie).
4550
4551         * katie.py: common functions shared between the clique of
4552         jennifer, lisa and katie.
4553
4554         * lisa: new program; handles NEW and BYHAND packages.
4555
4556         * jeri (usage): new function.
4557         (main): use it.
4558         (check_package): remove unused local variable (pychecker).
4559
4560         * init_pool.sql: new table fingerprint.  Add fingerprint colums to
4561         binaries and source.  Add install_date to source.
4562
4563         * halle (usage): new function.
4564         (main): use it.  Remove unused options.
4565         (check_changes): remove unused local variable (pychecker).
4566
4567         * add_constraints.sql: add fingerprint references.
4568
4569         * db_access.py (get_or_set_fingerprint_id): new function.
4570
4571         * ashley (main): new program; dumps the contents of a .katie file
4572         to stdout.
4573
4574         * alyson (main): remove option handling since we don't actually
4575         support any.
4576         * cindy (main): likewise.
4577
4578         * remove unnecessary imports and pre-define globals (pychecker).
4579
4580 2002-02-11  Anthony Towns  <ajt@debian.org>
4581
4582         * added installation-report and upgrade-report pseudo-packages
4583
4584 2002-01-28  Martin Michlmayr  <tbm@cyrius.com>
4585
4586         * katie (update_subst): use Dinstall::TrackingServer.
4587         * melanie (main): likewise.
4588
4589 2002-01-27  James Troup  <james@nocrew.org>
4590
4591         * shania (main): it's IntLevel not IntVal; thanks to tbm@ for
4592         noticing, jgg@ for fix.
4593
4594 2002-01-19  James Troup  <james@nocrew.org>
4595
4596         * utils.py (extract_component_from_section): handle non-US
4597         non-main properly.
4598
4599 2002-01-12  James Troup  <james@nocrew.org>
4600
4601         * madison: add support for -S/--source-and-binary which displays
4602         information for the source package and all it's binary children.
4603
4604 2002-01-13  Anthony Towns  <ajt@debian.org>
4605
4606         * katie.conf: Remove Catherine Limit and bump stable to 2.2r5
4607         * katie.conf: Add Dinstall::SigningKeyIds option, set to the 2001
4608           and 2002 key ids.
4609         * katie.conf-non-US: Likewise.
4610         * ziyi: Suppoer Dinstall::SigningKeyIds to sign a Release file with
4611           multiple keys automatically. This is probably only useful for
4612           transitioning from an expired (or revoked?) key.
4613
4614 2002-01-08  Ryan Murray  <rmurray@debian.org>
4615
4616         * debian/python-dep: new file that prints out python:Depends for
4617           substvars
4618         * debian/control: use python:Depends, build-depend on python
4619           lower Depends: on postgresql to Suggests:
4620         * debian/rules: determine python version, install to the correct
4621           versioned dir
4622
4623 2001-12-18  Anthony Towns  <ajt@debian.org>
4624
4625         * ziyi: unlink Release files before overwriting them (in case they've
4626           been merged)
4627         * ziyi: always include checksums/sizes for the uncompressed versions
4628           of Sources and Packages, even if they're not present on disk
4629
4630 2001-11-26  Ryan Murray  <rmurray@debian.org>
4631
4632         * ziyi (main): add SigningPubKey config option
4633         * katie.conf: use SigningPubKey config option
4634         * katie.conf-non-US: likewise
4635
4636 2001-11-24  James Troup  <james@nocrew.org>
4637
4638         * katie (acknowledge_new): log newness.
4639
4640 2001-11-24  Anthony Towns  <ajt@debian.org>
4641
4642         * ziyi (real_arch): bail out if some moron forgot to reset
4643         untouchable on stable.
4644         (real_arch): source Release files.
4645
4646 2001-11-19  James Troup  <james@nocrew.org>
4647
4648         * claire.py (main): don't use apt_pkg.ReadConfigFileISC and
4649         utils.get_conf().
4650         * shania (main): likewise.
4651
4652         * rhona (main): add default options.
4653
4654         * db_access.py (get_archive_id): case independent.
4655
4656         * katie (action): sort files so that ordering is consistent
4657         between mails; noticed/requested by Joey.
4658
4659 2001-11-17  Ryan Murray  <rmurray@debian.org>
4660
4661         * utils.py: add get_conf function, change startup code to read all
4662           config files to the Cnf that get_conf returns
4663           use the component list from the katie conf rather than the hardcoded
4664           list.
4665         * all scripts: use new get_conf function
4666         * shania: fix try/except around changes files
4667         * jenna: only do debian-installer if it is a section in Cnf
4668
4669 2001-11-16  Ryan Murray  <rmurray@debian.org>
4670
4671         * shania (main): Initialize days to a string of a number.
4672                  (main): Initialize Cnf vars before reading in Cnf
4673
4674 2001-11-14  Ryan Murray  <rmurray@debian.org>
4675
4676         * shania (main): Initialize days to a number.
4677
4678 2001-11-04  James Troup  <james@nocrew.org>
4679
4680         * docs/Makefile: use docbook-utils' docbook2man binary.
4681
4682         * Change all "if foo == []" constructs into "if not foo".
4683
4684         * katie (check_changes): when installing into stable from
4685         proposed-updates, remove all non-stable target distributions.
4686         (check_override): don't check for override disparities on stable
4687         installs.
4688         (stable_install): update install_bytes appropriately.
4689         (reject): stable rejection support; i.e. don't remove files when
4690         rejecting files in the pool, rather remove them from the
4691         proposed-update suite instead, rhona will do the rest.
4692         (manual_reject): support for a stable specific template.
4693         (main): setup up stable rejector in subst.
4694
4695 2001-11-04  Martin Michlmayr  <tbm@cyrius.com>
4696
4697         * debian/control (Build-Depends): docbook2man has been superseded
4698         by docbook-utils.
4699
4700         * neve (main): exit with a more useful error message.
4701         (update_suites): Suite::<suite>::Version, Origin and Description
4702         are not required, so don't fail if they don't exist.
4703
4704         * db_access.py (get_archive_id): return -1 on error rather than
4705         raise an exception.
4706         (get_location_id): likewise.
4707
4708         * madison (main): don't exit on the first not-found package,
4709         rather exit with an appropriate return code after processing all
4710         packages.
4711
4712 2001-11-03  James Troup  <james@nocrew.org>
4713
4714         * claire.py (find_dislocated_stable): add per-architecture
4715         symlinks for dislocated architecture: all debs.
4716
4717 2001-10-19  Anthony Towns  <ajt@debian.org>
4718
4719         * apt.conf*, katie.conf*: add mips, mipsel, s390 to testing.
4720
4721 2001-10-10  Anthony Towns  <ajt@debian.org>
4722
4723         * claire.py (fix_component_section): do _not_ assign to None under
4724         any circumstances
4725
4726 2001-10-07  Martin Michlmayr  <tbm@cyrius.com>
4727
4728         * melanie (main): don't duplicate architectures when removing from
4729         more than one suite.
4730
4731         * heidi (main, process_file, get_list): report suite name not ID.
4732
4733         * naima (nmu_p): be case insensitive.
4734
4735         * naima (action): more list handling clean ups.
4736
4737         * melanie (main): clean up lists handling to use string.join and
4738         IN's.
4739
4740         * madison (main): clean up suite and architecture argument parsing
4741         to use slices less and string.join more.
4742
4743         * utils.py (parse_changes): Use string.find() instead of slices for
4744         string comparisons thereby avoid hardcoding the length of strings.
4745         * ziyi (main): likewise.
4746
4747 2001-10-07  James Troup  <james@nocrew.org>
4748
4749         * Remove mode argument from utils.open_files() calls if it's the
4750         default, i.e. 'r'.
4751
4752 2001-09-27  James Troup  <james@nocrew.org>
4753
4754         * katie (init): new function; options clean up.
4755         (usage): add missing options, remove obsolete ones.
4756         (main): adapt for the two changes above.  If the lock file or
4757         new-ack log file don't exist, create them.  Don't try to open the
4758         new-ack log file except running in new-ack mode.
4759
4760         * alyson (main): initialize all the tables that are based on the
4761         conf file.
4762
4763         * utils.py (touch_file): like touch(1).
4764         (where_am_i): typo.
4765
4766         * catherine (usage): new.
4767         (main): use it.  options cleanup.
4768         * claire.py: likewise.
4769         * fernanda: likewise.
4770         * heidi: likewise.
4771         * jenna: likewise.
4772         * shania: likewise.
4773         * ziyi: likewise.
4774
4775         * andrea: options cleanup.
4776         * charisma: likewise.
4777         * julia: likewise.
4778         * madison: likewise.
4779         * melanie: likewise.
4780         * natalie: likewise.
4781         * rhona: likewise.
4782         * tea: likewise.
4783
4784 2001-09-26  James Troup  <james@nocrew.org>
4785
4786         * utils.py: default to sane config file locations
4787         (/etc/katie/{apt,katie}.conf.  They can be the actual config files
4788         or they can point to the real ones through use of a new Config
4789         section.  Based on an old patch by Adam Heath.
4790         (where_am_i): use the new default config stuff.
4791         (which_conf_file): likewise.
4792         (which_apt_conf_file): likewise.
4793
4794         * charisma (main): output defaults to
4795         `Package~Version\tMaintainer'; input can be of either form.  When
4796         parsing the new format do version comparisons, when parsing the
4797         old format assume anything in the extra file wins.  This fixes the
4798         problem of newer non-US packages being overwhelmed by older
4799         versions still in stable on main.
4800
4801 2001-09-17  James Troup  <james@nocrew.org>
4802
4803         * natalie.py (list): use result_join().
4804
4805         * denise (main): result_join() moved to utils.
4806
4807         * utils.py (result_join): move to utils; add an optional seperator
4808         argument.
4809
4810 2001-09-14  James Troup  <james@nocrew.org>
4811
4812         * heidi (set_suite): new function; does --set like natalie does,
4813         i.e. turns it into a sequence of --add's and --remove's
4814         internally.  This is a major win (~20 minute run time > ~20
4815         seconds) in the common, everday (i.e. testing) case.
4816         (get_id): common code used by set_suite() and process_file().
4817         (process_file): call set_suite() and get_id().
4818         (main): add logging support.
4819
4820         * julia: new script; syncs PostgeSQL with (LDAP-generated) passwd
4821         files.
4822
4823         * utils.py (parse_changes): use slices or simple string comparison
4824         in favour of regexes where possible.
4825
4826         * sql-aptvc.cpp (versioncmp): rewritten to take into account the
4827         fact that the string VARDATA() points to are not null terminated.
4828
4829         * denise (result_join): new function; like string.join() but
4830         handles None's.
4831         (list): use it.
4832         (main): likewise.
4833
4834         * charisma (main): python-pygresql 7.1 returns None not "".
4835
4836 2001-09-14  Ryan Murray  <rmurray@debian.org>
4837
4838         * natalie.py (list): handle python-pygresql 7.1 returning None.
4839
4840 2001-09-10  Martin Michlmayr  <tbm@cyrius.com>
4841
4842         * madison (main): return 1 if no package is found.
4843
4844 2001-09-08  Martin Michlmayr  <tbm@cyrius.com>
4845
4846         * madison (main): better error handling for incorrect
4847         -a/--architecture or -s/--suite arguments.
4848         (usage): new.
4849         (main): use it.
4850
4851 2001-09-05  Ryan Murray  <rmurray@debian.org>
4852
4853         * charisma, madison, katie: remove use of ROUser
4854         * katie.conf,katie.conf-non-US: remove defintion of ROUser
4855
4856 2001-08-26  James Troup  <james@nocrew.org>
4857
4858         * katie (nmu_p.is_an_nmu): use maintaineremail to check for group
4859         maintained packages at cjwatson@'s request.
4860
4861 2001-08-21  James Troup  <james@nocrew.org>
4862
4863         * madison (main): add -a/--architecture support.
4864
4865         * jenna: use logging instead of being overly verbose on stdout.
4866
4867 2001-08-11  Ryan Murray  <rmurray@debian.org>
4868
4869         * melanie: add functional help option
4870
4871 2001-08-07  Anthony Towns  <ajt@debian.org>
4872
4873         * apt.conf, katie.conf: Add ia64 and hppa to testing.
4874
4875 2001-07-28  James Troup  <james@nocrew.org>
4876
4877         * katie (check_dsc): ensure source version is >> than existing
4878         source in target suite.
4879
4880 2001-07-25  James Troup  <james@nocrew.org>
4881
4882         * natalie.py: add logging support.
4883
4884         * utils.py (open_file): make the second argument optional and
4885         default to read-only.
4886
4887         * rene (main): work around broken source packages that duplicate
4888         arch: all packages with arch: !all packages (no longer allowed
4889         into the archive by katie).
4890
4891 2001-07-13  James Troup  <james@nocrew.org>
4892
4893         * katie (action): don't assume distribution is a dictionary.
4894         (update_subst): don't assume architecture is a dictionary and that
4895         maintainer822 is defined.
4896         (check_changes): recognise nk_format exceptions.
4897         (check_changes): reject on 'testing' only uploads.
4898         (check_files): when checking to ensure all packages are newer
4899         versions check against arch-all packages too.
4900         (check_dsc): enforce the existent of a sane set of mandatory
4901         fields.  Ensure the version number in the .dsc (modulo epoch)
4902         matches the version number in the .changes file.
4903
4904         * utils.py (changes_compare): ignore all exceptions when parsing
4905         the changes files.
4906         (build_file_list): don't UNDEF on a changes file with no format
4907         field.
4908
4909 2001-07-07  James Troup  <james@nocrew.org>
4910
4911         * katie (nmu_p.is_an_nmu): check 'changedby822' for emptiness
4912         rather than 'changedbyname' to avoid false negatives on uploads
4913         with an email-address-only Changed-By field.
4914         (check_dsc): don't overwrite reject_message; append to it.
4915         (check_signature): likewise.
4916         (check_changes): likewise.
4917         (announce): condition logging on 'action'.
4918
4919         * logging.py: new logging module.
4920
4921         * katie: Cleaned up code by putting Cnf["Dinstall::Options"]
4922         sub-tree into a separate (global) variable.
4923         (check_dsc): ensure format is 1.0 to retain backwards
4924         compatability with dpkg-source in potato.
4925         (main): only try to obtain the lock when not running in no-action
4926         mode.
4927         Use the new logging module.
4928
4929         * christina: initial version; only partially usable.
4930
4931 2001-06-28  Anthony Towns  <ajt@debian.org>
4932
4933         * apt.conf: Add ExtraOverrides to auric.
4934
4935 2001-06-25  James Troup  <james@nocrew.org>
4936
4937         * katie (nmu_p.is_an_nmu): the wonderful dpkg developers decided
4938         they preferred the name 'Uploaders'.
4939
4940 2001-06-23  James Troup  <james@nocrew.org>
4941
4942         * katie (check_files): fix typo in uncommon rejection message,
4943         s/sourceversion/source version/.
4944
4945         * denise (main): we can't use print because stdout has been
4946         redirected.
4947
4948         * katie (source_exists): new function; moved out of check_files()
4949         and added support for binary-only NMUs of earlier sourceful NMUs.
4950
4951         * rhona (clean): find_next_free has moved.
4952
4953         * utils.py (find_next_free): new function; moved here from rhona.
4954         Change too_many to be an argument with a default value, rather
4955         than a hardcoded variable.
4956
4957         * shania: rewritten to work better; REJECTion reminder mail
4958         handling got lost though.
4959
4960 2001-06-22  James Troup  <james@nocrew.org>
4961
4962         * rhona (main): remove unused override code.
4963
4964         * fernanda (main): remove extraneous \n's from utils.warn calls.
4965         * natalie.py (list): likewise.
4966
4967         * catherine, cindy, denise, heidi, jenna, katie, neve, rhona, tea:
4968         use utils.{warn,fubar} where appropriate.
4969
4970 2001-06-21  James Troup  <james@nocrew.org>
4971
4972         * katie (nmu_p): new class that encapsulates the "is a nmu?"
4973         functionality.
4974         (nmu_p.is_an_nmu): add support for multiple maintainers specified
4975         by the "Maintainers" field in the .dsc file and maintainer groups.
4976         (nmu_p.__init__): read in the list of group maintainer names.
4977         (announce): use nmu_p.
4978
4979 2001-06-20  James Troup  <james@nocrew.org>
4980
4981         * rene (main): hardcode the suite experimental is compared to by
4982         name rather than number.
4983
4984         * katie (check_files): differentiate between doesn't-exist and
4985         permission-denied in "can not read" rejections; requested by edd@.
4986         (check_dsc): use os.path.exists rather than os.access to allow the
4987         above check to kick in.
4988
4989         * heidi (process_file): read all input before doing anything and
4990         use transactions.
4991
4992 2001-06-15  James Troup  <james@nocrew.org>
4993
4994         * fernanda: new script; replaces old 'check' shell script
4995         nastiness.
4996
4997 2001-06-14  James Troup  <james@nocrew.org>
4998
4999         * katie: actually import traceback module to avoid amusing
5000         infinite loop.
5001
5002 2001-06-10  James Troup  <james@nocrew.org>
5003
5004         * utils.py (extract_component_from_section): fix to handle just
5005         'non-free' and 'contrib'.  Also fix to handle non-US in a
5006         completely case insensitive manner as a component.
5007
5008 2001-06-08  James Troup  <james@nocrew.org>
5009
5010         * madison (arch_compare): sort function that sorts 'source' first
5011         then alphabetically.
5012         (main): use it.
5013
5014 2001-06-05  Jeff Licquia  <jlicquia@progeny.com>
5015
5016         * catherine (poolize): explicitly make poolized_size a long so it
5017         doesn't overflow when poolizing e.g. entire archives.
5018
5019 2001-06-01  James Troup  <james@nocrew.org>
5020
5021         * utils.py (send_mail): throw exceptions rather than exiting.
5022
5023         * katie (process_it): catch exceptions and ignore them.
5024
5025 2001-06-01  Michael Beattie  <mjb@debian.org>
5026
5027         * added update-mailingliststxt and update-readmenonus to update
5028         those files, respectively. modified cron.daily{,-non-US} to
5029         use them.
5030
5031 2001-05-31  Anthony Towns  <ajt@debian.org>
5032
5033         * rhona: make StayOfExecution work.
5034
5035 2001-05-31  James Troup  <james@nocrew.org>
5036
5037         * rhona (find_next_free): fixes to not overwrite files but rename
5038         them by appending .<n> instead.
5039         (clean): use find_next_free and use dated sub-directories in the
5040         morgue.
5041
5042         * utils.py (move): don't overwrite files unless forced to.
5043         (copy): likewise.
5044
5045 2001-05-24  James Troup  <james@nocrew.org>
5046
5047         * katie (check_files): determine the source version here instead
5048         of during install().
5049         (check_files): check for existent source with bin-only NMU
5050         support.
5051         (main): sort the list of changes so that the source-must-exist
5052         check Does The Right Thing(tm).
5053
5054         * utils.py (changes_compare): new function; sorts a list of
5055         changes files by 'have-source', source, version.
5056         (cc_fix_changes): helper function.
5057         (parse_changes): use compiled regexes.
5058         (fix_maintainer): likewise.
5059
5060         * rene (main): warn about packages in experimental that are
5061         superseded by newer versions in unstable.
5062
5063 2001-05-21  James Troup  <james@nocrew.org>
5064
5065         * rene (main): add support for checking for ANAIS (Architecture
5066         Not Allowed In Source) packages.
5067
5068 2001-05-17  James Troup  <james@nocrew.org>
5069
5070         * katie (check_changes): initalize `architecture' dictionary in
5071         changes global so that if we can't parse the changes file for
5072         whatever reason we don't undef later on.
5073
5074         * utils.py (parse_changes): fix handling of multi-line fields
5075         where the first line did have data.
5076
5077 2001-05-05  Anthony Towns  <ajt@debian.org>
5078
5079         * ziyi: Add "NotAutomatic: yes" to experimental Release files.
5080         (It should always have been there. Ooopsy.)
5081
5082 2001-05-03  Anthony Towns  <ajt@debian.org>
5083
5084         * jenna: Cleanup packages that move from arch:any to arch:all or
5085         vice-versa.
5086
5087 2001-04-24  Anthony Towns  <ajt@debian.org>
5088
5089         * ziyi: add ``SHA1:'' info to Release files. Also hack them up to
5090         cope with debian-installer and boot-floppies' md5sum.txt.
5091
5092 2001-04-16  James Troup  <james@nocrew.org>
5093
5094         * katie (check_changes): add missing %s format string argument.
5095         (stable_install): temporary work around for morgue location to
5096         move installed changes files into.
5097         (stable_install): helps if you actually read in the template.
5098         (manual_reject): fix for editing of reject messages which was
5099         using the wrong variable name.
5100
5101         * jenna (generate_src_list): typo; s/package/source/; fixes undef crash.
5102
5103 2001-04-13  James Troup  <james@nocrew.org>
5104
5105         * katie (manual_reject): Cc the installer.
5106         (reject): don't.
5107         (check_changes): remove unused maintainer-determination code.
5108         (update_subst): add support for Changed-By when setting the
5109         *MAINTAINER* variables.
5110
5111         * rene (bar): new function to check for packages on architectures
5112         when they shouldn't be.
5113
5114         * natalie.py (main): use fubar() and warn() from utils.
5115
5116         * utils.py (whoami): new mini-function().
5117         * melanie (main): use it.
5118         * katie (manual_reject): likewise.
5119
5120 2001-04-03  James Troup  <james@nocrew.org>
5121
5122         * katie (action): ignore exceptions from os.path.getmtime() so we
5123         don't crash on non-existent changes files (e.g. when they are
5124         moved between the start of the install run in cron.daily and the
5125         time we get round to processing them).
5126
5127         * madison (main): also list source and accept -s/--suite.
5128
5129         * jenna (generate_src_list): missing \n in error message.
5130
5131         * katie (update_subst): add sane defaults for when changes is
5132         skeletal.
5133
5134 2001-03-29  James Troup  <james@nocrew.org>
5135
5136         * melanie (main): use fubar() and warn() from utils.  Remember who
5137         the maintainer for the removed packages are and display that info
5138         to the user.  Readd support for melanie-specific Bcc-ing that got
5139         lost in the TemplateSubst transition.
5140
5141         * utils.py (fubar): new function.
5142         (warn): like wise.
5143
5144         * db_access.py (get_maintainer): as below.
5145
5146         * charisma (get_maintainer): moved the bulk of this function to
5147         db_access so that melanie can use it too.
5148
5149         * claire.py (find_dislocated_stable): restrict the override join
5150         to those entries where the suite is stable; this avoids problems
5151         with packages which have moved to new sections (e.g. science)
5152         between stable and unstable.
5153
5154 2001-03-24  James Troup  <james@nocrew.org>
5155
5156         * catherine (poolize): new function; not really independent of
5157         main() fully, yet.
5158         (main): use it.
5159
5160         * katie (stable_install): __SUITE__ needs to be space prefixed
5161         because buildd's check for 'INSTALLED$'.
5162
5163 2001-03-22  James Troup  <james@nocrew.org>
5164
5165         * utils.py (regex_safe): also need to escape '.'; noticed by ajt@.
5166
5167         * jenna: rewritten; now does deletions on a per-suite level
5168         instead of a per-suite-component-architecture-type level.  This
5169         allows mutli-component packages to be auto-cleaned (and as a
5170         bonus, reduces the code size and duplication).
5171
5172 2001-03-22  Anthony Towns  <ajt@debian.org>
5173
5174         * ziyi (main): fix ziyi to overwrite existing Release.gpg files
5175         instead of just giving a gpg error.
5176
5177 2001-03-21  James Troup  <james@nocrew.org>
5178
5179         * madison (main): use apt_pkg.VersionCompare to sort versions so
5180         that output is correctly sorted for packages like debhlper.
5181         Noticed by ajt@.
5182
5183         * tea (check_source_in_one_dir): actually find problematic source
5184         packages.
5185
5186         * katie (check_dsc): remember the orig.tar.gz's location ID if
5187         it's not in a legacy suite.
5188         (check_diff): we don't use orig_tar_id.
5189         (install): add code to handle sourceful diff-only upload of
5190         packages which change components by copying the .orig.tar.gz into
5191         the new component, if it doesn't already exist there.
5192         (process_it): reset orig_tar_location (as above).
5193
5194         * melanie (main): use template substiution for the bug closing
5195         emails.
5196         (main): don't hardcode bugs.debian.org or packages.debian.org
5197         either; use configuration items.
5198
5199         * katie: likewise.
5200
5201         * natalie.py (init): use None rather than 'localhost' for the
5202         hostname given to pg.connect.
5203
5204         * utils.py (TemplateSubst): new function; lifted from
5205         userdir-ldap.
5206
5207 2001-03-21  Ryan Murray  <rmurray@debian.org>
5208
5209         * katie (announce): fix the case of non-existent
5210         Suite::$SUITE::Announce.
5211
5212 2001-03-20  Ryan Murray  <rmurray@debian.org>
5213
5214         * debian/rules (binary-indep): install melanie into /usr/bin/ not
5215         /usr/.
5216
5217         * alyson (main): use config variable for database name.
5218         * andrea (main): likewise.
5219         * catherine (main): likewise.
5220         * charisma (main): likewise.
5221         * cindy (main): likewise.
5222         * claire.py (main): likewise.
5223         * denise (main): likewise.
5224         * heidi (main): likewise.
5225         * jenna (main): likewise.
5226         * katie (main): likewise.
5227         * madison (main): likewise.
5228         * melanie (main): likewise.
5229         * neve (main): likewise.
5230         * rhona (main): likewise.
5231         * tea (main): likewise.
5232
5233 2001-03-15  James Troup  <james@nocrew.org>
5234
5235         * rhona (check_sources): fixed evil off by one (letter) error
5236         which was causing only .dsc files to be deleted when cleaning
5237         source packages.
5238
5239         * charisma (get_maintainer_from_source): remove really stupid and
5240         gratuitous IN sub-query and replace with normal inner join.
5241         (main): connect as read-only user nobody.
5242
5243         * rhona (clean_maintainers): rewritten to use SELECT and sub-query
5244         with EXISTS.
5245         (check_files): likewise; still disabled by default though.
5246         (clean_binaries): add ' seconds' to the mysterious number in the
5247         output.
5248         (clean): likewise.
5249
5250         * tea (check_files): add missing global declaration on db_files.
5251
5252 2001-03-14  James Troup  <james@nocrew.org>
5253
5254         * rhona: rewritten large chunks. Removed a lot of the silly
5255         selecting into dictionaries and replaced it with 'where exists'
5256         based sub queries.  Added support for StayOfExecution.  Fix the
5257         problem with deleting dsc_files too early and disable cleaning of
5258         unattached files.
5259
5260 2001-03-14  Anthony Towns  <ajt@debian.org>
5261
5262         * katie (announce): also check Changed-By when trying to detect
5263         NMUs.
5264
5265 2001-03-06  Anthony Towns  <ajt@debian.org>
5266
5267         * ziyi (main): Generate Release.gpg files as well, using the key from
5268         Dinstall::SigningKey in katie.conf, if present. That key has to be
5269         passwordless, and hence kept fairly secretly.
5270
5271 2001-03-02  James Troup  <james@nocrew.org>
5272
5273         * utils.py (str_isnum): new function; checks to see if the string
5274         is a number.
5275
5276         * shania (main): fix _hideous_ bug which was causing all files > 2
5277         weeks old to be deleted from incoming, even if they were part of a
5278         valid upload.
5279
5280 2001-02-27  James Troup  <james@nocrew.org>
5281
5282         * melanie (main): accept new argument -C/--carbon-copy which
5283         allows arbitarty carbon-copying of the bug closure messages.
5284         Cleaned up code by putting Cnf["Melanie::Options"] sub-tree into a
5285         separate variable.
5286
5287 2001-02-27  Anthony Towns  <ajt@debian.org>
5288
5289         * ziyi: new program; generates Release files.
5290
5291 2001-02-25  James Troup  <james@nocrew.org>
5292
5293         * katie (reject): add missing '\n' to error message.
5294         (manual_reject): likewise.
5295         (install): catch exceptions from moving the changes file into DONE
5296         and ignore them.
5297
5298         * tea (check_md5sums): new function.
5299
5300 2001-02-25  Michael Beattie  <mjb@debian.org>
5301
5302         * melanie: use $EDITOR if available.
5303
5304 2001-02-15  James Troup  <james@nocrew.org>
5305
5306         * utils.py (parse_changes): don't crash and burn on empty .changes
5307         files.  Symptoms noticed by mjb@.
5308
5309 2001-02-15  Adam Heath  <doogie@debian.org>
5310
5311         * denise (main): use an absolute path for the output filename.
5312
5313         * sql-aptvc.cpp: don't #include <utils/builtins.h> as it causes
5314         compile errors with postgresql-dev >= 7.0.
5315
5316 2001-02-12  James Troup  <james@nocrew.org>
5317
5318         * rene: initial version.
5319
5320         * andrea: initial version.
5321
5322         * catherine (main): remove obsolete assignment of arguments.
5323
5324 2001-02-09  James Troup  <james@nocrew.org>
5325
5326         * catherine: first working version.
5327
5328 2001-02-06  James Troup  <james@nocrew.org>
5329
5330         * katie (check_files): validate the priority field; i.e. ensure it
5331         doesn't contain a '/' (to catch people prepending the priority
5332         with the component rather than the section).
5333         (check_override): don't warn about source packages; the only check
5334         is on section and we have no GUI tools that would use the Section
5335         field for a Sources file.
5336         (announce): use tags rather than severities for NMUs.  Requested
5337         by Josip Rodin <joy@>. [#78035]
5338
5339 2001-02-04  James Troup  <james@nocrew.org>
5340
5341         * tea (check_override): new function; ensures packages in suites
5342         are also in the override file.  Thanks to bod@ for noticing that
5343         such packages existed.
5344
5345         * katie: move file type compiled regular expressions to utils as
5346         catherine uses them too.
5347         (check_changes): always default maintainer822 to the installer
5348         address so that any bail out won't cause undefs later.
5349         (check_files): update file type re's to match above.
5350         (stable_install): likewise.
5351         (reject): handle any except from moving the changes files.  Fixes
5352         crashes on unreadable changes files.
5353
5354         * melanie (main): add an explanation of why things are not removed
5355         from testing.
5356
5357 2001-01-31  James Troup  <james@nocrew.org>
5358
5359         * melanie (main): ignore a) no message, b) removing from stable or
5360         testing when invoked with -n/--no-action.
5361
5362         * katie (check_override): lower section before checking to see if
5363         we're whining about 'non-US' versus 'non-US/main'.
5364
5365         * sql-aptvc.cpp: new file; wrapper around apt's version comparison
5366         function so that we can use inside of PostgreSQL.
5367
5368 2001-01-28  James Troup  <james@nocrew.org>
5369
5370         * katie: updated to pass new flag to parse_changes() and deal with
5371         the exception raised on invalid .dsc's if appropriate.
5372         * shania (main): likewise.
5373         * melanie (main): likewise.
5374
5375         * tea (check_dscs): new function to validate all .dsc files in
5376         unstable.
5377
5378         * utils.py (parse_changes): if passed an additional flag, validate
5379         the .dsc file to ensure it's extractable by dpkg-source.
5380         Requested by Ben Collins <bcollins@>.
5381
5382 2001-01-27  James Troup  <james@nocrew.org>
5383
5384         * madison (main): connect to the DB as nobody.
5385
5386         * katie (check_files): remove support for -r/--no-version-check
5387         since it makes no sense under katie (jenna will automatically
5388         remove the (new) older version) and was evil in any event.
5389         (check_changes): add missing new line to rejection message.
5390         (check_dsc): likewise.
5391         (process_it): reset reject_message here.
5392         (main): not here.  Also remove support for -r.
5393
5394 2001-01-26  James Troup  <james@nocrew.org>
5395
5396         * katie (check_override): don't whine about 'non-US/main' versus
5397         'non-US'.
5398
5399 2001-01-26  Michael Beattie  <mjb@debian.org>
5400
5401         * natalie.py (usage): new function.
5402         (main): use it.
5403
5404 2001-01-25  Antti-Juhani Kaijanaho  <gaia@iki.fi>
5405
5406         * update-mirrorlists: Update README.non-US too (request from Joy).
5407
5408 2001-01-25  James Troup  <james@nocrew.org>
5409
5410         * katie (reject): catch any exception from utils.move() and just
5411         pass, we previously only caught can't-overwrite errors and not
5412         can't-read ones.
5413
5414         * jenna (generate_src_list): use ORDER BY in selects to avoid
5415         unnecessary changes to Packages files.
5416         (generate_bin_list): likewise.
5417
5418         * utils.py (extract_component_from_section): separated out from
5419         build_file_list() as it's now used by claire too.
5420
5421         * claire.py (find_dislocated_stable): rewrite the query to extract
5422         section information and handle component-less locations properly.
5423         Thanks to ajt@ for the improved queries.
5424         (fix_component_section): new function to fix components and
5425         sections.
5426
5427 2001-01-23  James Troup  <james@nocrew.org>
5428
5429         * katie (check_files): set file type for (u?)debs first thing, so
5430         that if we continue, other functions which rely on file type
5431         existing don't bomb out.  If apt_pkg or apt_inst raise an
5432         exception when parsing the control file, don't try any other
5433         checks, just drop out.
5434         (check_changes): new test to ensure there is actually a target
5435         distribution.
5436
5437 2001-01-22  James Troup  <james@nocrew.org>
5438
5439         * katie (usage): s/dry-run/no-action/.  Noticed by Peter Gervai
5440         <grin@>.
5441         (check_changes): when mapping to unstable, remember to actually
5442         add unstable to the suite list and not just remove the invalid
5443         suite.
5444
5445 2001-01-21  James Troup  <james@nocrew.org>
5446
5447         * katie (check_files): catch exceptions from debExtractControl()
5448         and reject packages which raise any.
5449
5450 2001-01-19  James Troup  <james@nocrew.org>
5451
5452         * katie (check_signature): basename() file name in rejection
5453         message.
5454
5455 2001-01-18  James Troup  <james@nocrew.org>
5456
5457         * katie (in_override_p): remember the section and priority from
5458         the override file so we can check them against the package later.
5459         (check_override): new function; checks section and priority (for
5460         binaries) from the package against the override file and mails the
5461         maintainer about any disparities.
5462         (install): call check_override after announcing the upload.
5463
5464 2001-01-16  James Troup  <james@nocrew.org>
5465
5466         * utils.py (build_file_list): catch ValueError's from splitting up
5467         the files field and translate it into a parse error.
5468
5469         * tea: add support for finding unreferenced files.
5470
5471         * katie (in_override_p): add support for suite-aliasing so that
5472         proposed-updates uploads work again.
5473         (check_changes): catch parses errors from utils.build_file_list().
5474         (check_dsc): likewise.
5475         (check_diff): yet more dpkg breakage so we require even newer a
5476         version.
5477
5478         * jenna (generate_bin_list): don't do nasty path munging that's no
5479         longer needed.
5480
5481         * denise (main): support for non-US; and rename testing's override
5482         files so they're based on testing's codename.
5483
5484 2001-01-16  Martin Michlmayr  <tbm@cyrius.com>
5485
5486         * melanie: add to the bug closing message explaining what happens
5487         (or rather doesn't) with bugs against packages that have been
5488         removed.
5489
5490 2001-01-14  James Troup  <james@nocrew.org>
5491
5492         * charisma (main): fix silly off-by-one error; suite priority
5493         checking was done using "less than" rather than "less than or
5494         equal to" which was causing weird hesienbugs with wrong Maintainer
5495         fields.
5496
5497 2001-01-10  James Troup  <james@nocrew.org>
5498
5499         * katie (in_override_p): adapted to use SQL-based overrides.
5500         read_override_file function disappears.
5501
5502         * db_access.py: add new functions get_section_id, get_priority_id
5503         and get_override_type_id.
5504         (get_architecture_id): return -1 if the architecture is not found.
5505
5506         * heidi: switch %d -> %d in all SQL queries.
5507         (get_list): Use string.join where appropriate.
5508
5509         * rhona (in_override_p): don't die if the override file doesn't
5510         exist.
5511         (main): warn if the override file doesn't exist.
5512
5513         * alyson: new script; will eventually sync the config file and the
5514         SQL database.
5515
5516         * natalie.py: new script; manipulates overrides.
5517
5518         * melanie: new script; removes packages from suites.
5519
5520 2001-01-08  James Troup  <james@nocrew.org>
5521
5522         * katie (re_bad_diff): whee; dpkg 1.8.1.1 didn't actually fix
5523         anything it just changed the symptom.  Recognise the new breakage
5524         and reject them too.
5525
5526 2001-01-07  James Troup  <james@nocrew.org>
5527
5528         * katie (check_dsc): when adding the cwd copy of the .orig.tar.gz
5529         to the .changes file, be sure to set up files[filename]["type"]
5530         too.
5531
5532 2001-01-06  James Troup  <james@nocrew.org>
5533
5534         * katie (check_diff): new function; detects bad diff files
5535         produced by dpkg 1.8.1 and rejects thems.
5536         (process_it): call check_diff().
5537         (check_dsc): gar.  Add support for multiple versions of the
5538         .orig.tar.gz file in the archive from -sa uploads.  Check md5sum
5539         and size against all versions and use one which matches if
5540         possible and exclude any that don't from being poolized to avoid
5541         file overwrites.  Thanks to broonie@ for providing the example.
5542         (install): skip any files marked as excluded as above.
5543
5544 2001-01-05  James Troup  <james@nocrew.org>
5545
5546         * heidi (process_file): add missing argument to error message.
5547
5548 2001-01-04  James Troup  <james@nocrew.org>
5549
5550         * heidi (main): fix handling of multiple files by reading all
5551         files not just the first file n times (where n = the number of
5552         files passed as arguments).
5553
5554 2001-01-04  Anthony Towns  <ajt@debian.org>
5555
5556         * katie (check_dsc): proper fix for the code which locates the
5557         .orig.tar.gz; check for '<filename>$' or '^<filename>$'.
5558
5559 2000-12-20  James Troup  <james@nocrew.org>
5560
5561         * rhona: replace IN's with EXISTS's to make DELETE time for
5562         binaries and source sane on auric.  Add a -n/--no-action flag and
5563         make it stop actions if used.  Fixed a bug in binaries deletion
5564         with no StayOfExecution (s/</<=/).  Add working -h/--help and
5565         -V/--version.  Giving timing info on deletion till I'm sure it's
5566         sane.
5567
5568         * katie (check_changes): map testing to unstable.
5569
5570         * madison: new script; shows versions in different architectures.
5571
5572         * katie (check_dsc): ensure size matches as well as md5sum;
5573         suggested by Ben Collins <bcollins@debian.org> in Debian Bug
5574         #69702.
5575
5576 2000-12-19  James Troup  <james@nocrew.org>
5577
5578         * katie (reject): ignore the "can't overwrite file" exception from
5579         utils.move() and leave the files where they are.
5580         (reject): doh! os.access() test was reversed so we only tried to
5581         move files which didn't exist... replaced with os.path.exists()
5582         test the right way round.
5583
5584         * utils.py (move): raise an exception if we can't overwrite the
5585         destination file.
5586         (copy): likewise.
5587
5588 2000-12-18  James Troup  <james@nocrew.org>
5589
5590         * rhona: first working version.
5591
5592         * db_access.py (get_files_id): force both sizes to be integers.
5593
5594         * katie (main): use size_type().
5595
5596         * utils.py (size_type): new function; pretty prints a file size.
5597
5598 2000-12-17  James Troup  <james@nocrew.org>
5599
5600         * charisma (main): do version compares so that older packages do
5601         not override newer ones and process source first as source wins
5602         over binaries in terms of who we think of as the Maintainer.
5603
5604 2000-12-15  James Troup  <james@nocrew.org>
5605
5606         * katie (install): use the files id for the .orig.tar.gz from
5607         check_dsc().
5608         (install): limit select for legacy source to a) source in legacy
5609         or legacy-mixed type locations and b) distinct on files.id.
5610         (install): rather than the bizarre insert new, delete old method
5611         for moving legacy source into the pool, use a simple update of
5612         files.
5613         (process_it): initalize some globals before each process.
5614
5615 2000-12-14  James Troup  <james@nocrew.org>
5616
5617         * katie (in_override_p): index on binary_type too since .udeb
5618         overrides are in a different file.
5619         (read_override_file): likewise.
5620         (check_files): correct filename passed to get_files_id().
5621         (check_dsc): we _have_ to preprend '/' to the filename to avoid
5622         mismatches like jabber.orig.tar.gz versus libjabber.orig.tar.gz.
5623         (check_dsc): remember the files id of the .orig.tar.gz, not the
5624         location id.
5625
5626 2000-12-13  James Troup  <james@nocrew.org>
5627
5628         * utils.py (poolify): force the component to lower case except for
5629         non-US.
5630
5631         * katie (in_override_p): handle .udeb-specific override files.
5632         (check_files): pass the binary type to in_override_p().
5633         (check_dsc): remember the location id of the old .orig.tar.gz in
5634         case it's not in the pool.
5635         (install): use location id from dsc_files; which is where
5636         check_dsc() puts it for old .orig.tar.gz files.
5637         (install): install files after all DB work is complete.
5638         (reject): basename() the changes filename.
5639         (manual_reject): likewise.
5640
5641         * shania: new progam; replaces incomingcleaner.
5642
5643 2000-12-05  James Troup  <james@nocrew.org>
5644
5645         * katie (check_changes): if inside stable and can't find files
5646         from the .changes; assume it's installed in the pool and chdir()
5647         to there.
5648         (check_files): we are not installing for stable installs, so don't
5649         check for overwriting existing files.
5650         (check_dsc): likewise.
5651         (check_dsc): reorder .orig.tar.gz handling so that we search in
5652         the pool first and only then fall back on any .orig.tar.gz in the
5653         cwd; this avoids false positives on the overwrite check when
5654         people needlessly reupoad the .orig.tar.gz in a non-sa upload.
5655         (install): if this is a stable install, bail out to
5656         stable_install() immediately.
5657         (install): dsc_files handling was horribly broken. a) we need to
5658         add files from the .dsc and not the .changes (duh), b) we need to
5659         add the .dsc file itself to dsc_files (to be consistent with neve
5660         if for no other reason).
5661         (stable_install): new function; handles installs from inside
5662         proposed-updates to stable.
5663         (acknowledge_new): basename changes_filename before doing
5664         anything.
5665         (process_it): absolutize the changes filename to avoid the
5666         requirement of being in the same directory as the .changes file.
5667         (process_it): save and restore the cwd as stable installs can
5668         potentially jump into the pool to find files.
5669
5670         * jenna: dislocated_files support using claire.
5671
5672         * heidi (process_file): select package field from binaries
5673         explicitly.
5674
5675         * db_access.py (get_files_id): fix cache key used.
5676
5677         * utils.py (build_file_list): fix 'non-US/non-free' case in
5678         section/component splitting.
5679         (move): use os.path.isdir() rather than stat.
5680         (copy): likewise.
5681
5682         * claire.py: new file; stable in non-stable munger.
5683
5684         * tea: new file; simply ensures all files in the DB exist.
5685
5686 2000-12-01  James Troup  <james@nocrew.org>
5687
5688         * katie (check_dsc): use regex_safe().
5689         (check_changes): typo in changes{} key:
5690         s/distributions/distribution/.
5691         (install): use changes["source"], not files[file]["source"] as the
5692         latter may not exist and the former is used elsewhere.  Commit the
5693         SQL transaction earlier.
5694
5695         * utils.py (regex_safe): new function; escapes characters which
5696         have meaning to SQL's regex comparison operator ('~').
5697
5698 2000-11-30  James Troup  <james@nocrew.org>
5699
5700         * katie (install): pool_location is based on source package name,
5701         not binary package.
5702
5703         * utils.py (move): if dest is a directory, append the filename
5704         before chmod-ing.
5705         (copy): ditto.
5706
5707         * katie (check_files): don't allow overwriting of existing .debs.
5708         (check_dsc): don't allow overwriting of existing source files.
5709
5710 2000-11-27  James Troup  <james@nocrew.org>
5711
5712         * katie (check_signature): don't try to load rsaref; it's
5713         obsolete.
5714         (in_override_p): don't try to lookup override entries for packages
5715         with an invalid suite name.
5716         (announce): don't assume the suite name is valid; use Find() to
5717         lookup the mailing list name for announcements.
5718
5719         * utils.py (where_am_i): typo; hostname is in the first element,
5720         not second.
5721
5722         * db_access.py (get_suite_id): return -1 on an unknown suite.
5723
5724 2000-11-26  James Troup  <james@nocrew.org>
5725
5726         * katie (install): fix CopyChanges handling; typo in in checking
5727         Cnf for CopyChanges flag and was calling non-existent function
5728         copy_file.
5729
5730         * utils.py (copy): new function; clone of move without the
5731         unlink().
5732
5733 2000-11-25  James Troup  <james@nocrew.org>
5734
5735         * utils.py (build_file_list): handle non-US prefixes properly
5736         (i.e. 'non-US' -> 'non-US/main' and 'non-US/libs' -> 'non-US/main'
5737         + 'libs' not 'non-US/libs').
5738         (send_mail): add '-odq' to sendmail invocation to avoid DNS lookup
5739         delays.  This is possibly(/probably) exim speicifc and (like other
5740         sendmail options) needs to be in the config file.
5741
5742 2000-11-24  James Troup  <james@nocrew.org>
5743
5744         * rhona (check_sources): we need file id from dsc_files; not id.
5745         Handle non .dsc source files being re-referenced in dsc_files.
5746
5747         * katie (in_override_p): strip out any 'non-US' prefix.
5748         (check_files): use utils.where_am_i() rather than hardcoding.
5749         (check_files): validate the component.
5750         (install): use utils.where_am_i() rather than hardcoding.
5751         (install): fix mail to go to actual recepient.
5752         (reject): likewise.
5753         (manual_reject): likewise.
5754         (acknowledge_new): likewise.
5755         (announce): likewise.
5756
5757         * db_access.py (get_component_id): ignore case when searching for
5758         the component and don't crash if the component can't be found, but
5759         return -1.
5760         (get_location_id): handle -1 from get_component_id().
5761
5762         * jenna (generate_src_list): don't bring 'suite' into our big
5763         multi-table-joining select as we already know the 'suite_id'.
5764         (generate_bin_list): likewise.
5765
5766         * neve (main): don't quit if not on ftp-master.
5767         (process_packages): remove unused variable 'suite_codename'.
5768
5769         * utils.py (move): actually move the file.
5770         (build_file_list): handle non-US prefixes in the section.
5771
5772         * catherine (main): use which_conf_file().
5773         * charisma (main): likewise.
5774         * heidi (main): likewise.
5775         * jenna (main): likewise.
5776         * katie (main): likewise.
5777         * neve (main): likewise.
5778         * rhona (main): likewise.
5779
5780         * utils.py (where_am_i): new routine; determines the archive as
5781         understood by other 'dak' programs.
5782         (which_conf_file): new routine; determines the conf file to read.
5783
5784 2000-11-17  James Troup  <james@nocrew.org>
5785
5786         * katie (install): fix where .changes files for proposed-updates
5787         go.
5788
5789 2000-11-04  James Troup  <james@nocrew.org>
5790
5791         * jenna (main): handle architecture properly if no
5792         -a/--architecture argument is given, i.e. reset architecture with
5793         the values for the suite for each suite.
5794
5795         * Add apt_pkg.init() to the start of all scripts as it's now
5796         required by python-apt.
5797
5798 2000-10-29  James Troup  <james@nocrew.org>
5799
5800         * jenna (generate_bin_list): take an additional argument 'type'
5801         and use it in the SELECT.
5802         (main): if processing component 'main', process udebs and debs.
5803
5804         * neve (process_packages): set up 'type' in 'binaries' (by
5805         assuming .deb).
5806
5807         * katie (re_isadeb): accept ".udeb" or ".deb" as a file ending.
5808         (check_files): set up files[file]["dbtype"].
5809         (install): use files[file]["dbtype"] to set up the 'type' field in
5810         the 'binaries' table.
5811
5812         * init_pool.sql: add a 'type' field to the 'binaries' table to
5813         distinguisgh between ".udeb" and ".deb" files.
5814
5815         * utils.py (move): scrap basename() usage; use a "dir_p(dest) :
5816         dest ? dirname(dest)" type check instead.
5817
5818         * katie (check_dsc): handle the case of an .orig.tar.gz not found
5819         in the pool without crashing.  Also handle the case of being asked
5820         to look for something other than an .orig.tar.gz in the pool.
5821
5822 2000-10-26  James Troup  <james@nocrew.org>
5823
5824         * katie (install): fix filenames put into files table during
5825         poolification of legacy source.
5826
5827         * utils.py (move): work around a bug in os.path.basename() which
5828         cunningly returns '' if there is a trailing slash on the path
5829         passed to it.
5830
5831         * katie (check_dsc): Remove more cruft.  If we find the
5832         .orig.tar.gz in the pool and it's in a legacy (or legacy-mixed)
5833         location, make a note of that so we can fix things in install().
5834         (install): as above.  Move any old source out of legacy locations
5835         so that 'apt-get source' will work.
5836         (process_it): reset the flag that indicates to install that the
5837         source needs moved.
5838
5839         * cron.daily: more.  Nowhere near complete yet though.
5840
5841         * katie (install): don't run os.makedirs, a) utils.move() does
5842         this now, b) we weren't removing the user's umask and were
5843         creating dirs with SNAFU permissions.
5844         (check_dsc): rewrite the .orig.tar.gz handling to take into
5845         account, err, package pools.  i.e. look anywhere in the pool
5846         rather than faffing around with two simple paths.
5847
5848         * neve (process_sources): add the .dsc to dsc_files too.
5849
5850 2000-10-25  James Troup  <james@nocrew.org>
5851
5852         * neve (process_sources): don't duplicate .orig.tar.gz's.
5853
5854 2000-10-23  James Troup  <james@nocrew.org>
5855
5856         * utils.py (re_extract_src_version): moved here.
5857
5858         * neve: move re_extract_src_version to utils.
5859         (process_packages): reflect change.
5860
5861         * katie (install): reflect change.
5862
5863 2000-10-19  James Troup  <james@nocrew.org>
5864
5865         * jenna (generate_src_list): handle locations with null
5866         components.
5867         (generate_bin_list): likewise.
5868