]> git.decadent.org.uk Git - dak.git/blob - TODO
sync
[dak.git] / TODO
1                                  TODO
2                                  ====
3
4 [NB: I use this as a thought record/scribble, not everything on here
5      makes sense and/or is actually ever going to get done, so IIWY I
6      wouldn't use it as gospel for the future of katie or as a TODO
7      list for random hacking.]
8
9 ================================================================================
10
11 queue/approved
12 --------------
13
14  o What to do with multi-suite uploads?  Presumably hold in unapproved
15    and warn?  Or what?  Can't accept just for unstable or reject just
16    from stable.
17
18  o Whenever we check for anything in accepted we also need to check in
19    unapproved.
20
21  o non-sourceful uploads should go straight through if they have
22    source in accepted or the archive.
23
24  o security uploads on auric should be pre-approved.
25
26
27 Others
28 ------
29
30   o the lockfile (Archive_Maintenance_In_Progress) should probably be in a conf file
31
32   o madison should cross-check the b.source field and if it's not null
33   and s.name linked from it != the source given in
34   -S/--source-and-binary ignore.
35
36   o lauren sucks; she should a) only spam d-i for sourceful
37   rejections, b) sort stuff so she rejects sourceful stuff first.  the
38   non-sourceful should probably get a form mail, c) automate the
39   non-sourceful stuff (see b).
40
41   o jennifer should do q-d stuff for faster AA [ryan]
42
43   o split the morgue into source and binary so binaries can be purged first!
44
45   o per-architecture priorities for things like different arch'es
46     gcc's, silly BSD libftw, palo, etc.
47
48   o use postgres 7.2's built-in stat features to figure out how indices are used etc.
49
50   o neve shouldn't be using location, she should run down suites instead
51
52   o halle needs to know about udebs
53
54   o by default hamstring katie's mail sending so that she won't send
55     anything until someone edits a script; she's been used far too
56     much to send spam atm :(
57
58   o $ftpdir/indices isn't created by rose because it's not in katie.conf
59
60   o sanity check depends/recommends/suggests too?  in fact for any
61     empty field?
62
63 [minor] kelly's copychanges, copykatie handling sucks, the per-suite
64         thing is static for all packages, so work out in advance dummy.
65
66 [madison] # filenames ?
67 [madison] # maintainer, component, install date (source only?), fingerprint?
68
69   o UrgencyLog stuff should minimize it's bombing out(?)
70   o Log stuff should open the log file
71
72   o [melanie] bomb out if a) no '[rene]' in the -m/--message, and b)
73     no other -d/--done or -C/--carbon-copy
74
75   o helena should footnote the actual notes, and also * the versions
76     with notes so we can see new versions since being noted...
77
78   o helena should have alternative sorting options, including reverse
79     and without or without differentiaion.
80
81   o julia should sync debadmin and ftpmaster (?)
82
83   o <drow> Can't read file.:
84   /org/security.debian.org/queue/accepted/accepted/apache-perl_1.3.9-14.1-1.21.20000309-1_sparc.katie.
85   You assume that the filenames are relative to accepted/, might want
86   to doc or fix that.
87
88   o <neuro> the orig was in NEW, the changes that caused it to be NEW
89     were pulled out in -2, and we end up with no orig in the archive
90     :(
91
92   o SecurityAcceptedAutoBuild doesn't handle the case of foo_3.3woody1
93     with a new .orig.tar.gz followed by a foo_3.3potato1 with the same
94     .orig.tar.gz; jennifer sees it and copes, but the AA code doesn't
95     and can't really easily know so the potato AA dir is left with no
96     .orig.tar.gz copy.  doh.
97
98   o orig.tar.gz in accepted not handled properly (?)
99
100   o amber doesn't include .orig.tar.gz but it should
101
102   o permissions (paranoia, group write, etc.) configurability and overhaul
103
104   o remember duplicate copyrights in lisaand skip them, per package
105
106   o <M>ove option for lisa byhand proecessing
107
108   o rene could do with overrides
109
110   o db_access.get_location_id should handle the lack of archive_id properly
111
112   o the whole versioncmp thing should be documented
113
114   o lisa doesn't do the right thing with -2 and -1 uploads, as you can
115     end up with the .orig.tar.gz not in the pool
116
117   o lisa exits if you check twice (aj)
118
119   o lisa doesn't trap signals from fernanda properly
120
121   o queued and/or perl on sparc stable sucks - reimplement it.
122
123   o aj's bin nmu changes
124
125   o Lisa:
126     * priority >> optional
127     * arch != {any,all}
128     * build-depends wrong (via andrea)
129     * suid
130     * conficlits
131     * notification/stats to admin daily
132     o trap fernanda exiting
133     o distinguish binary only versus others (neuro)
134
135   o cache changes parsed from ordering (careful tho: would be caching
136     .changes from world writable incoming, not holding)
137
138   o katie doesn't recognise binonlyNMUs correctly in terms of telling
139     who their source is; source-must-exist does, but the info is not
140     propogated down.
141
142   o Fix BTS vs. katie sync issues by queueing(via BSMTP) BTS mail so
143     that it can be released on deman (e.g. ETRN to exim).
144
145   o maintainers file needs overrides
146
147     [ change override.maintainer to override.maintainer-from +
148       override.maintainer-to and have them reference the maintainers
149       table.  Then fix charisma to use them and write some scripting
150       to handle the Santiago situation. ]
151
152   o Validate Depends (et al.) [it should match  \(\s*(<<|<|<=|=|>=|>|>>)\s*<VERSIONREGEXP>\)]
153
154   o Clean up DONE; archive to tar file every 2 weeks, update tar tvzf INDEX file.
155
156   o testing-updates suite: if binary-only and version << version in
157     unstable and source-ver ~= source-ver in testing; then map
158     unstable -> testing-updates ?
159
160   o hooks or configurability for debian specific checks (e.g. check_urgency, auto-building support)
161
162   o morgue needs auto-cleaning (?)
163
164   o saffron: two modes, all included, seperate
165   o saffron: add non-US
166   o saffron: add ability to control components, architectures, archives, suites
167   o saffron: add key to expand header
168
169 ================================================================================
170
171 Less Urgent
172 -----------
173
174   o Accept "," as a seperator in -a, -s etc. args
175
176   o change utils.copy to try rename() first
177
178   o [hard, long term] unchecked -> accepted should go into the db, not
179     a suite, but similar.  this would allow katie to get even faster,
180     make madison more useful, decomplexify specialacceptedautobuild
181     and generally be more sane.  may even be helpful to have e.g. new
182     in the DB, so that we avoid corner cases like the .orig.tar.gz
183     disappearing 'cos the package has been entirely removed but was
184     still on stayofexecution when it entered new.
185
186   o Logging [mostly done] (todo: rhona (hard), .. ?)
187
188   o jennifer: the tar extractor class doesn't need to be redone for each package
189
190   o reverse of source-must-exist; i.e. binary-for-source-must-not-exist
191   o REJECT reminders in shania.
192   o fernanda should check for conflicts and warn about them visavis priority [rmurray]
193   o store a list of removed/files versions; also compare against them.
194     [but be careful about scalability]
195
196   o fernanda: print_copyright should be a lot more intelligent
197      @ handle copyright.gz
198      @ handle copyright.ja and copyright
199      @ handle (detect at least) symlinks to another package's doc directory
200      @ handle and/or fall back on source files (?)
201
202   o To incorporate from utils:
203      @ unreject
204
205   o auto-purge out-of-date stuff from non-free/contrib so that testing and stuff works
206   o doogie's binary -> source index
207   o jt's web stuff, matt's changelog stuff (overlap)
208
209   o [Hard] Need to merge non-non-US and non-US DBs.
210
211   o experimental needs to auto clean (relative to unstable) [partial: rene warns about this]
212
213   o Do a checkpc(1)-a-like which sanitizes a config files.
214   o fix parse_changes()/build_file_list() to sanity check filenames
215   o saftey check and/or rename debs so they match what they should be
216
217   o Improve andrea.
218   o Need to optimize all the queries by using EXAMINE and building some INDEXs.
219     [postgresql 7.2 will help here]
220   o Need to enclose all the setting SQL stuff in transactions (mostly done).
221   o Need to finish alyson (a way to sync katie.conf and the DB)
222   o Need the ability to rebuild all other tables from dists _or_ pools (in the event of disaster) (?)
223   o Make the --help and --version options do stuff for all scripts
224
225   o charisma can't handle whitespace-only lines (for the moment, this is feature)
226
227   o generic way of saying isabinary and isadsc. (?)
228
229   o s/distribution/suite/g
230
231   o cron.weekly:
232      @ weekly postins to d-c (?)
233      @ backup of report (?)
234      @ backup of changes.tgz (?)
235
236   o --help doesn't work without /etc/katie/katie.conf (or similar) at
237     least existing.
238
239   o rename andrea (clashes with existing andrea)...
240
241  * Harder:
242
243     o interrupting of stracing jennifer causes exceptions errors from apt_inst calls
244     o dependency checking (esp. stable) (partially done)
245     o override checks sucks; it needs to track changes made by the
246       maintainer and pass them onto ftpmaster instead of warning the
247       maintainer.
248     o need to do proper rfc822 escaping of from lines (as opposed to s/\.//g)
249     o Revisit linking of binary->source in install() in katie.
250     o Fix component handling in overrides (aj)
251     o Fix lack of entires in source overrides (aj)
252     o direport misreports things as section 'devel' (? we don't use direport)
253     o vrfy check of every Maintainer+Changed-By address; valid for 3 months.
254     o binary-all should be done on a per-source, per-architecture package
255       basis to avoid, e.g. the perl-modules problem.
256     o a source-missing-diff check: if the version has a - in it, and it
257       is sourceful, it needs orig and diff, e.g. if someone uploads
258       esound_0.2.22-6, and it is sourceful, and there is no diff ->
259       REJECT (version has a dash, therefore not debian native.)
260     o check linking of .tar.gz's to .dsc's.. see proftpd 1.2.1 as an example
261     o archive needs md5sum'ed regularly, but takes too long to do all
262       in one go; make progressive or weekly.
263     o katie/jenna/rhona/whatever needs to clear out .changes
264       files from p-u when removing stuff superseded by newer versions.
265       [but for now we have halle]
266     o test sig checking stuff in test/ (stupid thing is not modularized due to global abuse)
267     o when encountering suspicous things (e.g. file tainting) do something more drastic
268
269  * Easy:
270
271     o suite mapping and component mapping are parsed per changes file,
272       they should probably be stored in a dictionary created at startup.
273     o don't stat/md5sum files you have entries for in the DB, moron
274       boy (Katie.check_source_blah_blah)
275     o promote changes["changes"] to mandatory in katie.py(dump_vars)
276       after a month or so (or all .katie files contain in the queue
277       contain it).
278     o melanie should behave better with -a and without -b; see
279       gcc-defaults removal for an example.
280     o Reject on misconfigured kernel-package uploads
281     o utils.extract_component_from_section: main/utils -> main/utils, main rather than utils, main
282     o Fix jennier to warn if run when not in incoming or p-u
283     o katie should validate multi-suite uploads; only possible valid one
284       is "stable unstable"
285     o cron.daily* should change umask (aj sucks)
286     o Rene doesn't look at debian-installer but should.
287     o Rene needs to check for binary-less source packages.
288     o Rene could accept a suite argument (?)
289     o byhand stuff should send notification
290     o catherine should udpate db; move files, not the other way around [neuro]
291     o melanie should update the stable changelog [joey]
292     o update tagdb.dia
293
294  * Bizzare/uncertain:
295
296     o drop rather dubious currval stuff (?)
297     o rationalize os.path.join() usage
298     o Rene also doesn't seem to warn about missing binary packages (??)
299     o logging: hostname + pid ?
300     o ANAIS should be done in katie (?)
301     o Add an 'add' ability to melanie (? separate prog maybe)
302     o Replicate old dinstall report stuff (? needed ?)
303     o Handle the case of 1:1.1 which would overwrite 1.1 (?)
304     o maybe drop -r/--regex in madison, make it the default and
305       implement -e/--exact (a la joey's "elmo")
306     o dsc files are not checked for existence/perms (only an issue if
307       they're in the .dsc, but not the .changes.. possible?)
308
309  * Cleanups & misc:
310
311     o db_access' get_files needs to use exceptions not this None, > 0, < 0 return val BS (?)
312     o The untouchable flag doesn't stop new packages being added to ``untouchable'' suites
313
314 ================================================================================
315
316 Packaging
317 ---------
318
319   o Fix stuff to look in sensible places for libs and config file in debian package (?)
320
321 ================================================================================
322
323            --help      manpage
324 -----------------------------------------------------------------------------
325 alyson        X
326 amber         X
327 andrea        X
328 ashley        X
329 catherine     X          X
330 charisma      X          X
331 cindy         X          X
332 claire        X
333 denise        X
334 fernanda      X
335 halle         X
336 heidi         X          X
337 helena        X
338 jenna         X
339 jennifer      X
340 jeri          X
341 julia         X          X
342 kelly         X          X
343 lisa          X          X
344 madison       X          X
345 melanie       X          X
346 natalie       X          X
347 neve          X
348 rene          X
349 rose          X
350 rhona         X          X
351 saffron       X
352 shania        X
353 tea           X
354 ziyi          X