Merge commit 'godog/master' into merge

* commit 'godog/master':
  drop email.Parser import
  move to tools/
  use different pubDate if going in or out
  use python-debian for .changes parsing
  again, trailing whitespaces removed
  catch and output file write errors
  print help on non-existant dirs
  insert new items on top of feeds and purge them from the bottom
  add datadir option
  trailing whitespaces corrected
  first import

Signed-off-by: Joerg Jaspert <joerg@debian.org>

drop email.Parser import

move to tools/

use different pubDate if going in or out

use python-debian for .changes parsing

Merge commit 'pkern/cross-suite-fix' into merge

* commit 'pkern/cross-suite-fix':
  do not reject binary-only uploads that fail the "must be newer than" criterion

Signed-off-by: Joerg Jaspert <joerg@debian.org>

do not reject binary-only uploads that fail the "must be newer than" criterion

2008-12-09  Philipp Kern  <pkern@debian.org>

        * daklib/queue.py (cross_suite_version_check): add an additional
        parameter to specify if an upload is sourceful or not; do not reject
        uploads that do not satisfy the "must be newer than" criteria and
        are binary-only
        * daklib/queue.py (check_source_against_db, check_binary_against_db):
        invoke cross_suite_version_check as above

Add names to the various timestamps

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Typo fix

Signed-off-by: Frank Lichtenheld <djpig@debian.org>
Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge commit 'pkern/new-reject-fix' into merge

* commit 'pkern/new-reject-fix':
  dak/process_new.py (recheck): call reject with empty prefixes

Signed-off-by: Joerg Jaspert <joerg@debian.org>

dak/process_new.py (recheck): call reject with empty prefixes

2008-12-04  Philipp Kern  <pkern@debian.org>

        * dak/process_new.py (recheck): call reject for
        Upload.check_{binary,source}_against_db with an empty prefix to not
        reject on warnings

Signed-off-by: Philipp Kern <pkern@debian.org>

Merge commit 'pkern/spu-perms-fix' into merge

* commit 'pkern/spu-perms-fix':
  make files moved to {o,}p-u-new world-readable

Signed-off-by: Joerg Jaspert <joerg@debian.org>

make files moved to {o,}p-u-new world-readable

2008-11-30  Philipp Kern  <pkern@debian.org>

        * dak/process_unchecked.py (do_stableupdate, do_oldstableupdate):
        move files to NEW for {old,}stable-proposed-updates world-readable
        (Closes: #368056)

again, trailing whitespaces removed

catch and output file write errors

print help on non-existant dirs

insert new items on top of feeds and purge them from the bottom

lenny-p-u
byebye symlink_dists.py

Signed-off-by: Joerg Jaspert <joerg@debian.org>

add datadir option

trailing whitespaces corrected

first import

experimental

content files

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Make cross_suite_version_checks functional.
OLD bug.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge commit 'mhy/securityqueue' into merge

* commit 'mhy/securityqueue':
  changelog for .changes change
  don't try and delete already moved changes files

Signed-off-by: Joerg Jaspert <joerg@debian.org>

changelog for .changes change

Signed-off-by: Mark Hymers <mhy@debian.org>

don't try and delete already moved changes files

Signed-off-by: Mark Hymers <mhy@debian.org>

Generate a d-i info file

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge commit 'mhy/securityqueue' into merge

* commit 'mhy/securityqueue':
  dak/new_security_install.py: Attempt to tidy up the buildd queue.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

dak/new_security_install.py: Attempt to tidy up the buildd queue.

The buildd team believes that the fact that the packages are in the security
pool after this point should be good enough.

Signed-off-by: Mark Hymers <mhy@debian.org>

security

hopefully enable useful mails again

Signed-off-by: Joerg Jaspert <joerg@debian.org>

binary-upload-restrictions removed

unused code. thanks to gr...

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Unzip the files, but keep the originals for rsync to not needlessly retransfer unchanged ones

Signed-off-by: Joerg Jaspert <joerg@debian.org>

byebye old sarge and also m68k

Signed-off-by: Joerg Jaspert <joerg@debian.org>

byebye m68k

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Use zcat and only uncompress the files we need. also makes it better for rsync, as we dont remove all the input for it every time we just transferred it all again...

Signed-off-by: Joerg Jaspert <joerg@debian.org>

use the right rsync options to clean up and stuff.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

suite overrides

remove the case - we already checked if we know the suite we work on.
We also have the exact same command for all 3 suites, so why case anyway?

Signed-off-by: Joerg Jaspert <joerg@debian.org>

And another sarge gone

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Remove dead and useless code, that had NEVER been reachable

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Fixup the indentation tab mess

Signed-off-by: Joerg Jaspert <joerg@debian.org>

mkfilesindices

put the arch all debs into every architecture indice, not in the source indices...

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Really fix the armel reject mess. I hope. Well. I pray. Maybe it works. Could be possible. Hope

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Add valid-until fields on security

Signed-off-by: Joerg Jaspert <joerg@debian.org>

change buildd user to wbadm

Signed-off-by: Joerg Jaspert <joerg@debian.org>

security

remove security-install

Signed-off-by: Joerg Jaspert <joerg@debian.org>

security

change it to use a local queued for uploads to ftpmaster.
long term wish from security team to get rid of the old and unreliable
direct ftp.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

mkfilesindices

and it appears this braindead implementation prefers having codenames
instead of testing/unstable. how "future-proof".

Signed-off-by: Joerg Jaspert <joerg@debian.org>

fix

ha, main/i18n/ should be there, that helps

Signed-off-by: Joerg Jaspert <joerg@debian.org>

typical

the useless typical doesnt know about i18n...

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge commit 'tomv_w/master' into merge

* commit 'tomv_w/master':
  show-deferred: handle uploads that do not close bugs

Signed-off-by: Joerg Jaspert <joerg@debian.org>

show-deferred: handle uploads that do not close bugs

Signed-off-by: Thomas Viehmann <tv@beamnet.de>

Merge branch 'master' into security

* master:
  dak.conf
  unchecked
  Create tracefile according to new format

Oldstable byebye

Signed-off-by: Joerg Jaspert <joerg@debian.org>

dak.conf

byeby oldstable

Signed-off-by: Joerg Jaspert <joerg@debian.org>

unchecked

ignore ssh errors with rietz AKA bugs, but warn if they are there for more than three days.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Create tracefile according to new format

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'master' into security

* master:
  new-security-install

new-security-install

add a -H to the archvsync sudo call

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'master' into security

* master:
  defaultsuite stuff

defaultsuite stuff

check upload_suite and not only default_suite.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'master' into security

* master: (182 commits)
  Remove / Deactivate oldstable
  ignore EPERM as a result of the chmod of a .dak file
  EVIL SINGLE TAB CHARACTER IN LAST COMMIT EMERGENCY FIX
  changelog
  bug #
  produce changes without signature, fix delay calculation also for status
  add machine-readable status
  show_deferred
  config for show-deferred
  whitespace sanitizing
  move config to config
  message massage
  logfiles
  move show-deferred to dak
  move show-deferred to dak
  implement public access to deferred
  fix remaining days, some style
  spaces in uploader names
  validtime
  Valid-Until
  ...

Remove / Deactivate oldstable

Signed-off-by: Joerg Jaspert <joerg@debian.org>

ignore EPERM as a result of the chmod of a .dak file

2008-10-21  Philipp Kern  <pkern@debian.org>

        * daklib/queue.py: reintroduce James' check for EPERM after
          the chmod'ing of dak files and ignore it; just fubar if the file is
          world writable, which should really never happen

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge commit 'tomv_w/master' into merge

* commit 'tomv_w/master':
  EVIL SINGLE TAB CHARACTER IN LAST COMMIT EMERGENCY FIX
  changelog
  bug #
  produce changes without signature, fix delay calculation also for status

Signed-off-by: Joerg Jaspert <joerg@debian.org>

EVIL SINGLE TAB CHARACTER IN LAST COMMIT EMERGENCY FIX

Signed-off-by: Thomas Viehmann <tv@beamnet.de>

changelog

Signed-off-by: Thomas Viehmann <tv@beamnet.de>

bug #

produce changes without signature, fix delay calculation also for status

Signed-off-by: Thomas Viehmann <tv@beamnet.de>

Merge commit 'tomv_w/master' into merge

* commit 'tomv_w/master':
  add machine-readable status

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'master' of /org/ftp.debian.org/dak/

Signed-off-by: Thomas Viehmann <tv@beamnet.de>

add machine-readable status

Signed-off-by: Thomas Viehmann <tv@beamnet.de>

show_deferred

remove debug output

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge commit 'tomv_w/master' into merge

* commit 'tomv_w/master':
  config for show-deferred
  whitespace sanitizing

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'master' of /org/ftp.debian.org/dak//

config for show-deferred

whitespace sanitizing

Merge commit 'tomv_w/master' into merge

* commit 'tomv_w/master':
  move config to config
  message massage
  move show-deferred to dak
  move show-deferred to dak
  implement public access to deferred
  fix remaining days, some style

Signed-off-by: Joerg Jaspert <joerg@debian.org>

move config to config

Merge branch 'master' of /org/ftp.debian.org/dak//

message massage

logfiles

only keep 60 days of cron logfiles on disc

Signed-off-by: Joerg Jaspert <joerg@debian.org>

move show-deferred to dak

move show-deferred to dak

implement public access to deferred

fix remaining days, some style

Merge commit 'tomv_w/master' into merge

* commit 'tomv_w/master':
  spaces in uploader names

Signed-off-by: Joerg Jaspert <joerg@debian.org>

spaces in uploader names

Signed-off-by: Thomas Viehmann <tv@beamnet.de>

Merge commit 'sec-merge' into security

* commit 'sec-merge':
  cater for uid_email None in sponsor notification
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge commit 'sec-merge' into security

* commit 'sec-merge':
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Tell bzr that dak.py should be executable
  Use "import daklib.foo as foo" style
  Use "import daklib.foo as foo" style
  Cleanup

Merge commit 'sec-merge' into security

* commit 'sec-merge': (29 commits)
  Cleanup
  Cleanup
  Cleanup in check_archives
  pychecker cleanup
  "Fake" a changelog entry for Mark
  Do not allow o-p-u-new to break dinstall
  WTF? rm -f ? WTF?
  Revert examine_package.py, which was broken
  clean up pychecker warnings
  clean up pychecker warnings
  clean up pychecker warnings
  clean up pychecker warnings
  clean up pychecker warnings
  clean up pychecker warnings
  clean up pychecker warnings
  clean up pychecker warnings
  clean up pychecker warnings
  clean up pychecker warnings
  clean up pychecker warnings
  fix the simpler of the pychecker errors
  ...

Signed-off-by: Joerg Jaspert <joerg@debian.org>

+x

mark it executable...

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Template

Commit the template change done by security team some time ago.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

cater for uid_email None in sponsor notification(cherry picked from commit 0d765d5cbf58ca3d9d7621d9fc9e6cc6dc94f244)

Signed-off-by: Joerg Jaspert <joerg@debian.org>
Signed-off-by: Thomas Viehmann <tv@beamnet.de>

WTF? rm -f ? WTF?(cherry picked from commit d7bdf461c9c5cdc1d5502917f5b306237f65ed83)

Signed-off-by: Joerg Jaspert <joerg@debian.org>
Signed-off-by: Joerg Jaspert <joerg@debian.org>

validtime

actually make this configurable and set it to 7 days for those suites
that regularly change. dont touch any older than stable-proposed-updates.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Valid-Until

Add a Valid-Until "header" to the generated Release files.
Meaning "$receiver shouldn't trust this files after that date".
Should be used by apt and similar tools to detect some kind of MITM attacks,
see #499897 for more information.
Currently set to "7 days from now".

Signed-off-by: Joerg Jaspert <joerg@debian.org>

No more ftp debug

Signed-off-by: Joerg Jaspert <joerg@debian.org>

md5sum check, passive mode

Only check md5sums after transfering stuff to the target if we are
configured to do this. We can't do this via ftp, as the files on
ftp.upload.debian.org aren't readable for us (vsftpd runs as a user
not allowed to read them).

Also, no need to check them - if the files are really broken then the
next queued will detect that and mail the maintainer anyways. So it
wont get broken files near the archive.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Use perltidy on debianqueued

Use perltidy -i=2 -syn -lp -csc -cscw -ce -l=78 -cti=1  -b debianqueued

Signed-off-by: Joerg Jaspert <joerg@debian.org>

md5sum check option

Signed-off-by: Joerg Jaspert <joerg@debian.org>