add a script create_pickle_file.py for updating the metadata

Signed-off-by: Torsten Werner <twerner@debian.org>

add pickle file db-metadata-0.5.2.pkl

Signed-off-by: Torsten Werner <twerner@debian.org>

include sqlalchemy's version in db-metadata-*.pkl

The metadata objects are not compatible between versions and that is why
we need to keep one pickle file per version.

Signed-off-by: Torsten Werner <twerner@debian.org>

dbconn.py: workaround for good old sqlalchemy 0.5

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'master' into dbtests

implement first test with database access

* Implement a new test class: DBDakTestCase in db_test.py.
* First test: dbtest_fingerprint.py is prefixed with dbtest_ instead of
  test_ because we do not have a test database on franck (yet).

Signed-off-by: Torsten Werner <twerner@debian.org>

Remove useless type casts from primary keys.

Signed-off-by: Torsten Werner <twerner@debian.org>

suppress warnings when running tests in squeeze

Signed-off-by: Torsten Werner <twerner@debian.org>

implement first test with database access

* Implement a new test class: DBDakTestCase in db_test.py.
* First test: dbtest_fingerprint.py is prefixed with dbtest_ instead of
  test_ because we do not have a test database on franck (yet).

Signed-off-by: Torsten Werner <twerner@debian.org>

disable warnings in base_test instead of test_all

Signed-off-by: Torsten Werner <twerner@debian.org>

suppress warnings when running tests in squeeze

Signed-off-by: Torsten Werner <twerner@debian.org>

fix paths in test_copy_installer to work on franck

Signed-off-by: Torsten Werner <twerner@debian.org>

add command copy-installer to dak driver

Signed-off-by: Torsten Werner <twerner@debian.org>

copy_installer.py: implement main()

Signed-off-by: Torsten Werner <twerner@debian.org>

create new class InstallerCopier

- will support the now copy-installer command
- includes test code

Signed-off-by: Torsten Werner <twerner@debian.org>

cron.unchecked: improve error message if locking fails

Signed-off-by: Torsten Werner <twerner@debian.org>

increase retry count for locking unchecked.lock

Signed-off-by: Torsten Werner <twerner@debian.org>

fix error handling in add_deb_to_db()

Signed-off-by: Torsten Werner <twerner@debian.org>

improve import of DM keyring

Fall back to first uid that contains an email address if the primary uid
does not.

Signed-off-by: Torsten Werner <twerner@debian.org>

remove useless "aliases" entry in Keyring

Signed-off-by: Torsten Werner <twerner@debian.org>

fix syntax error in show-new

Signed-off-by: Torsten Werner <twerner@debian.org>

show-new: refactor Luca's changes

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge remote branch 'dktrkranz/show-new'

Merge branch 'master' of ssh://ftp-master.debian.org/srv/ftp.debian.org/git/dak

secure show-new by unchecked.log

... to avoid parallel execution of dak

Signed-off-by: Torsten Werner <twerner@debian.org>

show-new: query database only when needed

Instead of querying database once for every single .changes file,
only regenerate html output if not previously available or older.

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

fix lock removal in dinstall

Signed-off-by: Torsten Werner <twerner@debian.org>

wait for background processes at dinstall's end

Signed-off-by: Torsten Werner <twerner@debian.org>

append cron.daily's output to dinstall's logfile

(instead of sending spam)

Signed-off-by: Torsten Werner <twerner@debian.org>

fix exception in 'dak override'

Signed-off-by: Torsten Werner <twerner@debian.org>

make onerror() in dinstall.functions more robust

Signed-off-by: Torsten Werner <twerner@debian.org>

avoid 'unbound variable' error in shell script

Signed-off-by: Torsten Werner <twerner@debian.org>

fix threadpool's joinAll() method

Signed-off-by: Torsten Werner <twerner@debian.org>

add option --no-action to import-keyring

Signed-off-by: Torsten Werner <twerner@debian.org>

add option --list-uids to import-keyring

Signed-off-by: Torsten Werner <twerner@debian.org>

fix arguments for format string

... to avoid exception during import

Signed-off-by: Torsten Werner <twerner@debian.org>

do no longer automatically update UIDs

- ... because we want to have control over the UIDs.

Signed-off-by: Torsten Werner <twerner@debian.org>

use the right var name, stupid

Signed-off-by: Joerg Jaspert <joerg@debian.org>
Signed-off-by: Joerg Jaspert <joerg@debian.org>

security install fun

yes, the mhy is right, its all wrong to go special for security in changesutil. remove the special case.
also, check if we process files in newstage. if thats the case (changes known and its in_queue attribute
tells us the queue its in is newstage) then dont do embargo/disembargo, this is one that got accepted
from there

Signed-off-by: Joerg Jaspert <joerg@debian.org>

new lock dir

Signed-off-by: Joerg Jaspert <joerg@debian.org>

embargo/disembargo build up a symlink farm for our buildds.

Signed-off-by: Joerg Jaspert <joerg@debian.org>
Signed-off-by: Joerg Jaspert <joerg@debian.org>

fixme note

Signed-off-by: Joerg Jaspert <joerg@debian.org>

In case the component name contains a /, replace it with a _. Works much better when using this as part of a filename

Signed-off-by: Joerg Jaspert <joerg@debian.org>

missing the chg parameter

Signed-off-by: Joerg Jaspert <joerg@debian.org>

do is a little different than queue, even if just a tiny bit

Signed-off-by: Joerg Jaspert <joerg@debian.org>

better function names

Signed-off-by: Joerg Jaspert <joerg@debian.org>

security queue handling

reenable the embargo/disembargo handling. we check if the policy_queues
named like it exist, if not we just dont do anything. if they (especially)
embargo exist, we always do it. As embargo is just a kind of catch-all at the
end

Signed-off-by: Joerg Jaspert <joerg@debian.org>
Signed-off-by: Joerg Jaspert <joerg@debian.org>

ignore advisories

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Ask the database for components

Signed-off-by: Joerg Jaspert <joerg@debian.org>

disable a-f

Signed-off-by: Joerg Jaspert <joerg@debian.org>

new path

Signed-off-by: Joerg Jaspert <joerg@debian.org>

clean the debbugs version track archive

Signed-off-by: Joerg Jaspert <joerg@debian.org>

oh yay, we get away without the s-u-p-u, anything will be taken from s-p-u

Signed-off-by: Joerg Jaspert <joerg@debian.org>

db schema 40

Signed-off-by: Joerg Jaspert <joerg@debian.org>

rename volatile to updates

what an insanity. We end up with things like Squeeze-Updates-Proposed-Updates.
Why the heck one cant just make p-u a full suite and recommend people to use that
too? Its after a "NEW" queue anyways. This only serves to needlessly confuse
users. "What? proposed-updates and updates? whats going on?"
Meh. Volatile might be a bad name, but now this is worse.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'drkranz/master' into merge

* drkranz/master:
  process_new.py: show NEW comments as a whole
  Use Changes-file as field name for deferred .changes files

Signed-off-by: Joerg Jaspert <joerg@debian.org>

process_new.py: show NEW comments as a whole

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Use Changes-file as field name for deferred .changes files

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

team not ftpmaster for this stuff

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'drkranz/master' into merge

* drkranz/master:
  process_new.py: s/Binaries/No-Binaries/

Signed-off-by: Joerg Jaspert <joerg@debian.org>

process_new.py: s/Binaries/No-Binaries/

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Ups, \

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Adjust mail address

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'drkranz/master' into merge

* drkranz/master:
  Add an option to reverse sorting of binary-NEW packages
  examine-package: colorize distribution

Signed-off-by: Joerg Jaspert <joerg@debian.org>

l-bpo-sloppy

rin in de kartoffeln, rut ut de kartoffeln....
now they have lenny-bpo-sloppy as an own suite with own overrides.
glad i dont have to do NEW there.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Add an option to reverse sorting of binary-NEW packages

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

examine-package: colorize distribution

Assign a color to Distribution field if it's not unstable
or experimental, to ease detection of those packages
uploaded to an uncommon distribution.

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Use the good mail from only.

we really need a function for the mail stuff from cronjobs

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Add buildd-squeeze-volatile

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Add hourly cronjob

Signed-off-by: Joerg Jaspert <joerg@debian.org>

only nag once a day

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Remove settings given by defaults

Signed-off-by: Joerg Jaspert <joerg@debian.org>

No longer provide uncompressed files on bpo

Signed-off-by: Joerg Jaspert <joerg@debian.org>

right keyring

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Dont fail if file to rm isnt there

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Import os

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'drkranz/master' into merge

* drkranz/master:
  Join cnf.exportpath into a temp variable

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Join cnf.exportpath into a temp variable

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

[Mark] Fix for the _setup_routines()

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'drkranz/master' into merge

* drkranz/master:
  Fix sorting of NEW packages

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Fix sorting of NEW packages

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Merge remote branch 'drkranz/make-changelog' into merge

* drkranz/make-changelog:
  Don't hardcode paths
  Check brit_file value, it can be None
  s/britney_changelog/changelog/
  Restore Changelogs config entry for compatibility purposes
  Update projectb with changelogs config values
  Define Britney changelog file from suite table
  make-changelog: drop useless -T command
  Define changelogs export path into projectb

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Don't hardcode paths

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Check brit_file value, it can be None

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

s/britney_changelog/changelog/

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Restore Changelogs config entry for compatibility purposes

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Update projectb with changelogs config values

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Define Britney changelog file from suite table

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

make-changelog: drop useless -T command

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Define changelogs export path into projectb

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Dont c-o -sloppy

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Add lenny-backports-sloppy

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Tell edit note explicitly about the trainee

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'tolimar/rm-close-bugs' into merge

* tolimar/rm-close-bugs:
  make wnpp file world readable and do so before moving it
  Fix spelling of "IOError" so we indeed don't raise an exception
  Make that file readable by ftpteam

Signed-off-by: Joerg Jaspert <joerg@debian.org>

make wnpp file world readable and do so before moving it

Fix spelling of "IOError" so we indeed don't raise an exception

Make that file readable by ftpteam

set the tmpdir variable

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Rewrite so that it uses mktemp. also let a trap for the cleanup function handle the rm of the tempfile, we save on the whole if then

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'tolimar/rm-close-bugs' into merge

* tolimar/rm-close-bugs:
  Make the wnpp parse more robust for missing files
  Only log, if there is something to log
  Make it the qa wnpp list download more fault tolerant
  Fix comment of cron.daily (copy and paste from cron.monthly)
  Use different mail templates to close removal bugs, if related bugs got closed
  Refresh the wnpp bugs list on a daily basis
  Also close wnpp bugs on package removal

Signed-off-by: Joerg Jaspert <joerg@debian.org>