Merge branch 'dbtests'

Fix NFU check in cruft-report.

- Fix default wanna build dump location.
- Fix output of dak rm command.
- Add NFU check to daily mode.

Signed-off-by: Torsten Werner <twerner@debian.org>

debianqueued

take out the accidently merged addr override inside debianqueued.
Thats what the overridemail setting in the config is for.
Also point that to team@security, not us anymore, we dont care, its
their uploads.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

w-b-dump/nfu

make the get-w-b-db script work again and move its call to cron.daily

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'dbtests' into merge

* Improve file headers in threadpool.py and cruft.py.
* Fix typo in PoolFile.is_valid().
* Add location_id to return value of str(somelocation).

Signed-off-by: Torsten Werner <twerner@debian.org>

Improve file headers in threadpool.py and cruft.py.

Signed-off-by: Torsten Werner <twerner@debian.org>

Fix typo in PoolFile.is_valid().

Signed-off-by: Torsten Werner <twerner@debian.org>

Add location_id to return value of str(somelocation).

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'dbtests' into merge

* Refactor do_newer_version() in cruft_report.py and add a test.

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'master' into dbtests

Extend the testcase for check_poolfile().

Signed-off-by: Torsten Werner <twerner@debian.org>

fix is_valid of PoolFile to compare a long with a long, not a str

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Refactor do_newer_version() in cruft_report.py.

+ Add a test.

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'dbtests' into merge

* Remove function get_binary_components().
* Test and refactor get_component_by_package_suite().
* Convert class Component to ORMObject.
* Drop class BinAssociation.
* Create, test, and refactor get_suite_version_by_package().
* Create, test, and refactor get_source_by_package_and_suite().
* Remove unused function get_binaries_from_source_id().
* Remove unused function get_binaries_from_name().
* Remove unused function get_binary_from_id().
* Test and refactor function add_deb_to_db().
* Refactor and test class DBBinary.

Signed-off-by: Torsten Werner <twerner@debian.org>

Remove function get_binary_components().

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'master' into dbtests

Extend test_get_component_by_package_suite() even more.

Signed-off-by: Torsten Werner <twerner@debian.org>

Improve get_component_by_package_suite().

- Return component name of newest package.
- Add docstring.
- Test for returning newest package.

Signed-off-by: Torsten Werner <twerner@debian.org>

Test and refactor get_component_by_package_suite().

Signed-off-by: Torsten Werner <twerner@debian.org>

Revert "Add functions to colourize RC bug fixing packages differently"

This reverts commit 5c7286abf3ff316a802de2b41d246a07f6b04257.

Accidently merged and it makes queue-report hang forever currently, so gone
for now.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'odyx/win32-loader-autobyhand' into merge

* odyx/win32-loader-autobyhand:
  Remove version and arch from all win32-loader byhand files.
  Chmod the win32-loader byhand files to 0644

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'master' into merge

* master: (25 commits)
  Change base class of Uid to ORMObject.
  Add the ORMObject.get() class method.
  Extend ORMObject.validate() to support _id columns.
  Make validation of DBSource less strong.
  Simplify validation of not NULL constraints.
  ValidatorTestCase: test before_update, too.
  Add PoolFile.validate().
  Add classes Validator and ValidatorTestCase.
  Fix documentation.
  JSON: support python 2.5, too.
  Add new class ORMObject and ORMObjectTestCase.
  Refactor the fixture setup in PackageTestCase.
  Improve queries in dbconn.py using with_parent().
  Drop class SrcAssociation.
  Create, test, and improve get_suite_version().
  Create, test, and improve get_newest_source().
  Test and improve package_to_suite().
  Test and Improve source_exists().
  Remove some useless session.flush() calls.
  Test suite_name in test_upload()
  ...

Convert class Component to ORMObject.

Signed-off-by: Torsten Werner <twerner@debian.org>

Drop class BinAssociation.

Signed-off-by: Torsten Werner <twerner@debian.org>

Create, test, and refactor get_suite_version_by_package().

Signed-off-by: Torsten Werner <twerner@debian.org>

Create, test, and refactor get_source_by_package_and_suite().

Signed-off-by: Torsten Werner <twerner@debian.org>

Remove version and arch from all win32-loader byhand files.

Chmod the win32-loader byhand files to 0644

Remove unused function get_binaries_from_source_id().

Signed-off-by: Torsten Werner <twerner@debian.org>

Remove unused function get_binaries_from_name().

Signed-off-by: Torsten Werner <twerner@debian.org>

Remove unused function get_binary_from_id().

It is equivalent to DBBinary.get(binary_id[, session]).

Signed-off-by: Torsten Werner <twerner@debian.org>

Add workaround for SQLAlchemy 0.5.

Signed-off-by: Torsten Werner <twerner@debian.org>

Test and refactor function add_deb_to_db().

Signed-off-by: Torsten Werner <twerner@debian.org>

Refactor and test class DBBinary.

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'dbtests' into merge

* Add the ORMObject.get() class method.
* Simplify validation of not NULL constraints.
* Derive more classes from ORMObject.

Signed-off-by: Torsten Werner <twerner@debian.org>

Change base class of Uid to ORMObject.

Signed-off-by: Torsten Werner <twerner@debian.org>

Add the ORMObject.get() class method.

Signed-off-by: Torsten Werner <twerner@debian.org>

Extend ORMObject.validate() to support _id columns.

It won't throw an exception if the numeric _id property is set instead the real
property.

Signed-off-by: Torsten Werner <twerner@debian.org>

Make validation of DBSource less strong.

Signed-off-by: Torsten Werner <twerner@debian.org>

Simplify validation of not NULL constraints.

And derive more classes from ORMObject.

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'dbtests' into merge

* Add classes Validator and ValidatorTestCase.
* Add new class ORMObject and ORMObjectTestCase.
* Refactor the fixture setup in PackageTestCase.
* Improve queries in dbconn.py using with_parent().
* Drop class SrcAssociation.
* Create, test, and improve get_suite_version().
* Create, test, and improve get_newest_source().
* Test and improve package_to_suite().
* Test and Improve source_exists().
* Remove some useless session.flush() calls.
* Refactor add_dsc_to_db().
* Test function add_dsc_to_db()
* Test and refactor get_suites_source_in().
* Refactor get_source_in_suite().
* Test the DBSource and Suite relation.

Signed-off-by: Torsten Werner <twerner@debian.org>

ValidatorTestCase: test before_update, too.

Signed-off-by: Torsten Werner <twerner@debian.org>

Add PoolFile.validate().

Signed-off-by: Torsten Werner <twerner@debian.org>

Add classes Validator and ValidatorTestCase.

Signed-off-by: Torsten Werner <twerner@debian.org>

Fix documentation.

Signed-off-by: Torsten Werner <twerner@debian.org>

JSON: support python 2.5, too.

The json module is available in version 2.6 but we have simplejson in 2.5.

Signed-off-by: Torsten Werner <twerner@debian.org>

Add new class ORMObject and ORMObjectTestCase.

Signed-off-by: Torsten Werner <twerner@debian.org>

Refactor the fixture setup in PackageTestCase.

The test data gets setup in method setUp() now.

Signed-off-by: Torsten Werner <twerner@debian.org>

Improve queries in dbconn.py using with_parent().

Signed-off-by: Torsten Werner <twerner@debian.org>

Add functions to colourize RC bug fixing packages differently

This commit adds some functions to query the BTS Soap interface to
determine if the package closes an RC bug or not. If it does close an
RC bug, it allows for differently colourizing the package line. It
adds a variable to indicate if a package fixes an RC bug or not, and
already allows for colourization of the HTML output; the new entry can
be used to colourize in other output formats as well.

Signed-off-by: Kumar Appaiah <a.kumar@alumni.iitm.ac.in>

Merge branch 'master' into dbtests

Drop class SrcAssociation.

Signed-off-by: Torsten Werner <twerner@debian.org>

Create, test, and improve get_suite_version().

Signed-off-by: Torsten Werner <twerner@debian.org>

Create, test, and improve get_newest_source().

Signed-off-by: Torsten Werner <twerner@debian.org>

Test and improve package_to_suite().

Signed-off-by: Torsten Werner <twerner@debian.org>

Test and Improve source_exists().

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge remote branch 'drkranz/make-changelog' into merge

* drkranz/make-changelog:
  make-changelog: refactorize code to improve performances

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'master' into dbtests

Remove some useless session.flush() calls.

We are using sqlalchemy's autoflush mode.

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'master' of ssh://franck.debian.org/srv/ftp.debian.org/git/dak

* 'master' of ssh://franck.debian.org/srv/ftp.debian.org/git/dak:
  Simplify DebVersionTestCase.
  Refactor PackageTestCase.test_sources().
  Refactor PackageTestCase.
  Make a bidirectional relation  DBSource - PoolFile.
  Improve test_maintainers().
  Refactor maintainer tests.

Update stable point release readme

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Test suite_name in test_upload()

Signed-off-by: Torsten Werner <twerner@debian.org>

Test function add_dsc_to_db()

Signed-off-by: Torsten Werner <twerner@debian.org>

Refactor add_dsc_to_db().

Signed-off-by: Torsten Werner <twerner@debian.org>

make-changelog: refactorize code to improve performances

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Test and refactor get_suites_source_in().

Signed-off-by: Torsten Werner <twerner@debian.org>

Refactor get_source_in_suite().

Signed-off-by: Torsten Werner <twerner@debian.org>

Test the DBSource and Suite relation.

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'dbtests' of ftp-master.debian.org:public_html/dak into dbtests

Merge branch 'master' into dbtests

Simplify DebVersionTestCase.

Signed-off-by: Torsten Werner <twerner@debian.org>

win32-loader autobyhand

fix dak.conf by closing }; the entry.
use proper set statements
use scriptvars and later on $ftpdir instead of writing full path
drop error() function, only used once.
proper indentation
change target path to build a win32-loader/$SUITE tree so different suites can have different installer for win32
remove unused trap - and call to undefined function cleanup.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

use set statements for options to the shell

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Refactor PackageTestCase.test_sources().

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge remote branch 'odyx/win32-loader-autobyhand' into merge

* odyx/win32-loader-autobyhand:
  Add a win32-loader autobyhand script.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Refactor PackageTestCase.

Signed-off-by: Torsten Werner <twerner@debian.org>

Make a bidirectional relation  DBSource - PoolFile.

Signed-off-by: Torsten Werner <twerner@debian.org>

Improve test_maintainers().

Signed-off-by: Torsten Werner <twerner@debian.org>

Refactor maintainer tests.

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'master' of ssh://ftp-master.debian.org/srv/ftp.debian.org/git/dak

Extend PackageTestCase.

Signed-off-by: Torsten Werner <twerner@debian.org>

Remove function get_poolfile_by_name().

Signed-off-by: Torsten Werner <twerner@debian.org>

Test PoolFile.fullpath.

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'master' of ssh://franck.debian.org/srv/ftp.debian.org/git/dak

* 'master' of ssh://franck.debian.org/srv/ftp.debian.org/git/dak:
  Extend test_poolfiles().
  Add a test for PoolFile and Location.
  Mark Location.archive_type as obsolete.
  Carefully add a backref from PoolFile to Location.
  Add an incomplete test for Maintainer.
  Make relation Maintainer - DBSource bidirectional.
  TimestampTestCase: replace sql string by func.now.
  DBSource: drop property srcassociations.

Ensure symlinks get copied as symlinks, not their contents

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Extend test_poolfiles().

Signed-off-by: Torsten Werner <twerner@debian.org>

Add a test for PoolFile and Location.

Signed-off-by: Torsten Werner <twerner@debian.org>

Mark Location.archive_type as obsolete.

It needs to be removed through a DB upgrade.

Signed-off-by: Torsten Werner <twerner@debian.org>

Carefully add a backref from PoolFile to Location.

Using lazy='dynamic' makes sure that property Location.files is not a very huge
list but a query object that can be iterated or .filter()-ed.

Signed-off-by: Torsten Werner <twerner@debian.org>

Add an incomplete test for Maintainer.

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge branch 'master' into dbtests

Add a win32-loader autobyhand script.

make-changelog: do not move to next element on unpack error

This leads to not correctly remove temporary directory, which
is not available for the next packages to be unpacked.

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

make-changelog: only consider latest sources in suites

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Make relation Maintainer - DBSource bidirectional.

The following is possible now (returns lists of DBSource objects):
- somesrc.maintainer.maintains_sources
- somesrc.changedby.changed_sources

Signed-off-by: Torsten Werner <twerner@debian.org>

TimestampTestCase: replace sql string by func.now.

Signed-off-by: Torsten Werner <twerner@debian.org>

DBSource: drop property srcassociations.

... in favour of new property suites.

Signed-off-by: Torsten Werner <twerner@debian.org>

make-changelog: print dpkg-source output on fail

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Drop 'source' and 'all' from  'dak admin s-a list'.

Signed-off-by: Torsten Werner <twerner@debian.org>

Fix sort order of property Suite.architectures.

Signed-off-by: Torsten Werner <twerner@debian.org>