]> git.decadent.org.uk Git - dak.git/commitdiff
Merge remote branch 'mhy/master' into merge
authorMark Hymers <mhy@debian.org>
Mon, 21 Mar 2011 21:45:43 +0000 (21:45 +0000)
committerMark Hymers <mhy@debian.org>
Mon, 21 Mar 2011 21:45:43 +0000 (21:45 +0000)
Signed-off-by: Mark Hymers <mhy@debian.org>
dak/dakdb/update45.py [new file with mode: 0755]
dak/dakdb/update46.py [new file with mode: 0755]
dak/dakdb/update47.py [new file with mode: 0755]
dak/update_db.py

diff --git a/dak/dakdb/update45.py b/dak/dakdb/update45.py
new file mode 100755 (executable)
index 0000000..32ed04f
--- /dev/null
@@ -0,0 +1,53 @@
+#!/usr/bin/env python
+# coding=utf8
+
+"""
+Add tables for extra_src handling
+
+@contact: Debian FTP Master <ftpmaster@debian.org>
+@copyright: 2011 Mark Hymers <mhy@debian.org>
+@license: GNU General Public License version 2 or later
+"""
+
+# This program is free software; you can redistribute it and/or modify
+# it under the terms of the GNU General Public License as published by
+# the Free Software Foundation; either version 2 of the License, or
+# (at your option) any later version.
+
+# This program is distributed in the hope that it will be useful,
+# but WITHOUT ANY WARRANTY; without even the implied warranty of
+# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
+# GNU General Public License for more details.
+
+# You should have received a copy of the GNU General Public License
+# along with this program; if not, write to the Free Software
+# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
+
+################################################################################
+
+import psycopg2
+from daklib.dak_exceptions import DBUpdateError
+
+################################################################################
+def do_update(self):
+    """
+    Add tables for extra_src handling
+    """
+    print __doc__
+    try:
+        c = self.db.cursor()
+
+        c.execute("""
+CREATE TABLE extra_src_references (
+    bin_id      INT4 NOT NULL REFERENCES binaries(id) ON DELETE CASCADE,
+    src_id      INT4 NOT NULL REFERENCES source(id) ON DELETE RESTRICT,
+
+    PRIMARY KEY (bin_id, src_id)
+)""")
+
+        c.execute("UPDATE config SET value = '45' WHERE name = 'db_revision'")
+        self.db.commit()
+
+    except psycopg2.ProgrammingError, msg:
+        self.db.rollback()
+        raise DBUpdateError, 'Unable to apply update 45, rollback issued. Error message : %s' % (str(msg))
diff --git a/dak/dakdb/update46.py b/dak/dakdb/update46.py
new file mode 100755 (executable)
index 0000000..d1b2d3a
--- /dev/null
@@ -0,0 +1,77 @@
+#!/usr/bin/env python
+# coding=utf8
+
+"""
+Add columns and tables for Packages/Sources work
+
+@contact: Debian FTP Master <ftpmaster@debian.org>
+@copyright: 2011 Mark Hymers <mhy@debian.org>
+@license: GNU General Public License version 2 or later
+"""
+
+# This program is free software; you can redistribute it and/or modify
+# it under the terms of the GNU General Public License as published by
+# the Free Software Foundation; either version 2 of the License, or
+# (at your option) any later version.
+
+# This program is distributed in the hope that it will be useful,
+# but WITHOUT ANY WARRANTY; without even the implied warranty of
+# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
+# GNU General Public License for more details.
+
+# You should have received a copy of the GNU General Public License
+# along with this program; if not, write to the Free Software
+# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
+
+################################################################################
+
+import psycopg2
+from daklib.dak_exceptions import DBUpdateError
+
+################################################################################
+def do_update(self):
+    """
+    Add columns and tables for Packages/Sources work
+    """
+    print __doc__
+    try:
+        c = self.db.cursor()
+
+        c.execute("""ALTER TABLE binaries ADD COLUMN stanza TEXT""")
+        c.execute("""ALTER TABLE source ADD COLUMN stanza TEXT""")
+
+        c.execute("""
+CREATE TABLE metadata_keys (
+    key_id       SERIAL NOT NULL UNIQUE,
+    key          TEXT NOT NULL UNIQUE,
+
+    PRIMARY KEY (key_id)
+)
+""")
+
+        c.execute("""
+CREATE TABLE binaries_metadata (
+    bin_id       INT4 NOT NULL REFERENCES binaries(id) ON DELETE CASCADE,
+    key_id       INT4 NOT NULL REFERENCES metadata_keys(key_id),
+    value        TEXT NOT NULL,
+
+    PRIMARY KEY (bin_id, key_id)
+)
+""")
+
+        c.execute("""
+CREATE TABLE source_metadata (
+    src_id       INT4 NOT NULL REFERENCES source(id) ON DELETE CASCADE,
+    key_id       INT4 NOT NULL REFERENCES metadata_keys(key_id),
+    value        TEXT NOT NULL,
+
+    PRIMARY KEY (src_id, key_id)
+)
+""")
+
+        c.execute("UPDATE config SET value = '46' WHERE name = 'db_revision'")
+        self.db.commit()
+
+    except psycopg2.ProgrammingError, msg:
+        self.db.rollback()
+        raise DBUpdateError, 'Unable to apply update 46, rollback issued. Error message : %s' % (str(msg))
diff --git a/dak/dakdb/update47.py b/dak/dakdb/update47.py
new file mode 100755 (executable)
index 0000000..81d9cd7
--- /dev/null
@@ -0,0 +1,52 @@
+#!/usr/bin/env python
+# coding=utf8
+
+"""
+Add table for source contents.
+
+@contact: Debian FTP Master <ftpmaster@debian.org>
+@copyright: 2011 Torsten Werner <twerner@debian.org>
+@license: GNU General Public License version 2 or later
+"""
+
+# This program is free software; you can redistribute it and/or modify
+# it under the terms of the GNU General Public License as published by
+# the Free Software Foundation; either version 2 of the License, or
+# (at your option) any later version.
+
+# This program is distributed in the hope that it will be useful,
+# but WITHOUT ANY WARRANTY; without even the implied warranty of
+# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
+# GNU General Public License for more details.
+
+# You should have received a copy of the GNU General Public License
+# along with this program; if not, write to the Free Software
+# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
+
+################################################################################
+
+import psycopg2
+from daklib.dak_exceptions import DBUpdateError
+from socket import gethostname;
+
+################################################################################
+def do_update(self):
+    """
+    Add table for source contents.
+    """
+    print __doc__
+    try:
+        c = self.db.cursor()
+
+        c.execute("""
+            CREATE TABLE src_contents (
+                file TEXT,
+                source_id INTEGER REFERENCES source(id) ON DELETE CASCADE,
+                PRIMARY KEY (file, source_id))""")
+
+        c.execute("UPDATE config SET value = '47' WHERE name = 'db_revision'")
+        self.db.commit()
+
+    except psycopg2.ProgrammingError, msg:
+        self.db.rollback()
+        raise DBUpdateError, 'Unable to apply sick update 47, rollback issued. Error message : %s' % (str(msg))
index 540667f1feeb5a801164f05a959411cd6dcf764f..985051ece2951cdb003b3ef86493bca4cdb1a080 100755 (executable)
@@ -41,11 +41,12 @@ import errno
 from daklib import utils
 from daklib.config import Config
 from daklib.dak_exceptions import DBUpdateError
+from daklib.daklog import Logger
 
 ################################################################################
 
 Cnf = None
-required_database_schema = 44
+required_database_schema = 47
 
 ################################################################################
 
@@ -100,12 +101,25 @@ Updates dak's database schema to the lastest version. You should disable crontab
             print "No configuration table found, assuming dak database revision to be pre-zero"
             return -1
 
+################################################################################
+
+    def get_transaction_id(self):
+        '''
+        Returns the current transaction id as a string.
+        '''
+        cursor = self.db.cursor()
+        cursor.execute("SELECT txid_current();")
+        id = cursor.fetchone()[0]
+        cursor.close()
+        return id
+
 ################################################################################
 
     def update_db(self):
         # Ok, try and find the configuration table
         print "Determining dak database revision ..."
         cnf = Config()
+        logger = Logger(cnf.Cnf, 'update-db')
 
         try:
             # Build a connect string
@@ -120,6 +134,7 @@ Updates dak's database schema to the lastest version. You should disable crontab
             pass
 
         database_revision = int(self.get_db_rev())
+        logger.log(['transaction id before update: %s' % self.get_transaction_id()])
 
         if database_revision == -1:
             print "dak database schema predates update-db."
@@ -140,20 +155,26 @@ Updates dak's database schema to the lastest version. You should disable crontab
 
         if database_revision == required_database_schema:
             print "no updates required"
+            logger.log(["no updates required"])
             sys.exit(0)
 
         for i in range (database_revision, required_database_schema):
-            print "updating database schema from %d to %d" % (database_revision, i+1)
             try:
                 dakdb = __import__("dakdb", globals(), locals(), ['update'+str(i+1)])
                 update_module = getattr(dakdb, "update"+str(i+1))
                 update_module.do_update(self)
+                message = "updated database schema from %d to %d" % (database_revision, i+1)
+                print message
+                logger.log([message])
             except DBUpdateError, e:
                 # Seems the update did not work.
                 print "Was unable to update database schema from %d to %d." % (database_revision, i+1)
                 print "The error message received was %s" % (e)
+                logger.log(["DB Schema upgrade failed"])
+                logger.close()
                 utils.fubar("DB Schema upgrade failed")
             database_revision += 1
+        logger.close()
 
 ################################################################################