dak/dak.py

   1 #!/usr/bin/env python
   2
   3 """
   4 Wrapper to launch dak functionality
   5
   6 G{importgraph}
   7
   8 """
   9 # Copyright (C) 2005, 2006 Anthony Towns <ajt@debian.org>
  10 # Copyright (C) 2006 James Troup <james@nocrew.org>
  11
  12 # This program is free software; you can redistribute it and/or modify
  13 # it under the terms of the GNU General Public License as published by
  14 # the Free Software Foundation; either version 2 of the License, or
  15 # (at your option) any later version.
  16
  17 # This program is distributed in the hope that it will be useful,
  18 # but WITHOUT ANY WARRANTY; without even the implied warranty of
  19 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  20 # GNU General Public License for more details.
  21
  22 # You should have received a copy of the GNU General Public License
  23 # along with this program; if not, write to the Free Software
  24 # Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
  25
  26 ################################################################################
  27
  28 # well I don't know where you're from but in AMERICA, there's a little
  29 # thing called "abstinent until proven guilty."
  30 #  -- http://harrietmiers.blogspot.com/2005/10/wow-i-feel-loved.html
  31
  32 # (if James had a blog, I bet I could find a funny quote in it to use!)
  33
  34 ################################################################################
  35
  36 import os
  37 import sys
  38 import traceback
  39 import daklib.utils
  40 import warnings
  41
  42 from daklib.daklog import Logger
  43 from daklib.config import Config
  44 from daklib.dak_exceptions import CantOpenError
  45
  46 ################################################################################
  47
  48 def init():
  49     """Setup the list of modules and brief explanation of what they
  50     do."""
  51
  52     functionality = [
  53         ("ls",
  54          "Show which suites packages are in"),
  55         ("override",
  56          "Query/change the overrides"),
  57         ("check-archive",
  58          "Archive sanity checks"),
  59         ("queue-report",
  60          "Produce a report on NEW and BYHAND packages"),
  61         ("show-new",
  62          "Output html for packages in NEW"),
  63         ("show-deferred",
  64          "Output html and symlinks for packages in DEFERRED"),
  65
  66         ("rm",
  67          "Remove packages from suites"),
  68
  69         ("process-new",
  70          "Process NEW and BYHAND packages"),
  71         ("process-upload",
  72          "Process packages in queue/unchecked"),
  73         ("process-policy",
  74          "Process packages in policy queues from COMMENTS files"),
  75
  76         ("dominate",
  77          "Remove obsolete source and binary associations from suites"),
  78         ("make-pkg-file-mapping",
  79          "Generate package <-> file mapping"),
  80         ("generate-filelist",
  81          "Generate file lists for apt-ftparchive"),
  82         ("generate-releases",
  83          "Generate Release files"),
  84         ("generate-packages-sources",
  85          "Generate Packages/Sources files"),
  86         ("contents",
  87          "Generate content files"),
  88         ("generate-index-diffs",
  89          "Generate .diff/Index files"),
  90         ("clean-suites",
  91          "Clean unused/superseded packages from the archive"),
  92         ("manage-build-queues",
  93          "Clean and update metadata for build queues"),
  94         ("clean-queues",
  95          "Clean cruft from incoming"),
  96         ("clean-proposed-updates",
  97          "Remove obsolete .changes from proposed-updates"),
  98
  99         ("transitions",
 100          "Manage the release transition file"),
 101         ("check-overrides",
 102          "Override cruft checks"),
 103         ("check-proposed-updates",
 104          "Dependency checking for proposed-updates"),
 105         ("control-overrides",
 106          "Manipulate/list override entries in bulk"),
 107         ("control-suite",
 108          "Manipulate suites in bulk"),
 109         ("cruft-report",
 110          "Check for obsolete or duplicated packages"),
 111         ("examine-package",
 112          "Show information useful for NEW processing"),
 113         ("find-null-maintainers",
 114          "Check for users with no packages in the archive"),
 115         ("import-keyring",
 116          "Populate fingerprint/uid table based on a new/updated keyring"),
 117         ("import-ldap-fingerprints",
 118          "Syncs fingerprint and uid tables with Debian LDAP db"),
 119         ("import-users-from-passwd",
 120          "Sync PostgreSQL users with passwd file"),
 121         ("admin",
 122          "Perform administration on the dak database"),
 123         ("update-db",
 124          "Updates databae schema to latest revision"),
 125         ("init-dirs",
 126          "Initial setup of the archive"),
 127         ("make-maintainers",
 128          "Generates Maintainers file for BTS etc"),
 129         ("make-overrides",
 130          "Generates override files"),
 131         ("poolize",
 132          "Move packages from dists/ to pool/"),
 133         ("new-security-install",
 134          "New way to install a security upload into the archive"),
 135         ("split-done",
 136          "Split queue/done into a date-based hierarchy"),
 137         ("stats",
 138          "Generate statistics"),
 139         ("bts-categorize",
 140          "Categorize uncategorized bugs filed against ftp.debian.org"),
 141         ("import-known-changes",
 142          "import old changes files into known_changes table"),
 143         ("add-user",
 144          "Add a user to the archive"),
 145         ("make-changelog",
 146          "Generate changelog between two suites"),
 147         ]
 148     return functionality
 149
 150 ################################################################################
 151
 152 def usage(functionality, exit_code=0):
 153     """Print a usage message and exit with 'exit_code'."""
 154
 155     print """Usage: dak COMMAND [...]
 156 Run DAK commands.  (Will also work if invoked as COMMAND.)
 157
 158 Available commands:"""
 159     for (command, description) in functionality:
 160         print "  %-23s %s" % (command, description)
 161     sys.exit(exit_code)
 162
 163 ################################################################################
 164
 165 def main():
 166     """Launch dak functionality."""
 167
 168
 169     try:
 170         logger = Logger(Config(), 'dak top-level', print_starting=False)
 171     except CantOpenError:
 172         logger = None
 173
 174     functionality = init()
 175     modules = [ command for (command, _) in functionality ]
 176
 177     if len(sys.argv) == 0:
 178         daklib.utils.fubar("err, argc == 0? how is that possible?")
 179     elif (len(sys.argv) == 1
 180           or (len(sys.argv) == 2 and
 181               (sys.argv[1] == "--help" or sys.argv[1] == "-h"))):
 182         usage(functionality)
 183
 184     # First see if we were invoked with/as the name of a module
 185     cmdname = sys.argv[0]
 186     cmdname = cmdname[cmdname.rfind("/")+1:]
 187     if cmdname in modules:
 188         pass
 189     # Otherwise the argument is the module
 190     else:
 191         cmdname = sys.argv[1]
 192         sys.argv = [sys.argv[0] + " " + sys.argv[1]] + sys.argv[2:]
 193         if cmdname not in modules:
 194             match = []
 195             for name in modules:
 196                 if name.startswith(cmdname):
 197                     match.append(name)
 198             if len(match) == 1:
 199                 cmdname = match[0]
 200             elif len(match) > 1:
 201                 daklib.utils.warn("ambiguous command '%s' - could be %s" \
 202                            % (cmdname, ", ".join(match)))
 203                 usage(functionality, 1)
 204             else:
 205                 daklib.utils.warn("unknown command '%s'" % (cmdname))
 206                 usage(functionality, 1)
 207
 208     # We do not care. No idea wth sqlalchemy warns about them, makes no sense,
 209     # so we ignore it.
 210     warnings.filterwarnings("ignore", 'Predicate of partial index')
 211
 212     # Invoke the module
 213     module = __import__(cmdname.replace("-","_"))
 214
 215     try:
 216         module.main()
 217     except KeyboardInterrupt:
 218         msg = 'KeyboardInterrupt caught; exiting'
 219         print msg
 220         if logger:
 221             logger.log([msg])
 222         sys.exit(1)
 223     except SystemExit:
 224         pass
 225     except:
 226         if logger:
 227             for line in traceback.format_exc().split('\n')[:-1]:
 228                 logger.log(['exception', line])
 229         raise
 230
 231 ################################################################################
 232
 233 if __name__ == "__main__":
 234     os.environ['LANG'] = 'C'
 235     os.environ['LC_ALL'] = 'C'
 236     main()