claire.py

   1 #!/usr/bin/env python
   2
   3 # 'Fix' stable to make debian-cd and dpkg -BORGiE users happy
   4 # Copyright (C) 2000, 2001  James Troup <james@nocrew.org>
   5 # $Id: claire.py,v 1.10 2001-11-04 20:41:37 troup Exp $
   6
   7 # This program is free software; you can redistribute it and/or modify
   8 # it under the terms of the GNU General Public License as published by
   9 # the Free Software Foundation; either version 2 of the License, or
  10 # (at your option) any later version.
  11
  12 # This program is distributed in the hope that it will be useful,
  13 # but WITHOUT ANY WARRANTY; without even the implied warranty of
  14 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15 # GNU General Public License for more details.
  16
  17 # You should have received a copy of the GNU General Public License
  18 # along with this program; if not, write to the Free Software
  19 # Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
  20
  21 ################################################################################
  22
  23 # "Look around... leaves are brown... and the sky's a hazy shade of winter,
  24 #  Look around... leaves are brown... there's a patch of snow on the ground."
  25 #                                         -- Simon & Garfunkel / 'A Hazy Shade'
  26
  27 ################################################################################
  28
  29 import os, pg, re, string, sys
  30 import utils, db_access
  31 import apt_pkg;
  32
  33 ################################################################################
  34
  35 re_strip_section_prefix = re.compile(r'.*/');
  36
  37 Cnf = None;
  38 projectB = None;
  39
  40 ################################################################################
  41
  42 def usage (exit_code=0):
  43     print """Usage: claire [OPTIONS]
  44 Create compatability symlinks from legacy locations to the pool.
  45
  46   -v, --verbose              explain what is being done
  47   -h, --help                 show this help and exit"""
  48
  49     sys.exit(exit_code)
  50
  51 ################################################################################
  52
  53 # Relativize an absolute symlink from 'src' -> 'dest' relative to 'root'.
  54 # Returns fixed 'src'
  55 def clean_symlink (src, dest, root):
  56     src = string.replace(src, root, '', 1);
  57     dest = string.replace(dest, root, '', 1);
  58     dest = os.path.dirname(dest);
  59     new_src = '';
  60     for i in xrange(len(string.split(dest, '/'))):
  61         new_src = new_src + '../';
  62     return new_src + src
  63
  64 ################################################################################
  65
  66 def fix_component_section (component, section):
  67     if component == "":
  68         component = utils.extract_component_from_section(section)[1];
  69
  70     # FIXME: ugly hacks to work around override brain damage
  71     section = re_strip_section_prefix.sub('', section);
  72     section = string.replace(string.lower(section), 'non-us', '');
  73     if section == "main" or section == "contrib" or section == "non-free":
  74         section = '';
  75     if section != '':
  76         section = section + '/';
  77
  78     return (component, section);
  79
  80 ################################################################################
  81
  82 def find_dislocated_stable(Cnf, projectB):
  83     dislocated_files = {}
  84
  85     # Source
  86     q = projectB.query("""
  87 SELECT DISTINCT ON (f.id) c.name, sec.section, l.path, f.filename, f.id
  88     FROM component c, override o, section sec, source s, files f, location l,
  89          dsc_files df, suite su, src_associations sa, files f2, location l2
  90     WHERE su.suite_name = 'stable' AND sa.suite = su.id AND sa.source = s.id
  91       AND f2.id = s.file AND f2.location = l2.id AND df.source = s.id
  92       AND f.id = df.file AND f.location = l.id AND o.package = s.source
  93       AND sec.id = o.section AND NOT (f.filename ~ '^potato/')
  94       AND l.component = c.id AND o.suite = su.id
  95 UNION SELECT DISTINCT ON (f.id) null, sec.section, l.path, f.filename, f.id
  96     FROM component c, override o, section sec, source s, files f, location l,
  97          dsc_files df, suite su, src_associations sa, files f2, location l2
  98     WHERE su.suite_name = 'stable' AND sa.suite = su.id AND sa.source = s.id
  99       AND f2.id = s.file AND f2.location = l2.id AND df.source = s.id
 100       AND f.id = df.file AND f.location = l.id AND o.package = s.source
 101       AND sec.id = o.section AND NOT (f.filename ~ '^potato/') AND o.suite = su.id
 102       AND NOT EXISTS (SELECT l.path FROM location l WHERE l.component IS NOT NULL AND f.location = l.id);
 103 """);
 104     for i in q.getresult():
 105         src = i[2]+i[3]
 106         (component, section) = fix_component_section(i[0], i[1]);
 107         dest = "%sdists/%s/%s/source/%s%s" % (Cnf["Dir::RootDir"], Cnf.get("Suite::Stable::CodeName", "stable"), component, section, os.path.basename(i[3]));
 108         src = clean_symlink(src, dest, Cnf["Dir::RootDir"]);
 109         if not os.path.exists(dest):
 110             if Cnf.Find("Claire::Options::Verbose"):
 111                 print src+' -> '+dest
 112             os.symlink(src, dest);
 113         dislocated_files[i[4]] = dest;
 114
 115     # Binary
 116     architectures = Cnf.SubTree("Suite::Stable::Architectures").List();
 117     for arch in [ "source", "all" ]:
 118         if architectures.count(arch):
 119             architectures.remove(arch);
 120     q = projectB.query("""
 121 SELECT DISTINCT ON (f.id) c.name, a.arch_string, sec.section, b.package,
 122                           b.version, l.path, f.filename, f.id
 123     FROM architecture a, bin_associations ba, binaries b, component c, files f,
 124          location l, override o, section sec, suite su
 125     WHERE su.suite_name = 'stable' AND ba.suite = su.id AND ba.bin = b.id
 126       AND f.id = b.file AND f.location = l.id AND o.package = b.package
 127       AND sec.id = o.section AND NOT (f.filename ~ '^potato/')
 128       AND b.architecture = a.id AND l.component = c.id AND o.suite = su.id
 129 UNION SELECT DISTINCT ON (f.id) null, a.arch_string, sec.section, b.package,
 130                           b.version, l.path, f.filename, f.id
 131     FROM architecture a, bin_associations ba, binaries b, component c, files f,
 132          location l, override o, section sec, suite su
 133     WHERE su.suite_name = 'stable' AND ba.suite = su.id AND ba.bin = b.id
 134       AND f.id = b.file AND f.location = l.id AND o.package = b.package
 135       AND sec.id = o.section AND NOT (f.filename ~ '^potato/')
 136       AND b.architecture = a.id AND o.suite = su.id AND NOT EXISTS
 137         (SELECT l.path FROM location l WHERE l.component IS NOT NULL AND f.location = l.id);
 138 """);
 139     for i in q.getresult():
 140         (component, section) = fix_component_section(i[0], i[2]);
 141         architecture = i[1];
 142         package = i[3]
 143         version = utils.re_no_epoch.sub('', i[4]);
 144         src = i[5]+i[6]
 145
 146         dest = "%sdists/%s/%s/binary-%s/%s%s_%s.deb" % (Cnf["Dir::RootDir"], Cnf.get("Suite::Stable::CodeName", "stable"), component, architecture, section, package, version);
 147         src = clean_symlink(src, dest, Cnf["Dir::RootDir"]);
 148         if not os.path.exists(dest):
 149             if Cnf.Find("Claire::Options::Verbose"):
 150                 print src+' -> '+dest
 151             os.symlink(src, dest);
 152         dislocated_files[i[7]] = dest;
 153         # Add per-arch symlinks for arch: all debs
 154         if architecture == "all":
 155             for arch in architectures:
 156                 dest = "%sdists/%s/%s/binary-%s/%s%s_%s.deb" % (Cnf["Dir::RootDir"], Cnf.get("Suite::Stable::CodeName", "stable"), component, arch, section, package, version);
 157                 if not os.path.exists(dest):
 158                     if Cnf.Find("Claire::Options::Verbose"):
 159                         print src+' -> '+dest
 160                     os.symlink(src, dest);
 161
 162     return dislocated_files
 163
 164 ################################################################################
 165
 166 def main ():
 167     global Cnf, projectB;
 168
 169     apt_pkg.init();
 170
 171     Cnf = apt_pkg.newConfiguration();
 172     apt_pkg.ReadConfigFileISC(Cnf,utils.which_conf_file());
 173
 174     Arguments = [('h',"help","Claire::Options::Help"),
 175                  ('v',"verbose","Claire::Options::Verbose")];
 176     for i in ["help", "verbose" ]:
 177         Cnf["Claire::Options::%s" % (i)] = "";
 178
 179     apt_pkg.ParseCommandLine(Cnf,Arguments,sys.argv);
 180     Options = Cnf.SubTree("Claire::Options")
 181
 182     if Options["Help"]:
 183         usage();
 184
 185     projectB = pg.connect(Cnf["DB::Name"], Cnf["DB::Host"], int(Cnf["DB::Port"]));
 186
 187     db_access.init(Cnf, projectB);
 188
 189     find_dislocated_stable(Cnf, projectB);
 190
 191 #######################################################################################
 192
 193 if __name__ == '__main__':
 194     main()
 195