Mark every part that might run within sudo dak environments

Merge from mainline

Merge from aj

* dak/transitions.py (load_transitions): Check if all our keys are
  defined, if there are only keys defined we want and also the types
  of the various keys.

Merge transitions support.

merge from Joerg

Mention experimental

Make tempfile readable by everyone, so we can actually copy it later

Check for help option before we do any database connect or sudo checks/prints

Merge from aj

Change sudo otpion to match dak new-security-instal (-s, --sudo, automatically
implied for non-dak users)

always prompt to commit edits
some display tidying

ooops, shouldn't have sudo invoke dak edit-transitions if it's renamed...

    * dak/edit_transitions.py: Add --import option.
        Add --use-sudo option. Use fcntl locking for writing.
        Move writing into a function (write_transitions).
        Reinvoke self using sudo and --import if necessary.
        Move temporary file creation into a function, use mkstemp.
        Rename to "dak transitions".

merge from joerg

Also only run on unstable uploads

import errno, create tempfile *after* we got the lockfile

   * dak/edit_transitions.py (edit_transitions): Use sudo to copy the
   edited file back in place
   (check_transitions): Use proper locking and also use sudo to copy
   the new file in place

Whitespace changes only

Merge from aj

Merge ajs branch

extensions.py: minor tidyup

merge with mainline

daklib/extensions.py, dak/dak.py, config/debian/extensions.py: move
generic extension helpers into daklib.extensions

merge from mainline

extensions.py: update @replace_dak_function decorator to automatically
pass the old function as an argument to the new function

move process_unchecked changes intoconfig/debian/extensions.py

merge with extensions.py update

* config/debian/extensions.py: Add infrastructure for replacing
functions in dak modules; add upload blocking for dpkg.

check_transitions only takes the loaded transitions

* dak/edit_transitions.py: Done a number of cleanups to make code
  working. Also changed the way prompting/answering goes, to not
  have to import daklib/queue.
  (edit_transitions): When done with a successful edit - also print
  a final overview about defined transitions

   * dak/dak.py (init): Renamed check -> edit transitions

       * dak/edit_transitions.py: Renamed from check_transitions.py
       (main): Also rename new_vers/curvers to expected/current
       Basically a nice rewrite, so it now does checks and edit,
       depending on how you call it. Check also removes old transitions,
       if user wants it

* dak/process_unchecked.py: Import syck module directly, not "from
  syck import *"
  (check_transition): Do the check for sourceful upload in here
  Also adjust the syck loading commands, rename new_vers to
  expected, curvers to current, to make it more clear what they mean.
* daklib/database.py (get_suite_version): Renamed from
  get_testing_version. Also changed the cache variables name
* The above changes are based on modifications from Anthony.

Add a better documentation

Fix en_Ganneff

Unindent the reject message

Fix check logic to work the way apt_pkg.VersionCompare wants it. Also parse "not in testing" as reject reason, as wanted by a release team member

Make the no-action working

Fix a number of syntax errors. Also do not remove elements from a dict where we iterate through

Add check_transitions so the yaml file can easily be checked. Make it known to dak

Move database query in own function in database.py, use it from check-transition

Actually revert the move to daklib.queue, keep it in proces_unchecked.
Will only move the sql to daklib.database, and the wrapper for the
release team will have the rest on its own.

* daklib/queue.py (check_transition): Added in here
  Modified so it only cleans up when called with cleanup
  parameter. Which will be called from a seperate script for the
  release managers.

* dak/process_unchecked.py
  (check_transition): Warn on broken transitions file and return,
  not doing anything.
  (check_transition): Moved out of here, into daklib/queue
  (process_it): Call it in daklib.queue, but only if
  changes[architecture] has source included.

Merge two checks if we should run or not.
Also modify the database result check to not break.

Place ReleaseTransitions where they are expected.

Added a transition check feature for the release team, together with an
example transition yaml file.

add automatic d-i byhand processing
add armel to testing
update stable point release README

Script to import yet missing fields from filippo's uploads-history DB.

Merge myons fubar fix

Add ChangeLog entry for previous commit (fubar does not exist in global
namespace).

Add changedby column to source table, and fill in information found in the
.changes. This will allow to identify NMUs and sponsored uploads more precisely
in tools querying projectb.

Also move src_uploaders after source in DB population script so the REFERNCES
clause works.

fubar does not exist in global namespace

Pending merge

[AJ, r=JT] add debian maintainers not able to update any packages and fix packages debian maintainers may updae

[AJ, r=JT] fix slice for raw- check

[AJ, r=JT] add armel

key variable missing for keyexpired reject

update new-security-install and security-install from klecker

update security-install.advisory template from klecker

sync debian-security config from klecker

process_unchecked: if embargoed queues are enabled, always embargo

process_unchecked: Check for duplicate files in embargoed/unembargoed
dirs, if configured

add src_uploaders creation and permissions to setup

grant permissions on keyrings table

add keyrings table to init_pool sql

initial support for local python extensions

Remove debug output

Let NBS work for experimental too

Merge lintian html fixes

Remove linda call, linda doesnt provide anything anymore thats not done by lintian

dont escape html chars if not needed

Lintian now loves html output too

cron.unchecked: don't try doing anything if the daily lock is held

[AJ, r=JT] fix process-new's handling of check_dsc_against_db() warnings

[JJ, r=JT] sync

Call it within queue/new and with *.changes

[JJ, r=JT] show-new support

s/utils/queue/

s/µ/u/. Also use daklib.queue for check_valid, its there

Did a few style fixes. Moved determine_new and friends into daklib/queue. Removed some unneeded imports

Add show-new to dak wrapper

WTH does that line come from? removed

Use print_escaped_text, not print_formatted_text.

Add link from new.html to .html for packages

Added show_new and modified examine_package and daklib/utils to make it work

Add dak.conf option for show-new, add show-new to cron.hourly

[JJ, r=JT] drop support for non-US which was last used in Debian for 3.0

[JJ, r=JT] ignore stderr when finding copyright with dpkg-deb

[JT] fix indentation

[JT] sync

[JJ, r=JT] merge Joerg's outstanding changes.

[AJ] sync

[AJ] add -a/--apt-conf and -f/--force-touch options.  Pull version info from the database.  Make description optional

[AJ] comment out version and description for stable.  update moreinfourl

[AJ] add hurd-i386 to debian-installer unstable section

[AJ] add -f/--force option

[AJ] add NOTATION_DATA and NOTATION_NAME to known_keyowrds from gpgv

[AJ] don't auto-reject on warnings

[JT] trivial typo in comment

KEYEXPIRED is a known keyword. We do check its existance earlier on
(and do reject based on it if it has no GOODSIG also).