← Back to branch summary

~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/gpg.py

(vila) Fix test failures blocking package builds. (Vincent Ladeuil)

Show diffs side-by-side

added added

removed removed

Lines of Context:
bzrlib/gpg.py
1
 
# Copyright (C) 2005 by Canonical Ltd
 
1
# Copyright (C) 2005, 2011 Canonical Ltd
2
2
#   Authors: Robert Collins <robert.collins@canonical.com>
3
3
#
4
4
# This program is free software; you can redistribute it and/or modify
13
13
#
14
14
# You should have received a copy of the GNU General Public License
15
15
# along with this program; if not, write to the Free Software
16
 
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
17
17
 
18
18
"""GPG signing and checking logic."""
19
19
 
 
20
from __future__ import absolute_import
 
21
 
 
22
import os
 
23
import sys
 
24
from StringIO import StringIO
 
25
 
 
26
from bzrlib.lazy_import import lazy_import
 
27
lazy_import(globals(), """
20
28
import errno
21
29
import subprocess
22
30
 
23
 
import bzrlib.errors as errors
 
31
from bzrlib import (
 
32
    config,
 
33
    errors,
 
34
    trace,
 
35
    ui,
 
36
    )
 
37
from bzrlib.i18n import (
 
38
    gettext, 
 
39
    ngettext,
 
40
    )
 
41
""")
 
42
 
 
43
from bzrlib.symbol_versioning import (
 
44
    deprecated_in,
 
45
    deprecated_method,
 
46
    )
 
47
 
 
48
#verification results
 
49
SIGNATURE_VALID = 0
 
50
SIGNATURE_KEY_MISSING = 1
 
51
SIGNATURE_NOT_VALID = 2
 
52
SIGNATURE_NOT_SIGNED = 3
 
53
SIGNATURE_EXPIRED = 4
 
54
 
 
55
 
 
56
def bulk_verify_signatures(repository, revids, strategy,
 
57
        process_events_callback=None):
 
58
    """Do verifications on a set of revisions
 
59
 
 
60
    :param repository: repository object
 
61
    :param revids: list of revision ids to verify
 
62
    :param strategy: GPG strategy to use
 
63
    :param process_events_callback: method to call for GUI frontends that
 
64
        want to keep their UI refreshed
 
65
 
 
66
    :return: count dictionary of results of each type,
 
67
             result list for each revision,
 
68
             boolean True if all results are verified successfully
 
69
    """
 
70
    count = {SIGNATURE_VALID: 0,
 
71
             SIGNATURE_KEY_MISSING: 0,
 
72
             SIGNATURE_NOT_VALID: 0,
 
73
             SIGNATURE_NOT_SIGNED: 0,
 
74
             SIGNATURE_EXPIRED: 0}
 
75
    result = []
 
76
    all_verifiable = True
 
77
    total = len(revids)
 
78
    pb = ui.ui_factory.nested_progress_bar()
 
79
    try:
 
80
        for i, (rev_id, verification_result, uid) in enumerate(
 
81
                repository.verify_revision_signatures(
 
82
                    revids, strategy)):
 
83
            pb.update("verifying signatures", i, total)
 
84
            result.append([rev_id, verification_result, uid])
 
85
            count[verification_result] += 1
 
86
            if verification_result != SIGNATURE_VALID:
 
87
                all_verifiable = False
 
88
            if process_events_callback is not None:
 
89
                process_events_callback()
 
90
    finally:
 
91
        pb.finished()
 
92
    return (count, result, all_verifiable)
 
93
 
24
94
 
25
95
class DisabledGPGStrategy(object):
26
96
    """A GPG Strategy that makes everything fail."""
27
97
 
 
98
    @staticmethod
 
99
    def verify_signatures_available():
 
100
        return True
 
101
 
28
102
    def __init__(self, ignored):
29
103
        """Real strategies take a configuration."""
30
104
 
31
105
    def sign(self, content):
32
106
        raise errors.SigningFailed('Signing is disabled.')
33
107
 
 
108
    def verify(self, content, testament):
 
109
        raise errors.SignatureVerificationFailed('Signature verification is \
 
110
disabled.')
 
111
 
 
112
    def set_acceptable_keys(self, command_line_input):
 
113
        pass
 
114
 
34
115
 
35
116
class LoopbackGPGStrategy(object):
36
 
    """A GPG Strategy that acts like 'cat' - data is just passed through."""
 
117
    """A GPG Strategy that acts like 'cat' - data is just passed through.
 
118
    Used in tests.
 
119
    """
 
120
 
 
121
    @staticmethod
 
122
    def verify_signatures_available():
 
123
        return True
37
124
 
38
125
    def __init__(self, ignored):
39
126
        """Real strategies take a configuration."""
40
127
 
41
128
    def sign(self, content):
42
 
        return content
 
129
        return ("-----BEGIN PSEUDO-SIGNED CONTENT-----\n" + content +
 
130
                "-----END PSEUDO-SIGNED CONTENT-----\n")
 
131
 
 
132
    def verify(self, content, testament):
 
133
        return SIGNATURE_VALID, None
 
134
 
 
135
    def set_acceptable_keys(self, command_line_input):
 
136
        if command_line_input is not None:
 
137
            patterns = command_line_input.split(",")
 
138
            self.acceptable_keys = []
 
139
            for pattern in patterns:
 
140
                if pattern == "unknown":
 
141
                    pass
 
142
                else:
 
143
                    self.acceptable_keys.append(pattern)
 
144
 
 
145
    @deprecated_method(deprecated_in((2, 6, 0)))
 
146
    def do_verifications(self, revisions, repository):
 
147
        return bulk_verify_signatures(repository, revisions, self)
 
148
 
 
149
    @deprecated_method(deprecated_in((2, 6, 0)))
 
150
    def valid_commits_message(self, count):
 
151
        return valid_commits_message(count)
 
152
 
 
153
    @deprecated_method(deprecated_in((2, 6, 0)))
 
154
    def unknown_key_message(self, count):
 
155
        return unknown_key_message(count)
 
156
 
 
157
    @deprecated_method(deprecated_in((2, 6, 0)))
 
158
    def commit_not_valid_message(self, count):
 
159
        return commit_not_valid_message(count)
 
160
 
 
161
    @deprecated_method(deprecated_in((2, 6, 0)))
 
162
    def commit_not_signed_message(self, count):
 
163
        return commit_not_signed_message(count)
 
164
 
 
165
    @deprecated_method(deprecated_in((2, 6, 0)))
 
166
    def expired_commit_message(self, count):
 
167
        return expired_commit_message(count)
 
168
 
 
169
 
 
170
def _set_gpg_tty():
 
171
    tty = os.environ.get('TTY')
 
172
    if tty is not None:
 
173
        os.environ['GPG_TTY'] = tty
 
174
        trace.mutter('setting GPG_TTY=%s', tty)
 
175
    else:
 
176
        # This is not quite worthy of a warning, because some people
 
177
        # don't need GPG_TTY to be set. But it is worthy of a big mark
 
178
        # in ~/.bzr.log, so that people can debug it if it happens to them
 
179
        trace.mutter('** Env var TTY empty, cannot set GPG_TTY.'
 
180
                     '  Is TTY exported?')
43
181
 
44
182
 
45
183
class GPGStrategy(object):
46
184
    """GPG Signing and checking facilities."""
47
 
        
 
185
 
 
186
    acceptable_keys = None
 
187
 
 
188
    def __init__(self, config_stack):
 
189
        self._config_stack = config_stack
 
190
        try:
 
191
            import gpgme
 
192
            self.context = gpgme.Context()
 
193
        except ImportError, error:
 
194
            pass # can't use verify()
 
195
 
 
196
    @staticmethod
 
197
    def verify_signatures_available():
 
198
        """
 
199
        check if this strategy can verify signatures
 
200
 
 
201
        :return: boolean if this strategy can verify signatures
 
202
        """
 
203
        try:
 
204
            import gpgme
 
205
            return True
 
206
        except ImportError, error:
 
207
            return False
 
208
 
48
209
    def _command_line(self):
49
 
        return [self._config.gpg_signing_command(), '--clearsign']
50
 
 
51
 
    def __init__(self, config):
52
 
        self._config = config
 
210
        key = self._config_stack.get('gpg_signing_key')
 
211
        if key is None or key == 'default':
 
212
            # 'default' or not setting gpg_signing_key at all means we should
 
213
            # use the user email address
 
214
            key = config.extract_email_address(self._config_stack.get('email'))
 
215
        return [self._config_stack.get('gpg_signing_command'), '--clearsign',
 
216
                '-u', key]
53
217
 
54
218
    def sign(self, content):
 
219
        if isinstance(content, unicode):
 
220
            raise errors.BzrBadParameterUnicode('content')
 
221
        ui.ui_factory.clear_term()
 
222
 
 
223
        preexec_fn = _set_gpg_tty
 
224
        if sys.platform == 'win32':
 
225
            # Win32 doesn't support preexec_fn, but wouldn't support TTY anyway.
 
226
            preexec_fn = None
55
227
        try:
56
228
            process = subprocess.Popen(self._command_line(),
57
229
                                       stdin=subprocess.PIPE,
58
 
                                       stdout=subprocess.PIPE)
 
230
                                       stdout=subprocess.PIPE,
 
231
                                       preexec_fn=preexec_fn)
59
232
            try:
60
233
                result = process.communicate(content)[0]
61
234
                if process.returncode is None:
77
250
                raise errors.SigningFailed(self._command_line())
78
251
            else:
79
252
                raise
 
253
 
 
254
    def verify(self, content, testament):
 
255
        """Check content has a valid signature.
 
256
 
 
257
        :param content: the commit signature
 
258
        :param testament: the valid testament string for the commit
 
259
 
 
260
        :return: SIGNATURE_VALID or a failed SIGNATURE_ value, key uid if valid
 
261
        """
 
262
        try:
 
263
            import gpgme
 
264
        except ImportError, error:
 
265
            raise errors.GpgmeNotInstalled(error)
 
266
 
 
267
        signature = StringIO(content)
 
268
        plain_output = StringIO()
 
269
        try:
 
270
            result = self.context.verify(signature, None, plain_output)
 
271
        except gpgme.GpgmeError,error:
 
272
            raise errors.SignatureVerificationFailed(error[2])
 
273
 
 
274
        # No result if input is invalid.
 
275
        # test_verify_invalid()
 
276
        if len(result) == 0:
 
277
            return SIGNATURE_NOT_VALID, None
 
278
        # User has specified a list of acceptable keys, check our result is in
 
279
        # it.  test_verify_unacceptable_key()
 
280
        fingerprint = result[0].fpr
 
281
        if self.acceptable_keys is not None:
 
282
            if not fingerprint in self.acceptable_keys:
 
283
                return SIGNATURE_KEY_MISSING, fingerprint[-8:]
 
284
        # Check the signature actually matches the testament.
 
285
        # test_verify_bad_testament()
 
286
        if testament != plain_output.getvalue():
 
287
            return SIGNATURE_NOT_VALID, None
 
288
        # Yay gpgme set the valid bit.
 
289
        # Can't write a test for this one as you can't set a key to be
 
290
        # trusted using gpgme.
 
291
        if result[0].summary & gpgme.SIGSUM_VALID:
 
292
            key = self.context.get_key(fingerprint)
 
293
            name = key.uids[0].name
 
294
            email = key.uids[0].email
 
295
            return SIGNATURE_VALID, name + " <" + email + ">"
 
296
        # Sigsum_red indicates a problem, unfortunatly I have not been able
 
297
        # to write any tests which actually set this.
 
298
        if result[0].summary & gpgme.SIGSUM_RED:
 
299
            return SIGNATURE_NOT_VALID, None
 
300
        # GPG does not know this key.
 
301
        # test_verify_unknown_key()
 
302
        if result[0].summary & gpgme.SIGSUM_KEY_MISSING:
 
303
            return SIGNATURE_KEY_MISSING, fingerprint[-8:]
 
304
        # Summary isn't set if sig is valid but key is untrusted but if user
 
305
        # has explicity set the key as acceptable we can validate it.
 
306
        if result[0].summary == 0 and self.acceptable_keys is not None:
 
307
            if fingerprint in self.acceptable_keys:
 
308
                # test_verify_untrusted_but_accepted()
 
309
                return SIGNATURE_VALID, None
 
310
        # test_verify_valid_but_untrusted()
 
311
        if result[0].summary == 0 and self.acceptable_keys is None:
 
312
            return SIGNATURE_NOT_VALID, None
 
313
        if result[0].summary & gpgme.SIGSUM_KEY_EXPIRED:
 
314
            expires = self.context.get_key(result[0].fpr).subkeys[0].expires
 
315
            if expires > result[0].timestamp:
 
316
                # The expired key was not expired at time of signing.
 
317
                # test_verify_expired_but_valid()
 
318
                return SIGNATURE_EXPIRED, fingerprint[-8:]
 
319
            else:
 
320
                # I can't work out how to create a test where the signature
 
321
                # was expired at the time of signing.
 
322
                return SIGNATURE_NOT_VALID, None
 
323
        # A signature from a revoked key gets this.
 
324
        # test_verify_revoked_signature()
 
325
        if result[0].summary & gpgme.SIGSUM_SYS_ERROR:
 
326
            return SIGNATURE_NOT_VALID, None
 
327
        # Other error types such as revoked keys should (I think) be caught by
 
328
        # SIGSUM_RED so anything else means something is buggy.
 
329
        raise errors.SignatureVerificationFailed("Unknown GnuPG key "\
 
330
                                                 "verification result")
 
331
 
 
332
    def set_acceptable_keys(self, command_line_input):
 
333
        """Set the acceptable keys for verifying with this GPGStrategy.
 
334
 
 
335
        :param command_line_input: comma separated list of patterns from
 
336
                                command line
 
337
        :return: nothing
 
338
        """
 
339
        patterns = None
 
340
        acceptable_keys_config = self._config_stack.get('acceptable_keys')
 
341
        if acceptable_keys_config is not None:
 
342
            patterns = acceptable_keys_config
 
343
        if command_line_input is not None: # command line overrides config
 
344
            patterns = command_line_input.split(',')
 
345
 
 
346
        if patterns:
 
347
            self.acceptable_keys = []
 
348
            for pattern in patterns:
 
349
                result = self.context.keylist(pattern)
 
350
                found_key = False
 
351
                for key in result:
 
352
                    found_key = True
 
353
                    self.acceptable_keys.append(key.subkeys[0].fpr)
 
354
                    trace.mutter("Added acceptable key: " + key.subkeys[0].fpr)
 
355
                if not found_key:
 
356
                    trace.note(gettext(
 
357
                            "No GnuPG key results for pattern: {0}"
 
358
                                ).format(pattern))
 
359
 
 
360
    @deprecated_method(deprecated_in((2, 6, 0)))
 
361
    def do_verifications(self, revisions, repository,
 
362
                            process_events_callback=None):
 
363
        """do verifications on a set of revisions
 
364
 
 
365
        :param revisions: list of revision ids to verify
 
366
        :param repository: repository object
 
367
        :param process_events_callback: method to call for GUI frontends that
 
368
            want to keep their UI refreshed
 
369
 
 
370
        :return: count dictionary of results of each type,
 
371
                 result list for each revision,
 
372
                 boolean True if all results are verified successfully
 
373
        """
 
374
        return bulk_verify_signatures(repository, revisions, self,
 
375
            process_events_callback)
 
376
 
 
377
    @deprecated_method(deprecated_in((2, 6, 0)))
 
378
    def verbose_valid_message(self, result):
 
379
        """takes a verify result and returns list of signed commits strings"""
 
380
        return verbose_valid_message(result)
 
381
 
 
382
    @deprecated_method(deprecated_in((2, 6, 0)))
 
383
    def verbose_not_valid_message(self, result, repo):
 
384
        """takes a verify result and returns list of not valid commit info"""
 
385
        return verbose_not_valid_message(result, repo)
 
386
 
 
387
    @deprecated_method(deprecated_in((2, 6, 0)))
 
388
    def verbose_not_signed_message(self, result, repo):
 
389
        """takes a verify result and returns list of not signed commit info"""
 
390
        return verbose_not_valid_message(result, repo)
 
391
 
 
392
    @deprecated_method(deprecated_in((2, 6, 0)))
 
393
    def verbose_missing_key_message(self, result):
 
394
        """takes a verify result and returns list of missing key info"""
 
395
        return verbose_missing_key_message(result)
 
396
 
 
397
    @deprecated_method(deprecated_in((2, 6, 0)))
 
398
    def verbose_expired_key_message(self, result, repo):
 
399
        """takes a verify result and returns list of expired key info"""
 
400
        return verbose_expired_key_message(result, repo)
 
401
 
 
402
    @deprecated_method(deprecated_in((2, 6, 0)))
 
403
    def valid_commits_message(self, count):
 
404
        """returns message for number of commits"""
 
405
        return valid_commits_message(count)
 
406
 
 
407
    @deprecated_method(deprecated_in((2, 6, 0)))
 
408
    def unknown_key_message(self, count):
 
409
        """returns message for number of commits"""
 
410
        return unknown_key_message(count)
 
411
 
 
412
    @deprecated_method(deprecated_in((2, 6, 0)))
 
413
    def commit_not_valid_message(self, count):
 
414
        """returns message for number of commits"""
 
415
        return commit_not_valid_message(count)
 
416
 
 
417
    @deprecated_method(deprecated_in((2, 6, 0)))
 
418
    def commit_not_signed_message(self, count):
 
419
        """returns message for number of commits"""
 
420
        return commit_not_signed_message(count)
 
421
 
 
422
    @deprecated_method(deprecated_in((2, 6, 0)))
 
423
    def expired_commit_message(self, count):
 
424
        """returns message for number of commits"""
 
425
        return expired_commit_message(count)
 
426
 
 
427
 
 
428
def valid_commits_message(count):
 
429
    """returns message for number of commits"""
 
430
    return gettext(u"{0} commits with valid signatures").format(
 
431
                                    count[SIGNATURE_VALID])
 
432
 
 
433
 
 
434
def unknown_key_message(count):
 
435
    """returns message for number of commits"""
 
436
    return ngettext(u"{0} commit with unknown key",
 
437
                    u"{0} commits with unknown keys",
 
438
                    count[SIGNATURE_KEY_MISSING]).format(
 
439
                                    count[SIGNATURE_KEY_MISSING])
 
440
 
 
441
 
 
442
def commit_not_valid_message(count):
 
443
    """returns message for number of commits"""
 
444
    return ngettext(u"{0} commit not valid",
 
445
                    u"{0} commits not valid",
 
446
                    count[SIGNATURE_NOT_VALID]).format(
 
447
                                        count[SIGNATURE_NOT_VALID])
 
448
 
 
449
 
 
450
def commit_not_signed_message(count):
 
451
    """returns message for number of commits"""
 
452
    return ngettext(u"{0} commit not signed",
 
453
                    u"{0} commits not signed",
 
454
                    count[SIGNATURE_NOT_SIGNED]).format(
 
455
                                    count[SIGNATURE_NOT_SIGNED])
 
456
 
 
457
 
 
458
def expired_commit_message(count):
 
459
    """returns message for number of commits"""
 
460
    return ngettext(u"{0} commit with key now expired",
 
461
                    u"{0} commits with key now expired",
 
462
                    count[SIGNATURE_EXPIRED]).format(
 
463
                                count[SIGNATURE_EXPIRED])
 
464
 
 
465
 
 
466
def verbose_expired_key_message(result, repo):
 
467
    """takes a verify result and returns list of expired key info"""
 
468
    signers = {}
 
469
    fingerprint_to_authors = {}
 
470
    for rev_id, validity, fingerprint in result:
 
471
        if validity == SIGNATURE_EXPIRED:
 
472
            revision = repo.get_revision(rev_id)
 
473
            authors = ', '.join(revision.get_apparent_authors())
 
474
            signers.setdefault(fingerprint, 0)
 
475
            signers[fingerprint] += 1
 
476
            fingerprint_to_authors[fingerprint] = authors
 
477
    result = []
 
478
    for fingerprint, number in signers.items():
 
479
        result.append(
 
480
            ngettext(u"{0} commit by author {1} with key {2} now expired",
 
481
                     u"{0} commits by author {1} with key {2} now expired",
 
482
                     number).format(
 
483
                number, fingerprint_to_authors[fingerprint], fingerprint))
 
484
    return result
 
485
 
 
486
 
 
487
def verbose_valid_message(result):
 
488
    """takes a verify result and returns list of signed commits strings"""
 
489
    signers = {}
 
490
    for rev_id, validity, uid in result:
 
491
        if validity == SIGNATURE_VALID:
 
492
            signers.setdefault(uid, 0)
 
493
            signers[uid] += 1
 
494
    result = []
 
495
    for uid, number in signers.items():
 
496
         result.append(ngettext(u"{0} signed {1} commit",
 
497
                                u"{0} signed {1} commits",
 
498
                                number).format(uid, number))
 
499
    return result
 
500
 
 
501
 
 
502
def verbose_not_valid_message(result, repo):
 
503
    """takes a verify result and returns list of not valid commit info"""
 
504
    signers = {}
 
505
    for rev_id, validity, empty in result:
 
506
        if validity == SIGNATURE_NOT_VALID:
 
507
            revision = repo.get_revision(rev_id)
 
508
            authors = ', '.join(revision.get_apparent_authors())
 
509
            signers.setdefault(authors, 0)
 
510
            signers[authors] += 1
 
511
    result = []
 
512
    for authors, number in signers.items():
 
513
        result.append(ngettext(u"{0} commit by author {1}",
 
514
                               u"{0} commits by author {1}",
 
515
                               number).format(number, authors))
 
516
    return result
 
517
 
 
518
 
 
519
def verbose_not_signed_message(result, repo):
 
520
    """takes a verify result and returns list of not signed commit info"""
 
521
    signers = {}
 
522
    for rev_id, validity, empty in result:
 
523
        if validity == SIGNATURE_NOT_SIGNED:
 
524
            revision = repo.get_revision(rev_id)
 
525
            authors = ', '.join(revision.get_apparent_authors())
 
526
            signers.setdefault(authors, 0)
 
527
            signers[authors] += 1
 
528
    result = []
 
529
    for authors, number in signers.items():
 
530
        result.append(ngettext(u"{0} commit by author {1}",
 
531
                               u"{0} commits by author {1}",
 
532
                               number).format(number, authors))
 
533
    return result
 
534
 
 
535
 
 
536
def verbose_missing_key_message(result):
 
537
    """takes a verify result and returns list of missing key info"""
 
538
    signers = {}
 
539
    for rev_id, validity, fingerprint in result:
 
540
        if validity == SIGNATURE_KEY_MISSING:
 
541
            signers.setdefault(fingerprint, 0)
 
542
            signers[fingerprint] += 1
 
543
    result = []
 
544
    for fingerprint, number in signers.items():
 
545
        result.append(ngettext(u"Unknown key {0} signed {1} commit",
 
546
                               u"Unknown key {0} signed {1} commits",
 
547
                               number).format(fingerprint, number))
 
548
    return result