~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/tests/__init__.py

  • Committer: Robert Collins
  • Date: 2006-06-16 15:59:24 UTC
  • mto: (1780.1.1 integration)
  • mto: This revision was merged to the branch mainline in revision 1781.
  • Revision ID: robertc@robertcollins.net-20060616155924-b8a6591d32f8ab20
New corner case from John Meinel, showing up the need to check the directory lexographically outside of a single tree's root. Fixed.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005 by Canonical Ltd
 
1
# Copyright (C) 2005, 2006 by Canonical Ltd
2
2
 
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
 
18
 
def selftest():
19
 
    import unittest
20
 
    from unittest import TestLoader
21
 
    import bzrlib
 
18
# TODO: Perhaps there should be an API to find out if bzr running under the
 
19
# test suite -- some plugins might want to avoid making intrusive changes if
 
20
# this is the case.  However, we want behaviour under to test to diverge as
 
21
# little as possible, so this should be used rarely if it's added at all.
 
22
# (Suggestion from j-a-meinel, 2005-11-24)
 
23
 
 
24
# NOTE: Some classes in here use camelCaseNaming() rather than
 
25
# underscore_naming().  That's for consistency with unittest; it's not the
 
26
# general style of bzrlib.  Please continue that consistency when adding e.g.
 
27
# new assertFoo() methods.
 
28
 
 
29
import codecs
 
30
from cStringIO import StringIO
 
31
import difflib
 
32
import errno
 
33
import logging
 
34
import os
 
35
import re
 
36
import shlex
 
37
import stat
 
38
from subprocess import Popen, PIPE
 
39
import sys
 
40
import tempfile
 
41
import unittest
 
42
import time
 
43
 
 
44
 
 
45
import bzrlib.branch
 
46
import bzrlib.bzrdir as bzrdir
 
47
import bzrlib.commands
 
48
import bzrlib.bundle.serializer
 
49
import bzrlib.errors as errors
 
50
import bzrlib.inventory
 
51
import bzrlib.iterablefile
 
52
import bzrlib.lockdir
 
53
try:
 
54
    import bzrlib.lsprof
 
55
except ImportError:
 
56
    # lsprof not available
 
57
    pass
 
58
from bzrlib.merge import merge_inner
 
59
import bzrlib.merge3
 
60
import bzrlib.osutils
 
61
import bzrlib.osutils as osutils
 
62
import bzrlib.plugin
 
63
import bzrlib.progress as progress
 
64
from bzrlib.revision import common_ancestor
 
65
import bzrlib.store
 
66
import bzrlib.trace
 
67
from bzrlib.transport import get_transport
 
68
import bzrlib.transport
 
69
from bzrlib.transport.local import LocalRelpathServer
 
70
from bzrlib.transport.readonly import ReadonlyServer
 
71
from bzrlib.trace import mutter
 
72
from bzrlib.tests.TestUtil import TestLoader, TestSuite
 
73
from bzrlib.tests.treeshape import build_tree_contents
 
74
import bzrlib.urlutils as urlutils
 
75
from bzrlib.workingtree import WorkingTree, WorkingTreeFormat2
 
76
 
 
77
default_transport = LocalRelpathServer
 
78
 
 
79
MODULES_TO_TEST = []
 
80
MODULES_TO_DOCTEST = [
 
81
                      bzrlib.branch,
 
82
                      bzrlib.bundle.serializer,
 
83
                      bzrlib.commands,
 
84
                      bzrlib.errors,
 
85
                      bzrlib.inventory,
 
86
                      bzrlib.iterablefile,
 
87
                      bzrlib.lockdir,
 
88
                      bzrlib.merge3,
 
89
                      bzrlib.option,
 
90
                      bzrlib.osutils,
 
91
                      bzrlib.store
 
92
                      ]
 
93
 
 
94
 
 
95
def packages_to_test():
 
96
    """Return a list of packages to test.
 
97
 
 
98
    The packages are not globally imported so that import failures are
 
99
    triggered when running selftest, not when importing the command.
 
100
    """
 
101
    import bzrlib.doc
 
102
    import bzrlib.tests.blackbox
 
103
    import bzrlib.tests.branch_implementations
 
104
    import bzrlib.tests.bzrdir_implementations
 
105
    import bzrlib.tests.interrepository_implementations
 
106
    import bzrlib.tests.interversionedfile_implementations
 
107
    import bzrlib.tests.repository_implementations
 
108
    import bzrlib.tests.revisionstore_implementations
 
109
    import bzrlib.tests.workingtree_implementations
 
110
    return [
 
111
            bzrlib.doc,
 
112
            bzrlib.tests.blackbox,
 
113
            bzrlib.tests.branch_implementations,
 
114
            bzrlib.tests.bzrdir_implementations,
 
115
            bzrlib.tests.interrepository_implementations,
 
116
            bzrlib.tests.interversionedfile_implementations,
 
117
            bzrlib.tests.repository_implementations,
 
118
            bzrlib.tests.revisionstore_implementations,
 
119
            bzrlib.tests.workingtree_implementations,
 
120
            ]
 
121
 
 
122
 
 
123
class _MyResult(unittest._TextTestResult):
 
124
    """Custom TestResult.
 
125
 
 
126
    Shows output in a different format, including displaying runtime for tests.
 
127
    """
 
128
    stop_early = False
 
129
    
 
130
    def __init__(self, stream, descriptions, verbosity, pb=None):
 
131
        unittest._TextTestResult.__init__(self, stream, descriptions, verbosity)
 
132
        self.pb = pb
 
133
    
 
134
    def extractBenchmarkTime(self, testCase):
 
135
        """Add a benchmark time for the current test case."""
 
136
        self._benchmarkTime = getattr(testCase, "_benchtime", None)
 
137
    
 
138
    def _elapsedTestTimeString(self):
 
139
        """Return a time string for the overall time the current test has taken."""
 
140
        return self._formatTime(time.time() - self._start_time)
 
141
 
 
142
    def _testTimeString(self):
 
143
        if self._benchmarkTime is not None:
 
144
            return "%s/%s" % (
 
145
                self._formatTime(self._benchmarkTime),
 
146
                self._elapsedTestTimeString())
 
147
        else:
 
148
            return "      %s" % self._elapsedTestTimeString()
 
149
 
 
150
    def _formatTime(self, seconds):
 
151
        """Format seconds as milliseconds with leading spaces."""
 
152
        return "%5dms" % (1000 * seconds)
 
153
 
 
154
    def _ellipsise_unimportant_words(self, a_string, final_width,
 
155
                                   keep_start=False):
 
156
        """Add ellipses (sp?) for overly long strings.
 
157
        
 
158
        :param keep_start: If true preserve the start of a_string rather
 
159
                           than the end of it.
 
160
        """
 
161
        if keep_start:
 
162
            if len(a_string) > final_width:
 
163
                result = a_string[:final_width-3] + '...'
 
164
            else:
 
165
                result = a_string
 
166
        else:
 
167
            if len(a_string) > final_width:
 
168
                result = '...' + a_string[3-final_width:]
 
169
            else:
 
170
                result = a_string
 
171
        return result.ljust(final_width)
 
172
 
 
173
    def startTest(self, test):
 
174
        unittest.TestResult.startTest(self, test)
 
175
        # In a short description, the important words are in
 
176
        # the beginning, but in an id, the important words are
 
177
        # at the end
 
178
        SHOW_DESCRIPTIONS = False
 
179
 
 
180
        if not self.showAll and self.dots and self.pb is not None:
 
181
            final_width = 13
 
182
        else:
 
183
            final_width = osutils.terminal_width()
 
184
            final_width = final_width - 15 - 8
 
185
        what = None
 
186
        if SHOW_DESCRIPTIONS:
 
187
            what = test.shortDescription()
 
188
            if what:
 
189
                what = self._ellipsise_unimportant_words(what, final_width, keep_start=True)
 
190
        if what is None:
 
191
            what = test.id()
 
192
            if what.startswith('bzrlib.tests.'):
 
193
                what = what[13:]
 
194
            what = self._ellipsise_unimportant_words(what, final_width)
 
195
        if self.showAll:
 
196
            self.stream.write(what)
 
197
        elif self.dots and self.pb is not None:
 
198
            self.pb.update(what, self.testsRun - 1, None)
 
199
        self.stream.flush()
 
200
        self._recordTestStartTime()
 
201
 
 
202
    def _recordTestStartTime(self):
 
203
        """Record that a test has started."""
 
204
        self._start_time = time.time()
 
205
 
 
206
    def addError(self, test, err):
 
207
        if isinstance(err[1], TestSkipped):
 
208
            return self.addSkipped(test, err)    
 
209
        unittest.TestResult.addError(self, test, err)
 
210
        self.extractBenchmarkTime(test)
 
211
        if self.showAll:
 
212
            self.stream.writeln("ERROR %s" % self._testTimeString())
 
213
        elif self.dots and self.pb is None:
 
214
            self.stream.write('E')
 
215
        elif self.dots:
 
216
            self.pb.update(self._ellipsise_unimportant_words('ERROR', 13), self.testsRun, None)
 
217
        self.stream.flush()
 
218
        if self.stop_early:
 
219
            self.stop()
 
220
 
 
221
    def addFailure(self, test, err):
 
222
        unittest.TestResult.addFailure(self, test, err)
 
223
        self.extractBenchmarkTime(test)
 
224
        if self.showAll:
 
225
            self.stream.writeln(" FAIL %s" % self._testTimeString())
 
226
        elif self.dots and self.pb is None:
 
227
            self.stream.write('F')
 
228
        elif self.dots:
 
229
            self.pb.update(self._ellipsise_unimportant_words('FAIL', 13), self.testsRun, None)
 
230
        self.stream.flush()
 
231
        if self.stop_early:
 
232
            self.stop()
 
233
 
 
234
    def addSuccess(self, test):
 
235
        self.extractBenchmarkTime(test)
 
236
        if self.showAll:
 
237
            self.stream.writeln('   OK %s' % self._testTimeString())
 
238
            for bench_called, stats in getattr(test, '_benchcalls', []):
 
239
                self.stream.writeln('LSProf output for %s(%s, %s)' % bench_called)
 
240
                stats.pprint(file=self.stream)
 
241
        elif self.dots and self.pb is None:
 
242
            self.stream.write('~')
 
243
        elif self.dots:
 
244
            self.pb.update(self._ellipsise_unimportant_words('OK', 13), self.testsRun, None)
 
245
        self.stream.flush()
 
246
        unittest.TestResult.addSuccess(self, test)
 
247
 
 
248
    def addSkipped(self, test, skip_excinfo):
 
249
        self.extractBenchmarkTime(test)
 
250
        if self.showAll:
 
251
            print >>self.stream, ' SKIP %s' % self._testTimeString()
 
252
            print >>self.stream, '     %s' % skip_excinfo[1]
 
253
        elif self.dots and self.pb is None:
 
254
            self.stream.write('S')
 
255
        elif self.dots:
 
256
            self.pb.update(self._ellipsise_unimportant_words('SKIP', 13), self.testsRun, None)
 
257
        self.stream.flush()
 
258
        # seems best to treat this as success from point-of-view of unittest
 
259
        # -- it actually does nothing so it barely matters :)
 
260
        unittest.TestResult.addSuccess(self, test)
 
261
 
 
262
    def printErrorList(self, flavour, errors):
 
263
        for test, err in errors:
 
264
            self.stream.writeln(self.separator1)
 
265
            self.stream.writeln("%s: %s" % (flavour, self.getDescription(test)))
 
266
            if getattr(test, '_get_log', None) is not None:
 
267
                print >>self.stream
 
268
                print >>self.stream, \
 
269
                        ('vvvv[log from %s]' % test.id()).ljust(78,'-')
 
270
                print >>self.stream, test._get_log()
 
271
                print >>self.stream, \
 
272
                        ('^^^^[log from %s]' % test.id()).ljust(78,'-')
 
273
            self.stream.writeln(self.separator2)
 
274
            self.stream.writeln("%s" % err)
 
275
 
 
276
 
 
277
class TextTestRunner(object):
 
278
    stop_on_failure = False
 
279
 
 
280
    def __init__(self,
 
281
                 stream=sys.stderr,
 
282
                 descriptions=0,
 
283
                 verbosity=1,
 
284
                 keep_output=False,
 
285
                 pb=None):
 
286
        self.stream = unittest._WritelnDecorator(stream)
 
287
        self.descriptions = descriptions
 
288
        self.verbosity = verbosity
 
289
        self.keep_output = keep_output
 
290
        self.pb = pb
 
291
 
 
292
    def _makeResult(self):
 
293
        result = _MyResult(self.stream,
 
294
                           self.descriptions,
 
295
                           self.verbosity,
 
296
                           pb=self.pb)
 
297
        result.stop_early = self.stop_on_failure
 
298
        return result
 
299
 
 
300
    def run(self, test):
 
301
        "Run the given test case or test suite."
 
302
        result = self._makeResult()
 
303
        startTime = time.time()
 
304
        if self.pb is not None:
 
305
            self.pb.update('Running tests', 0, test.countTestCases())
 
306
        test.run(result)
 
307
        stopTime = time.time()
 
308
        timeTaken = stopTime - startTime
 
309
        result.printErrors()
 
310
        self.stream.writeln(result.separator2)
 
311
        run = result.testsRun
 
312
        self.stream.writeln("Ran %d test%s in %.3fs" %
 
313
                            (run, run != 1 and "s" or "", timeTaken))
 
314
        self.stream.writeln()
 
315
        if not result.wasSuccessful():
 
316
            self.stream.write("FAILED (")
 
317
            failed, errored = map(len, (result.failures, result.errors))
 
318
            if failed:
 
319
                self.stream.write("failures=%d" % failed)
 
320
            if errored:
 
321
                if failed: self.stream.write(", ")
 
322
                self.stream.write("errors=%d" % errored)
 
323
            self.stream.writeln(")")
 
324
        else:
 
325
            self.stream.writeln("OK")
 
326
        if self.pb is not None:
 
327
            self.pb.update('Cleaning up', 0, 1)
 
328
        # This is still a little bogus, 
 
329
        # but only a little. Folk not using our testrunner will
 
330
        # have to delete their temp directories themselves.
 
331
        test_root = TestCaseInTempDir.TEST_ROOT
 
332
        if result.wasSuccessful() or not self.keep_output:
 
333
            if test_root is not None:
 
334
                # If LANG=C we probably have created some bogus paths
 
335
                # which rmtree(unicode) will fail to delete
 
336
                # so make sure we are using rmtree(str) to delete everything
 
337
                osutils.rmtree(test_root.encode(
 
338
                    sys.getfilesystemencoding()))
 
339
        else:
 
340
            if self.pb is not None:
 
341
                self.pb.note("Failed tests working directories are in '%s'\n",
 
342
                             test_root)
 
343
            else:
 
344
                self.stream.writeln(
 
345
                    "Failed tests working directories are in '%s'\n" %
 
346
                    test_root)
 
347
        TestCaseInTempDir.TEST_ROOT = None
 
348
        if self.pb is not None:
 
349
            self.pb.clear()
 
350
        return result
 
351
 
 
352
 
 
353
def iter_suite_tests(suite):
 
354
    """Return all tests in a suite, recursing through nested suites"""
 
355
    for item in suite._tests:
 
356
        if isinstance(item, unittest.TestCase):
 
357
            yield item
 
358
        elif isinstance(item, unittest.TestSuite):
 
359
            for r in iter_suite_tests(item):
 
360
                yield r
 
361
        else:
 
362
            raise Exception('unknown object %r inside test suite %r'
 
363
                            % (item, suite))
 
364
 
 
365
 
 
366
class TestSkipped(Exception):
 
367
    """Indicates that a test was intentionally skipped, rather than failing."""
 
368
    # XXX: Not used yet
 
369
 
 
370
 
 
371
class CommandFailed(Exception):
 
372
    pass
 
373
 
 
374
 
 
375
class StringIOWrapper(object):
 
376
    """A wrapper around cStringIO which just adds an encoding attribute.
 
377
    
 
378
    Internally we can check sys.stdout to see what the output encoding
 
379
    should be. However, cStringIO has no encoding attribute that we can
 
380
    set. So we wrap it instead.
 
381
    """
 
382
    encoding='ascii'
 
383
    _cstring = None
 
384
 
 
385
    def __init__(self, s=None):
 
386
        if s is not None:
 
387
            self.__dict__['_cstring'] = StringIO(s)
 
388
        else:
 
389
            self.__dict__['_cstring'] = StringIO()
 
390
 
 
391
    def __getattr__(self, name, getattr=getattr):
 
392
        return getattr(self.__dict__['_cstring'], name)
 
393
 
 
394
    def __setattr__(self, name, val):
 
395
        if name == 'encoding':
 
396
            self.__dict__['encoding'] = val
 
397
        else:
 
398
            return setattr(self._cstring, name, val)
 
399
 
 
400
 
 
401
class TestCase(unittest.TestCase):
 
402
    """Base class for bzr unit tests.
 
403
    
 
404
    Tests that need access to disk resources should subclass 
 
405
    TestCaseInTempDir not TestCase.
 
406
 
 
407
    Error and debug log messages are redirected from their usual
 
408
    location into a temporary file, the contents of which can be
 
409
    retrieved by _get_log().  We use a real OS file, not an in-memory object,
 
410
    so that it can also capture file IO.  When the test completes this file
 
411
    is read into memory and removed from disk.
 
412
       
 
413
    There are also convenience functions to invoke bzr's command-line
 
414
    routine, and to build and check bzr trees.
 
415
   
 
416
    In addition to the usual method of overriding tearDown(), this class also
 
417
    allows subclasses to register functions into the _cleanups list, which is
 
418
    run in order as the object is torn down.  It's less likely this will be
 
419
    accidentally overlooked.
 
420
    """
 
421
 
 
422
    _log_file_name = None
 
423
    _log_contents = ''
 
424
    # record lsprof data when performing benchmark calls.
 
425
    _gather_lsprof_in_benchmarks = False
 
426
 
 
427
    def __init__(self, methodName='testMethod'):
 
428
        super(TestCase, self).__init__(methodName)
 
429
        self._cleanups = []
 
430
 
 
431
    def setUp(self):
 
432
        unittest.TestCase.setUp(self)
 
433
        self._cleanEnvironment()
 
434
        bzrlib.trace.disable_default_logging()
 
435
        self._startLogFile()
 
436
        self._benchcalls = []
 
437
        self._benchtime = None
 
438
 
 
439
    def _ndiff_strings(self, a, b):
 
440
        """Return ndiff between two strings containing lines.
 
441
        
 
442
        A trailing newline is added if missing to make the strings
 
443
        print properly."""
 
444
        if b and b[-1] != '\n':
 
445
            b += '\n'
 
446
        if a and a[-1] != '\n':
 
447
            a += '\n'
 
448
        difflines = difflib.ndiff(a.splitlines(True),
 
449
                                  b.splitlines(True),
 
450
                                  linejunk=lambda x: False,
 
451
                                  charjunk=lambda x: False)
 
452
        return ''.join(difflines)
 
453
 
 
454
    def assertEqualDiff(self, a, b, message=None):
 
455
        """Assert two texts are equal, if not raise an exception.
 
456
        
 
457
        This is intended for use with multi-line strings where it can 
 
458
        be hard to find the differences by eye.
 
459
        """
 
460
        # TODO: perhaps override assertEquals to call this for strings?
 
461
        if a == b:
 
462
            return
 
463
        if message is None:
 
464
            message = "texts not equal:\n"
 
465
        raise AssertionError(message + 
 
466
                             self._ndiff_strings(a, b))      
 
467
        
 
468
    def assertEqualMode(self, mode, mode_test):
 
469
        self.assertEqual(mode, mode_test,
 
470
                         'mode mismatch %o != %o' % (mode, mode_test))
 
471
 
 
472
    def assertStartsWith(self, s, prefix):
 
473
        if not s.startswith(prefix):
 
474
            raise AssertionError('string %r does not start with %r' % (s, prefix))
 
475
 
 
476
    def assertEndsWith(self, s, suffix):
 
477
        """Asserts that s ends with suffix."""
 
478
        if not s.endswith(suffix):
 
479
            raise AssertionError('string %r does not end with %r' % (s, suffix))
 
480
 
 
481
    def assertContainsRe(self, haystack, needle_re):
 
482
        """Assert that a contains something matching a regular expression."""
 
483
        if not re.search(needle_re, haystack):
 
484
            raise AssertionError('pattern "%s" not found in "%s"'
 
485
                    % (needle_re, haystack))
 
486
 
 
487
    def assertNotContainsRe(self, haystack, needle_re):
 
488
        """Assert that a does not match a regular expression"""
 
489
        if re.search(needle_re, haystack):
 
490
            raise AssertionError('pattern "%s" found in "%s"'
 
491
                    % (needle_re, haystack))
 
492
 
 
493
    def assertSubset(self, sublist, superlist):
 
494
        """Assert that every entry in sublist is present in superlist."""
 
495
        missing = []
 
496
        for entry in sublist:
 
497
            if entry not in superlist:
 
498
                missing.append(entry)
 
499
        if len(missing) > 0:
 
500
            raise AssertionError("value(s) %r not present in container %r" % 
 
501
                                 (missing, superlist))
 
502
 
 
503
    def assertIs(self, left, right):
 
504
        if not (left is right):
 
505
            raise AssertionError("%r is not %r." % (left, right))
 
506
 
 
507
    def assertTransportMode(self, transport, path, mode):
 
508
        """Fail if a path does not have mode mode.
 
509
        
 
510
        If modes are not supported on this transport, the assertion is ignored.
 
511
        """
 
512
        if not transport._can_roundtrip_unix_modebits():
 
513
            return
 
514
        path_stat = transport.stat(path)
 
515
        actual_mode = stat.S_IMODE(path_stat.st_mode)
 
516
        self.assertEqual(mode, actual_mode,
 
517
            'mode of %r incorrect (%o != %o)' % (path, mode, actual_mode))
 
518
 
 
519
    def assertIsInstance(self, obj, kls):
 
520
        """Fail if obj is not an instance of kls"""
 
521
        if not isinstance(obj, kls):
 
522
            self.fail("%r is an instance of %s rather than %s" % (
 
523
                obj, obj.__class__, kls))
 
524
 
 
525
    def _startLogFile(self):
 
526
        """Send bzr and test log messages to a temporary file.
 
527
 
 
528
        The file is removed as the test is torn down.
 
529
        """
 
530
        fileno, name = tempfile.mkstemp(suffix='.log', prefix='testbzr')
 
531
        encoder, decoder, stream_reader, stream_writer = codecs.lookup('UTF-8')
 
532
        self._log_file = stream_writer(os.fdopen(fileno, 'w+'))
 
533
        self._log_nonce = bzrlib.trace.enable_test_log(self._log_file)
 
534
        self._log_file_name = name
 
535
        self.addCleanup(self._finishLogFile)
 
536
 
 
537
    def _finishLogFile(self):
 
538
        """Finished with the log file.
 
539
 
 
540
        Read contents into memory, close, and delete.
 
541
        """
 
542
        bzrlib.trace.disable_test_log(self._log_nonce)
 
543
        self._log_file.seek(0)
 
544
        self._log_contents = self._log_file.read()
 
545
        self._log_file.close()
 
546
        os.remove(self._log_file_name)
 
547
        self._log_file = self._log_file_name = None
 
548
 
 
549
    def addCleanup(self, callable):
 
550
        """Arrange to run a callable when this case is torn down.
 
551
 
 
552
        Callables are run in the reverse of the order they are registered, 
 
553
        ie last-in first-out.
 
554
        """
 
555
        if callable in self._cleanups:
 
556
            raise ValueError("cleanup function %r already registered on %s" 
 
557
                    % (callable, self))
 
558
        self._cleanups.append(callable)
 
559
 
 
560
    def _cleanEnvironment(self):
 
561
        new_env = {
 
562
            'HOME': os.getcwd(),
 
563
            'APPDATA': os.getcwd(),
 
564
            'BZREMAIL': None,
 
565
            'EMAIL': None,
 
566
        }
 
567
        self.__old_env = {}
 
568
        self.addCleanup(self._restoreEnvironment)
 
569
        for name, value in new_env.iteritems():
 
570
            self._captureVar(name, value)
 
571
 
 
572
 
 
573
    def _captureVar(self, name, newvalue):
 
574
        """Set an environment variable, preparing it to be reset when finished."""
 
575
        self.__old_env[name] = os.environ.get(name, None)
 
576
        if newvalue is None:
 
577
            if name in os.environ:
 
578
                del os.environ[name]
 
579
        else:
 
580
            os.environ[name] = newvalue
 
581
 
 
582
    @staticmethod
 
583
    def _restoreVar(name, value):
 
584
        if value is None:
 
585
            if name in os.environ:
 
586
                del os.environ[name]
 
587
        else:
 
588
            os.environ[name] = value
 
589
 
 
590
    def _restoreEnvironment(self):
 
591
        for name, value in self.__old_env.iteritems():
 
592
            self._restoreVar(name, value)
 
593
 
 
594
    def tearDown(self):
 
595
        self._runCleanups()
 
596
        unittest.TestCase.tearDown(self)
 
597
 
 
598
    def time(self, callable, *args, **kwargs):
 
599
        """Run callable and accrue the time it takes to the benchmark time.
 
600
        
 
601
        If lsprofiling is enabled (i.e. by --lsprof-time to bzr selftest) then
 
602
        this will cause lsprofile statistics to be gathered and stored in
 
603
        self._benchcalls.
 
604
        """
 
605
        if self._benchtime is None:
 
606
            self._benchtime = 0
 
607
        start = time.time()
 
608
        try:
 
609
            if not self._gather_lsprof_in_benchmarks:
 
610
                return callable(*args, **kwargs)
 
611
            else:
 
612
                # record this benchmark
 
613
                ret, stats = bzrlib.lsprof.profile(callable, *args, **kwargs)
 
614
                stats.sort()
 
615
                self._benchcalls.append(((callable, args, kwargs), stats))
 
616
                return ret
 
617
        finally:
 
618
            self._benchtime += time.time() - start
 
619
 
 
620
    def _runCleanups(self):
 
621
        """Run registered cleanup functions. 
 
622
 
 
623
        This should only be called from TestCase.tearDown.
 
624
        """
 
625
        # TODO: Perhaps this should keep running cleanups even if 
 
626
        # one of them fails?
 
627
        for cleanup_fn in reversed(self._cleanups):
 
628
            cleanup_fn()
 
629
 
 
630
    def log(self, *args):
 
631
        mutter(*args)
 
632
 
 
633
    def _get_log(self):
 
634
        """Return as a string the log for this test"""
 
635
        if self._log_file_name:
 
636
            return open(self._log_file_name).read()
 
637
        else:
 
638
            return self._log_contents
 
639
        # TODO: Delete the log after it's been read in
 
640
 
 
641
    def capture(self, cmd, retcode=0):
 
642
        """Shortcut that splits cmd into words, runs, and returns stdout"""
 
643
        return self.run_bzr_captured(cmd.split(), retcode=retcode)[0]
 
644
 
 
645
    def run_bzr_captured(self, argv, retcode=0, encoding=None, stdin=None):
 
646
        """Invoke bzr and return (stdout, stderr).
 
647
 
 
648
        Useful for code that wants to check the contents of the
 
649
        output, the way error messages are presented, etc.
 
650
 
 
651
        This should be the main method for tests that want to exercise the
 
652
        overall behavior of the bzr application (rather than a unit test
 
653
        or a functional test of the library.)
 
654
 
 
655
        Much of the old code runs bzr by forking a new copy of Python, but
 
656
        that is slower, harder to debug, and generally not necessary.
 
657
 
 
658
        This runs bzr through the interface that catches and reports
 
659
        errors, and with logging set to something approximating the
 
660
        default, so that error reporting can be checked.
 
661
 
 
662
        :param argv: arguments to invoke bzr
 
663
        :param retcode: expected return code, or None for don't-care.
 
664
        :param encoding: encoding for sys.stdout and sys.stderr
 
665
        :param stdin: A string to be used as stdin for the command.
 
666
        """
 
667
        if encoding is None:
 
668
            encoding = bzrlib.user_encoding
 
669
        if stdin is not None:
 
670
            stdin = StringIO(stdin)
 
671
        stdout = StringIOWrapper()
 
672
        stderr = StringIOWrapper()
 
673
        stdout.encoding = encoding
 
674
        stderr.encoding = encoding
 
675
 
 
676
        self.log('run bzr: %r', argv)
 
677
        # FIXME: don't call into logging here
 
678
        handler = logging.StreamHandler(stderr)
 
679
        handler.setFormatter(bzrlib.trace.QuietFormatter())
 
680
        handler.setLevel(logging.INFO)
 
681
        logger = logging.getLogger('')
 
682
        logger.addHandler(handler)
 
683
        old_ui_factory = bzrlib.ui.ui_factory
 
684
        bzrlib.ui.ui_factory = bzrlib.tests.blackbox.TestUIFactory(
 
685
            stdout=stdout,
 
686
            stderr=stderr)
 
687
        bzrlib.ui.ui_factory.stdin = stdin
 
688
        try:
 
689
            result = self.apply_redirected(stdin, stdout, stderr,
 
690
                                           bzrlib.commands.run_bzr_catch_errors,
 
691
                                           argv)
 
692
        finally:
 
693
            logger.removeHandler(handler)
 
694
            bzrlib.ui.ui_factory = old_ui_factory
 
695
 
 
696
        out = stdout.getvalue()
 
697
        err = stderr.getvalue()
 
698
        if out:
 
699
            self.log('output:\n%r', out)
 
700
        if err:
 
701
            self.log('errors:\n%r', err)
 
702
        if retcode is not None:
 
703
            self.assertEquals(retcode, result)
 
704
        return out, err
 
705
 
 
706
    def run_bzr(self, *args, **kwargs):
 
707
        """Invoke bzr, as if it were run from the command line.
 
708
 
 
709
        This should be the main method for tests that want to exercise the
 
710
        overall behavior of the bzr application (rather than a unit test
 
711
        or a functional test of the library.)
 
712
 
 
713
        This sends the stdout/stderr results into the test's log,
 
714
        where it may be useful for debugging.  See also run_captured.
 
715
 
 
716
        :param stdin: A string to be used as stdin for the command.
 
717
        """
 
718
        retcode = kwargs.pop('retcode', 0)
 
719
        encoding = kwargs.pop('encoding', None)
 
720
        stdin = kwargs.pop('stdin', None)
 
721
        return self.run_bzr_captured(args, retcode=retcode, encoding=encoding, stdin=stdin)
 
722
 
 
723
    def run_bzr_decode(self, *args, **kwargs):
 
724
        if kwargs.has_key('encoding'):
 
725
            encoding = kwargs['encoding']
 
726
        else:
 
727
            encoding = bzrlib.user_encoding
 
728
        return self.run_bzr(*args, **kwargs)[0].decode(encoding)
 
729
 
 
730
    def run_bzr_subprocess(self, *args, **kwargs):
 
731
        """Run bzr in a subprocess for testing.
 
732
 
 
733
        This starts a new Python interpreter and runs bzr in there. 
 
734
        This should only be used for tests that have a justifiable need for
 
735
        this isolation: e.g. they are testing startup time, or signal
 
736
        handling, or early startup code, etc.  Subprocess code can't be 
 
737
        profiled or debugged so easily.
 
738
 
 
739
        :param retcode: The status code that is expected.  Defaults to 0.  If
 
740
        None is supplied, the status code is not checked.
 
741
        """
 
742
        bzr_path = os.path.dirname(os.path.dirname(bzrlib.__file__))+'/bzr'
 
743
        args = list(args)
 
744
        process = Popen([sys.executable, bzr_path]+args, stdout=PIPE, 
 
745
                         stderr=PIPE)
 
746
        out = process.stdout.read()
 
747
        err = process.stderr.read()
 
748
        retcode = process.wait()
 
749
        supplied_retcode = kwargs.get('retcode', 0)
 
750
        if supplied_retcode is not None:
 
751
            assert supplied_retcode == retcode
 
752
        return [out, err]
 
753
 
 
754
    def check_inventory_shape(self, inv, shape):
 
755
        """Compare an inventory to a list of expected names.
 
756
 
 
757
        Fail if they are not precisely equal.
 
758
        """
 
759
        extras = []
 
760
        shape = list(shape)             # copy
 
761
        for path, ie in inv.entries():
 
762
            name = path.replace('\\', '/')
 
763
            if ie.kind == 'dir':
 
764
                name = name + '/'
 
765
            if name in shape:
 
766
                shape.remove(name)
 
767
            else:
 
768
                extras.append(name)
 
769
        if shape:
 
770
            self.fail("expected paths not found in inventory: %r" % shape)
 
771
        if extras:
 
772
            self.fail("unexpected paths found in inventory: %r" % extras)
 
773
 
 
774
    def apply_redirected(self, stdin=None, stdout=None, stderr=None,
 
775
                         a_callable=None, *args, **kwargs):
 
776
        """Call callable with redirected std io pipes.
 
777
 
 
778
        Returns the return code."""
 
779
        if not callable(a_callable):
 
780
            raise ValueError("a_callable must be callable.")
 
781
        if stdin is None:
 
782
            stdin = StringIO("")
 
783
        if stdout is None:
 
784
            if getattr(self, "_log_file", None) is not None:
 
785
                stdout = self._log_file
 
786
            else:
 
787
                stdout = StringIO()
 
788
        if stderr is None:
 
789
            if getattr(self, "_log_file", None is not None):
 
790
                stderr = self._log_file
 
791
            else:
 
792
                stderr = StringIO()
 
793
        real_stdin = sys.stdin
 
794
        real_stdout = sys.stdout
 
795
        real_stderr = sys.stderr
 
796
        try:
 
797
            sys.stdout = stdout
 
798
            sys.stderr = stderr
 
799
            sys.stdin = stdin
 
800
            return a_callable(*args, **kwargs)
 
801
        finally:
 
802
            sys.stdout = real_stdout
 
803
            sys.stderr = real_stderr
 
804
            sys.stdin = real_stdin
 
805
 
 
806
    def merge(self, branch_from, wt_to):
 
807
        """A helper for tests to do a ui-less merge.
 
808
 
 
809
        This should move to the main library when someone has time to integrate
 
810
        it in.
 
811
        """
 
812
        # minimal ui-less merge.
 
813
        wt_to.branch.fetch(branch_from)
 
814
        base_rev = common_ancestor(branch_from.last_revision(),
 
815
                                   wt_to.branch.last_revision(),
 
816
                                   wt_to.branch.repository)
 
817
        merge_inner(wt_to.branch, branch_from.basis_tree(), 
 
818
                    wt_to.branch.repository.revision_tree(base_rev),
 
819
                    this_tree=wt_to)
 
820
        wt_to.add_pending_merge(branch_from.last_revision())
 
821
 
 
822
 
 
823
BzrTestBase = TestCase
 
824
 
 
825
     
 
826
class TestCaseInTempDir(TestCase):
 
827
    """Derived class that runs a test within a temporary directory.
 
828
 
 
829
    This is useful for tests that need to create a branch, etc.
 
830
 
 
831
    The directory is created in a slightly complex way: for each
 
832
    Python invocation, a new temporary top-level directory is created.
 
833
    All test cases create their own directory within that.  If the
 
834
    tests complete successfully, the directory is removed.
 
835
 
 
836
    InTempDir is an old alias for FunctionalTestCase.
 
837
    """
 
838
 
 
839
    TEST_ROOT = None
 
840
    _TEST_NAME = 'test'
 
841
    OVERRIDE_PYTHON = 'python'
 
842
 
 
843
    def check_file_contents(self, filename, expect):
 
844
        self.log("check contents of file %s" % filename)
 
845
        contents = file(filename, 'r').read()
 
846
        if contents != expect:
 
847
            self.log("expected: %r" % expect)
 
848
            self.log("actually: %r" % contents)
 
849
            self.fail("contents of %s not as expected" % filename)
 
850
 
 
851
    def _make_test_root(self):
 
852
        if TestCaseInTempDir.TEST_ROOT is not None:
 
853
            return
 
854
        i = 0
 
855
        while True:
 
856
            root = u'test%04d.tmp' % i
 
857
            try:
 
858
                os.mkdir(root)
 
859
            except OSError, e:
 
860
                if e.errno == errno.EEXIST:
 
861
                    i += 1
 
862
                    continue
 
863
                else:
 
864
                    raise
 
865
            # successfully created
 
866
            TestCaseInTempDir.TEST_ROOT = osutils.abspath(root)
 
867
            break
 
868
        # make a fake bzr directory there to prevent any tests propagating
 
869
        # up onto the source directory's real branch
 
870
        bzrdir.BzrDir.create_standalone_workingtree(TestCaseInTempDir.TEST_ROOT)
 
871
 
 
872
    def setUp(self):
 
873
        super(TestCaseInTempDir, self).setUp()
 
874
        self._make_test_root()
 
875
        _currentdir = os.getcwdu()
 
876
        # shorten the name, to avoid test failures due to path length
 
877
        short_id = self.id().replace('bzrlib.tests.', '') \
 
878
                   .replace('__main__.', '')[-100:]
 
879
        # it's possible the same test class is run several times for
 
880
        # parameterized tests, so make sure the names don't collide.  
 
881
        i = 0
 
882
        while True:
 
883
            if i > 0:
 
884
                candidate_dir = '%s/%s.%d' % (self.TEST_ROOT, short_id, i)
 
885
            else:
 
886
                candidate_dir = '%s/%s' % (self.TEST_ROOT, short_id)
 
887
            if os.path.exists(candidate_dir):
 
888
                i = i + 1
 
889
                continue
 
890
            else:
 
891
                self.test_dir = candidate_dir
 
892
                os.mkdir(self.test_dir)
 
893
                os.chdir(self.test_dir)
 
894
                break
 
895
        os.environ['HOME'] = self.test_dir
 
896
        os.environ['APPDATA'] = self.test_dir
 
897
        def _leaveDirectory():
 
898
            os.chdir(_currentdir)
 
899
        self.addCleanup(_leaveDirectory)
 
900
        
 
901
    def build_tree(self, shape, line_endings='native', transport=None):
 
902
        """Build a test tree according to a pattern.
 
903
 
 
904
        shape is a sequence of file specifications.  If the final
 
905
        character is '/', a directory is created.
 
906
 
 
907
        This doesn't add anything to a branch.
 
908
        :param line_endings: Either 'binary' or 'native'
 
909
                             in binary mode, exact contents are written
 
910
                             in native mode, the line endings match the
 
911
                             default platform endings.
 
912
 
 
913
        :param transport: A transport to write to, for building trees on 
 
914
                          VFS's. If the transport is readonly or None,
 
915
                          "." is opened automatically.
 
916
        """
 
917
        # XXX: It's OK to just create them using forward slashes on windows?
 
918
        if transport is None or transport.is_readonly():
 
919
            transport = get_transport(".")
 
920
        for name in shape:
 
921
            self.assert_(isinstance(name, basestring))
 
922
            if name[-1] == '/':
 
923
                transport.mkdir(urlutils.escape(name[:-1]))
 
924
            else:
 
925
                if line_endings == 'binary':
 
926
                    end = '\n'
 
927
                elif line_endings == 'native':
 
928
                    end = os.linesep
 
929
                else:
 
930
                    raise errors.BzrError('Invalid line ending request %r' % (line_endings,))
 
931
                content = "contents of %s%s" % (name.encode('utf-8'), end)
 
932
                transport.put(urlutils.escape(name), StringIO(content))
 
933
 
 
934
    def build_tree_contents(self, shape):
 
935
        build_tree_contents(shape)
 
936
 
 
937
    def failUnlessExists(self, path):
 
938
        """Fail unless path, which may be abs or relative, exists."""
 
939
        self.failUnless(osutils.lexists(path))
 
940
 
 
941
    def failIfExists(self, path):
 
942
        """Fail if path, which may be abs or relative, exists."""
 
943
        self.failIf(osutils.lexists(path))
 
944
        
 
945
    def assertFileEqual(self, content, path):
 
946
        """Fail if path does not contain 'content'."""
 
947
        self.failUnless(osutils.lexists(path))
 
948
        # TODO: jam 20060427 Shouldn't this be 'rb'?
 
949
        self.assertEqualDiff(content, open(path, 'r').read())
 
950
 
 
951
 
 
952
class TestCaseWithTransport(TestCaseInTempDir):
 
953
    """A test case that provides get_url and get_readonly_url facilities.
 
954
 
 
955
    These back onto two transport servers, one for readonly access and one for
 
956
    read write access.
 
957
 
 
958
    If no explicit class is provided for readonly access, a
 
959
    ReadonlyTransportDecorator is used instead which allows the use of non disk
 
960
    based read write transports.
 
961
 
 
962
    If an explicit class is provided for readonly access, that server and the 
 
963
    readwrite one must both define get_url() as resolving to os.getcwd().
 
964
    """
 
965
 
 
966
    def __init__(self, methodName='testMethod'):
 
967
        super(TestCaseWithTransport, self).__init__(methodName)
 
968
        self.__readonly_server = None
 
969
        self.__server = None
 
970
        self.transport_server = default_transport
 
971
        self.transport_readonly_server = None
 
972
 
 
973
    def get_readonly_url(self, relpath=None):
 
974
        """Get a URL for the readonly transport.
 
975
 
 
976
        This will either be backed by '.' or a decorator to the transport 
 
977
        used by self.get_url()
 
978
        relpath provides for clients to get a path relative to the base url.
 
979
        These should only be downwards relative, not upwards.
 
980
        """
 
981
        base = self.get_readonly_server().get_url()
 
982
        if relpath is not None:
 
983
            if not base.endswith('/'):
 
984
                base = base + '/'
 
985
            base = base + relpath
 
986
        return base
 
987
 
 
988
    def get_readonly_server(self):
 
989
        """Get the server instance for the readonly transport
 
990
 
 
991
        This is useful for some tests with specific servers to do diagnostics.
 
992
        """
 
993
        if self.__readonly_server is None:
 
994
            if self.transport_readonly_server is None:
 
995
                # readonly decorator requested
 
996
                # bring up the server
 
997
                self.get_url()
 
998
                self.__readonly_server = ReadonlyServer()
 
999
                self.__readonly_server.setUp(self.__server)
 
1000
            else:
 
1001
                self.__readonly_server = self.transport_readonly_server()
 
1002
                self.__readonly_server.setUp()
 
1003
            self.addCleanup(self.__readonly_server.tearDown)
 
1004
        return self.__readonly_server
 
1005
 
 
1006
    def get_server(self):
 
1007
        """Get the read/write server instance.
 
1008
 
 
1009
        This is useful for some tests with specific servers that need
 
1010
        diagnostics.
 
1011
        """
 
1012
        if self.__server is None:
 
1013
            self.__server = self.transport_server()
 
1014
            self.__server.setUp()
 
1015
            self.addCleanup(self.__server.tearDown)
 
1016
        return self.__server
 
1017
 
 
1018
    def get_url(self, relpath=None):
 
1019
        """Get a URL for the readwrite transport.
 
1020
 
 
1021
        This will either be backed by '.' or to an equivalent non-file based
 
1022
        facility.
 
1023
        relpath provides for clients to get a path relative to the base url.
 
1024
        These should only be downwards relative, not upwards.
 
1025
        """
 
1026
        base = self.get_server().get_url()
 
1027
        if relpath is not None and relpath != '.':
 
1028
            if not base.endswith('/'):
 
1029
                base = base + '/'
 
1030
            base = base + urlutils.escape(relpath)
 
1031
        return base
 
1032
 
 
1033
    def get_transport(self):
 
1034
        """Return a writeable transport for the test scratch space"""
 
1035
        t = get_transport(self.get_url())
 
1036
        self.assertFalse(t.is_readonly())
 
1037
        return t
 
1038
 
 
1039
    def get_readonly_transport(self):
 
1040
        """Return a readonly transport for the test scratch space
 
1041
        
 
1042
        This can be used to test that operations which should only need
 
1043
        readonly access in fact do not try to write.
 
1044
        """
 
1045
        t = get_transport(self.get_readonly_url())
 
1046
        self.assertTrue(t.is_readonly())
 
1047
        return t
 
1048
 
 
1049
    def make_branch(self, relpath, format=None):
 
1050
        """Create a branch on the transport at relpath."""
 
1051
        repo = self.make_repository(relpath, format=format)
 
1052
        return repo.bzrdir.create_branch()
 
1053
 
 
1054
    def make_bzrdir(self, relpath, format=None):
 
1055
        try:
 
1056
            url = self.get_url(relpath)
 
1057
            mutter('relpath %r => url %r', relpath, url)
 
1058
            segments = url.split('/')
 
1059
            if segments and segments[-1] not in ('', '.'):
 
1060
                parent = '/'.join(segments[:-1])
 
1061
                t = get_transport(parent)
 
1062
                try:
 
1063
                    t.mkdir(segments[-1])
 
1064
                except errors.FileExists:
 
1065
                    pass
 
1066
            if format is None:
 
1067
                format=bzrlib.bzrdir.BzrDirFormat.get_default_format()
 
1068
            # FIXME: make this use a single transport someday. RBC 20060418
 
1069
            return format.initialize_on_transport(get_transport(relpath))
 
1070
        except errors.UninitializableFormat:
 
1071
            raise TestSkipped("Format %s is not initializable." % format)
 
1072
 
 
1073
    def make_repository(self, relpath, shared=False, format=None):
 
1074
        """Create a repository on our default transport at relpath."""
 
1075
        made_control = self.make_bzrdir(relpath, format=format)
 
1076
        return made_control.create_repository(shared=shared)
 
1077
 
 
1078
    def make_branch_and_tree(self, relpath, format=None):
 
1079
        """Create a branch on the transport and a tree locally.
 
1080
 
 
1081
        Returns the tree.
 
1082
        """
 
1083
        # TODO: always use the local disk path for the working tree,
 
1084
        # this obviously requires a format that supports branch references
 
1085
        # so check for that by checking bzrdir.BzrDirFormat.get_default_format()
 
1086
        # RBC 20060208
 
1087
        b = self.make_branch(relpath, format=format)
 
1088
        try:
 
1089
            return b.bzrdir.create_workingtree()
 
1090
        except errors.NotLocalUrl:
 
1091
            # new formats - catch No tree error and create
 
1092
            # a branch reference and a checkout.
 
1093
            # old formats at that point - raise TestSkipped.
 
1094
            # TODO: rbc 20060208
 
1095
            return WorkingTreeFormat2().initialize(bzrdir.BzrDir.open(relpath))
 
1096
 
 
1097
    def assertIsDirectory(self, relpath, transport):
 
1098
        """Assert that relpath within transport is a directory.
 
1099
 
 
1100
        This may not be possible on all transports; in that case it propagates
 
1101
        a TransportNotPossible.
 
1102
        """
 
1103
        try:
 
1104
            mode = transport.stat(relpath).st_mode
 
1105
        except errors.NoSuchFile:
 
1106
            self.fail("path %s is not a directory; no such file"
 
1107
                      % (relpath))
 
1108
        if not stat.S_ISDIR(mode):
 
1109
            self.fail("path %s is not a directory; has mode %#o"
 
1110
                      % (relpath, mode))
 
1111
 
 
1112
 
 
1113
class ChrootedTestCase(TestCaseWithTransport):
 
1114
    """A support class that provides readonly urls outside the local namespace.
 
1115
 
 
1116
    This is done by checking if self.transport_server is a MemoryServer. if it
 
1117
    is then we are chrooted already, if it is not then an HttpServer is used
 
1118
    for readonly urls.
 
1119
 
 
1120
    TODO RBC 20060127: make this an option to TestCaseWithTransport so it can
 
1121
                       be used without needed to redo it when a different 
 
1122
                       subclass is in use ?
 
1123
    """
 
1124
 
 
1125
    def setUp(self):
 
1126
        super(ChrootedTestCase, self).setUp()
 
1127
        if not self.transport_server == bzrlib.transport.memory.MemoryServer:
 
1128
            self.transport_readonly_server = bzrlib.transport.http.HttpServer
 
1129
 
 
1130
 
 
1131
def filter_suite_by_re(suite, pattern):
 
1132
    result = TestSuite()
 
1133
    filter_re = re.compile(pattern)
 
1134
    for test in iter_suite_tests(suite):
 
1135
        if filter_re.search(test.id()):
 
1136
            result.addTest(test)
 
1137
    return result
 
1138
 
 
1139
 
 
1140
def run_suite(suite, name='test', verbose=False, pattern=".*",
 
1141
              stop_on_failure=False, keep_output=False,
 
1142
              transport=None, lsprof_timed=None):
 
1143
    TestCaseInTempDir._TEST_NAME = name
 
1144
    TestCase._gather_lsprof_in_benchmarks = lsprof_timed
 
1145
    if verbose:
 
1146
        verbosity = 2
 
1147
        pb = None
 
1148
    else:
 
1149
        verbosity = 1
 
1150
        pb = progress.ProgressBar()
 
1151
    runner = TextTestRunner(stream=sys.stdout,
 
1152
                            descriptions=0,
 
1153
                            verbosity=verbosity,
 
1154
                            keep_output=keep_output,
 
1155
                            pb=pb)
 
1156
    runner.stop_on_failure=stop_on_failure
 
1157
    if pattern != '.*':
 
1158
        suite = filter_suite_by_re(suite, pattern)
 
1159
    result = runner.run(suite)
 
1160
    return result.wasSuccessful()
 
1161
 
 
1162
 
 
1163
def selftest(verbose=False, pattern=".*", stop_on_failure=True,
 
1164
             keep_output=False,
 
1165
             transport=None,
 
1166
             test_suite_factory=None,
 
1167
             lsprof_timed=None):
 
1168
    """Run the whole test suite under the enhanced runner"""
 
1169
    global default_transport
 
1170
    if transport is None:
 
1171
        transport = default_transport
 
1172
    old_transport = default_transport
 
1173
    default_transport = transport
 
1174
    try:
 
1175
        if test_suite_factory is None:
 
1176
            suite = test_suite()
 
1177
        else:
 
1178
            suite = test_suite_factory()
 
1179
        return run_suite(suite, 'testbzr', verbose=verbose, pattern=pattern,
 
1180
                     stop_on_failure=stop_on_failure, keep_output=keep_output,
 
1181
                     transport=transport,
 
1182
                     lsprof_timed=lsprof_timed)
 
1183
    finally:
 
1184
        default_transport = old_transport
 
1185
 
 
1186
 
 
1187
def test_suite():
 
1188
    """Build and return TestSuite for the whole of bzrlib.
 
1189
    
 
1190
    This function can be replaced if you need to change the default test
 
1191
    suite on a global basis, but it is not encouraged.
 
1192
    """
22
1193
    from doctest import DocTestSuite
23
 
    
24
 
    tr = unittest.TextTestRunner(verbosity=2)
25
 
    suite = unittest.TestSuite()
26
 
    import bzrlib.whitebox
27
 
 
28
 
    suite.addTest(TestLoader().loadTestsFromModule(bzrlib.whitebox))
29
 
    
30
 
    for m in bzrlib.store, bzrlib.inventory, bzrlib.branch, bzrlib.osutils, \
31
 
            bzrlib.commands:
 
1194
 
 
1195
    global MODULES_TO_DOCTEST
 
1196
 
 
1197
    testmod_names = [ \
 
1198
                   'bzrlib.tests.test_ancestry',
 
1199
                   'bzrlib.tests.test_api',
 
1200
                   'bzrlib.tests.test_bad_files',
 
1201
                   'bzrlib.tests.test_branch',
 
1202
                   'bzrlib.tests.test_bundle',
 
1203
                   'bzrlib.tests.test_bzrdir',
 
1204
                   'bzrlib.tests.test_command',
 
1205
                   'bzrlib.tests.test_commit',
 
1206
                   'bzrlib.tests.test_commit_merge',
 
1207
                   'bzrlib.tests.test_config',
 
1208
                   'bzrlib.tests.test_conflicts',
 
1209
                   'bzrlib.tests.test_decorators',
 
1210
                   'bzrlib.tests.test_diff',
 
1211
                   'bzrlib.tests.test_doc_generate',
 
1212
                   'bzrlib.tests.test_errors',
 
1213
                   'bzrlib.tests.test_escaped_store',
 
1214
                   'bzrlib.tests.test_fetch',
 
1215
                   'bzrlib.tests.test_gpg',
 
1216
                   'bzrlib.tests.test_graph',
 
1217
                   'bzrlib.tests.test_hashcache',
 
1218
                   'bzrlib.tests.test_http',
 
1219
                   'bzrlib.tests.test_identitymap',
 
1220
                   'bzrlib.tests.test_inv',
 
1221
                   'bzrlib.tests.test_knit',
 
1222
                   'bzrlib.tests.test_lockdir',
 
1223
                   'bzrlib.tests.test_lockable_files',
 
1224
                   'bzrlib.tests.test_log',
 
1225
                   'bzrlib.tests.test_merge',
 
1226
                   'bzrlib.tests.test_merge3',
 
1227
                   'bzrlib.tests.test_merge_core',
 
1228
                   'bzrlib.tests.test_missing',
 
1229
                   'bzrlib.tests.test_msgeditor',
 
1230
                   'bzrlib.tests.test_nonascii',
 
1231
                   'bzrlib.tests.test_options',
 
1232
                   'bzrlib.tests.test_osutils',
 
1233
                   'bzrlib.tests.test_patch',
 
1234
                   'bzrlib.tests.test_patches',
 
1235
                   'bzrlib.tests.test_permissions',
 
1236
                   'bzrlib.tests.test_plugins',
 
1237
                   'bzrlib.tests.test_progress',
 
1238
                   'bzrlib.tests.test_reconcile',
 
1239
                   'bzrlib.tests.test_repository',
 
1240
                   'bzrlib.tests.test_revision',
 
1241
                   'bzrlib.tests.test_revisionnamespaces',
 
1242
                   'bzrlib.tests.test_revprops',
 
1243
                   'bzrlib.tests.test_rio',
 
1244
                   'bzrlib.tests.test_sampler',
 
1245
                   'bzrlib.tests.test_selftest',
 
1246
                   'bzrlib.tests.test_setup',
 
1247
                   'bzrlib.tests.test_sftp_transport',
 
1248
                   'bzrlib.tests.test_smart_add',
 
1249
                   'bzrlib.tests.test_source',
 
1250
                   'bzrlib.tests.test_status',
 
1251
                   'bzrlib.tests.test_store',
 
1252
                   'bzrlib.tests.test_symbol_versioning',
 
1253
                   'bzrlib.tests.test_testament',
 
1254
                   'bzrlib.tests.test_textfile',
 
1255
                   'bzrlib.tests.test_textmerge',
 
1256
                   'bzrlib.tests.test_trace',
 
1257
                   'bzrlib.tests.test_transactions',
 
1258
                   'bzrlib.tests.test_transform',
 
1259
                   'bzrlib.tests.test_transport',
 
1260
                   'bzrlib.tests.test_tsort',
 
1261
                   'bzrlib.tests.test_tuned_gzip',
 
1262
                   'bzrlib.tests.test_ui',
 
1263
                   'bzrlib.tests.test_upgrade',
 
1264
                   'bzrlib.tests.test_urlutils',
 
1265
                   'bzrlib.tests.test_versionedfile',
 
1266
                   'bzrlib.tests.test_weave',
 
1267
                   'bzrlib.tests.test_whitebox',
 
1268
                   'bzrlib.tests.test_workingtree',
 
1269
                   'bzrlib.tests.test_xml',
 
1270
                   ]
 
1271
    test_transport_implementations = [
 
1272
        'bzrlib.tests.test_transport_implementations']
 
1273
 
 
1274
    suite = TestSuite()
 
1275
    loader = TestUtil.TestLoader()
 
1276
    from bzrlib.transport import TransportTestProviderAdapter
 
1277
    adapter = TransportTestProviderAdapter()
 
1278
    adapt_modules(test_transport_implementations, adapter, loader, suite)
 
1279
    suite.addTest(loader.loadTestsFromModuleNames(testmod_names))
 
1280
    for package in packages_to_test():
 
1281
        suite.addTest(package.test_suite())
 
1282
    for m in MODULES_TO_TEST:
 
1283
        suite.addTest(loader.loadTestsFromModule(m))
 
1284
    for m in (MODULES_TO_DOCTEST):
32
1285
        suite.addTest(DocTestSuite(m))
33
 
 
34
 
    result = tr.run(suite)
35
 
    return result.wasSuccessful()
 
1286
    for name, plugin in bzrlib.plugin.all_plugins().items():
 
1287
        if getattr(plugin, 'test_suite', None) is not None:
 
1288
            suite.addTest(plugin.test_suite())
 
1289
    return suite
 
1290
 
 
1291
 
 
1292
def adapt_modules(mods_list, adapter, loader, suite):
 
1293
    """Adapt the modules in mods_list using adapter and add to suite."""
 
1294
    for test in iter_suite_tests(loader.loadTestsFromModuleNames(mods_list)):
 
1295
        suite.addTests(adapter.adapt(test))