~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/tests/__init__.py

Deprecate compare_trees and move its body to InterTree.changes_from.

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005, 2006 by Canonical Ltd
 
2
 
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
 
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
 
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
 
 
18
# TODO: Perhaps there should be an API to find out if bzr running under the
 
19
# test suite -- some plugins might want to avoid making intrusive changes if
 
20
# this is the case.  However, we want behaviour under to test to diverge as
 
21
# little as possible, so this should be used rarely if it's added at all.
 
22
# (Suggestion from j-a-meinel, 2005-11-24)
 
23
 
 
24
# NOTE: Some classes in here use camelCaseNaming() rather than
 
25
# underscore_naming().  That's for consistency with unittest; it's not the
 
26
# general style of bzrlib.  Please continue that consistency when adding e.g.
 
27
# new assertFoo() methods.
 
28
 
 
29
import codecs
 
30
from cStringIO import StringIO
 
31
import difflib
 
32
import doctest
 
33
import errno
 
34
import logging
 
35
import os
 
36
import re
 
37
import shlex
 
38
import stat
 
39
from subprocess import Popen, PIPE
 
40
import sys
 
41
import tempfile
 
42
import unittest
 
43
import time
 
44
 
 
45
 
 
46
import bzrlib.branch
 
47
import bzrlib.bzrdir as bzrdir
 
48
import bzrlib.commands
 
49
import bzrlib.bundle.serializer
 
50
import bzrlib.errors as errors
 
51
import bzrlib.inventory
 
52
import bzrlib.iterablefile
 
53
import bzrlib.lockdir
 
54
try:
 
55
    import bzrlib.lsprof
 
56
except ImportError:
 
57
    # lsprof not available
 
58
    pass
 
59
from bzrlib.merge import merge_inner
 
60
import bzrlib.merge3
 
61
import bzrlib.osutils
 
62
import bzrlib.osutils as osutils
 
63
import bzrlib.plugin
 
64
import bzrlib.progress as progress
 
65
from bzrlib.revision import common_ancestor
 
66
import bzrlib.store
 
67
import bzrlib.trace
 
68
from bzrlib.transport import get_transport
 
69
import bzrlib.transport
 
70
from bzrlib.transport.local import LocalRelpathServer
 
71
from bzrlib.transport.readonly import ReadonlyServer
 
72
from bzrlib.trace import mutter
 
73
from bzrlib.tests import TestUtil
 
74
from bzrlib.tests.TestUtil import (
 
75
                          TestSuite,
 
76
                          TestLoader,
 
77
                          )
 
78
from bzrlib.tests.treeshape import build_tree_contents
 
79
import bzrlib.urlutils as urlutils
 
80
from bzrlib.workingtree import WorkingTree, WorkingTreeFormat2
 
81
 
 
82
default_transport = LocalRelpathServer
 
83
 
 
84
MODULES_TO_TEST = []
 
85
MODULES_TO_DOCTEST = [
 
86
                      bzrlib.branch,
 
87
                      bzrlib.bundle.serializer,
 
88
                      bzrlib.commands,
 
89
                      bzrlib.errors,
 
90
                      bzrlib.inventory,
 
91
                      bzrlib.iterablefile,
 
92
                      bzrlib.lockdir,
 
93
                      bzrlib.merge3,
 
94
                      bzrlib.option,
 
95
                      bzrlib.osutils,
 
96
                      bzrlib.store
 
97
                      ]
 
98
 
 
99
 
 
100
def packages_to_test():
 
101
    """Return a list of packages to test.
 
102
 
 
103
    The packages are not globally imported so that import failures are
 
104
    triggered when running selftest, not when importing the command.
 
105
    """
 
106
    import bzrlib.doc
 
107
    import bzrlib.tests.blackbox
 
108
    import bzrlib.tests.branch_implementations
 
109
    import bzrlib.tests.bzrdir_implementations
 
110
    import bzrlib.tests.interrepository_implementations
 
111
    import bzrlib.tests.interversionedfile_implementations
 
112
    import bzrlib.tests.intertree_implementations
 
113
    import bzrlib.tests.repository_implementations
 
114
    import bzrlib.tests.revisionstore_implementations
 
115
    import bzrlib.tests.tree_implementations
 
116
    import bzrlib.tests.workingtree_implementations
 
117
    return [
 
118
            bzrlib.doc,
 
119
            bzrlib.tests.blackbox,
 
120
            bzrlib.tests.branch_implementations,
 
121
            bzrlib.tests.bzrdir_implementations,
 
122
            bzrlib.tests.interrepository_implementations,
 
123
            bzrlib.tests.interversionedfile_implementations,
 
124
            bzrlib.tests.intertree_implementations,
 
125
            bzrlib.tests.repository_implementations,
 
126
            bzrlib.tests.revisionstore_implementations,
 
127
            bzrlib.tests.tree_implementations,
 
128
            bzrlib.tests.workingtree_implementations,
 
129
            ]
 
130
 
 
131
 
 
132
class _MyResult(unittest._TextTestResult):
 
133
    """Custom TestResult.
 
134
 
 
135
    Shows output in a different format, including displaying runtime for tests.
 
136
    """
 
137
    stop_early = False
 
138
    
 
139
    def __init__(self, stream, descriptions, verbosity, pb=None):
 
140
        unittest._TextTestResult.__init__(self, stream, descriptions, verbosity)
 
141
        self.pb = pb
 
142
    
 
143
    def extractBenchmarkTime(self, testCase):
 
144
        """Add a benchmark time for the current test case."""
 
145
        self._benchmarkTime = getattr(testCase, "_benchtime", None)
 
146
    
 
147
    def _elapsedTestTimeString(self):
 
148
        """Return a time string for the overall time the current test has taken."""
 
149
        return self._formatTime(time.time() - self._start_time)
 
150
 
 
151
    def _testTimeString(self):
 
152
        if self._benchmarkTime is not None:
 
153
            return "%s/%s" % (
 
154
                self._formatTime(self._benchmarkTime),
 
155
                self._elapsedTestTimeString())
 
156
        else:
 
157
            return "      %s" % self._elapsedTestTimeString()
 
158
 
 
159
    def _formatTime(self, seconds):
 
160
        """Format seconds as milliseconds with leading spaces."""
 
161
        return "%5dms" % (1000 * seconds)
 
162
 
 
163
    def _ellipsise_unimportant_words(self, a_string, final_width,
 
164
                                   keep_start=False):
 
165
        """Add ellipses (sp?) for overly long strings.
 
166
        
 
167
        :param keep_start: If true preserve the start of a_string rather
 
168
                           than the end of it.
 
169
        """
 
170
        if keep_start:
 
171
            if len(a_string) > final_width:
 
172
                result = a_string[:final_width-3] + '...'
 
173
            else:
 
174
                result = a_string
 
175
        else:
 
176
            if len(a_string) > final_width:
 
177
                result = '...' + a_string[3-final_width:]
 
178
            else:
 
179
                result = a_string
 
180
        return result.ljust(final_width)
 
181
 
 
182
    def startTest(self, test):
 
183
        unittest.TestResult.startTest(self, test)
 
184
        # In a short description, the important words are in
 
185
        # the beginning, but in an id, the important words are
 
186
        # at the end
 
187
        SHOW_DESCRIPTIONS = False
 
188
 
 
189
        if not self.showAll and self.dots and self.pb is not None:
 
190
            final_width = 13
 
191
        else:
 
192
            final_width = osutils.terminal_width()
 
193
            final_width = final_width - 15 - 8
 
194
        what = None
 
195
        if SHOW_DESCRIPTIONS:
 
196
            what = test.shortDescription()
 
197
            if what:
 
198
                what = self._ellipsise_unimportant_words(what, final_width, keep_start=True)
 
199
        if what is None:
 
200
            what = test.id()
 
201
            if what.startswith('bzrlib.tests.'):
 
202
                what = what[13:]
 
203
            what = self._ellipsise_unimportant_words(what, final_width)
 
204
        if self.showAll:
 
205
            self.stream.write(what)
 
206
        elif self.dots and self.pb is not None:
 
207
            self.pb.update(what, self.testsRun - 1, None)
 
208
        self.stream.flush()
 
209
        self._recordTestStartTime()
 
210
 
 
211
    def _recordTestStartTime(self):
 
212
        """Record that a test has started."""
 
213
        self._start_time = time.time()
 
214
 
 
215
    def addError(self, test, err):
 
216
        if isinstance(err[1], TestSkipped):
 
217
            return self.addSkipped(test, err)    
 
218
        unittest.TestResult.addError(self, test, err)
 
219
        self.extractBenchmarkTime(test)
 
220
        if self.showAll:
 
221
            self.stream.writeln("ERROR %s" % self._testTimeString())
 
222
        elif self.dots and self.pb is None:
 
223
            self.stream.write('E')
 
224
        elif self.dots:
 
225
            self.pb.update(self._ellipsise_unimportant_words('ERROR', 13), self.testsRun, None)
 
226
            self.pb.note(self._ellipsise_unimportant_words(
 
227
                            test.id() + ': ERROR',
 
228
                            osutils.terminal_width()))
 
229
        self.stream.flush()
 
230
        if self.stop_early:
 
231
            self.stop()
 
232
 
 
233
    def addFailure(self, test, err):
 
234
        unittest.TestResult.addFailure(self, test, err)
 
235
        self.extractBenchmarkTime(test)
 
236
        if self.showAll:
 
237
            self.stream.writeln(" FAIL %s" % self._testTimeString())
 
238
        elif self.dots and self.pb is None:
 
239
            self.stream.write('F')
 
240
        elif self.dots:
 
241
            self.pb.update(self._ellipsise_unimportant_words('FAIL', 13), self.testsRun, None)
 
242
            self.pb.note(self._ellipsise_unimportant_words(
 
243
                            test.id() + ': FAIL',
 
244
                            osutils.terminal_width()))
 
245
        self.stream.flush()
 
246
        if self.stop_early:
 
247
            self.stop()
 
248
 
 
249
    def addSuccess(self, test):
 
250
        self.extractBenchmarkTime(test)
 
251
        if self.showAll:
 
252
            self.stream.writeln('   OK %s' % self._testTimeString())
 
253
            for bench_called, stats in getattr(test, '_benchcalls', []):
 
254
                self.stream.writeln('LSProf output for %s(%s, %s)' % bench_called)
 
255
                stats.pprint(file=self.stream)
 
256
        elif self.dots and self.pb is None:
 
257
            self.stream.write('~')
 
258
        elif self.dots:
 
259
            self.pb.update(self._ellipsise_unimportant_words('OK', 13), self.testsRun, None)
 
260
        self.stream.flush()
 
261
        unittest.TestResult.addSuccess(self, test)
 
262
 
 
263
    def addSkipped(self, test, skip_excinfo):
 
264
        self.extractBenchmarkTime(test)
 
265
        if self.showAll:
 
266
            print >>self.stream, ' SKIP %s' % self._testTimeString()
 
267
            print >>self.stream, '     %s' % skip_excinfo[1]
 
268
        elif self.dots and self.pb is None:
 
269
            self.stream.write('S')
 
270
        elif self.dots:
 
271
            self.pb.update(self._ellipsise_unimportant_words('SKIP', 13), self.testsRun, None)
 
272
        self.stream.flush()
 
273
        # seems best to treat this as success from point-of-view of unittest
 
274
        # -- it actually does nothing so it barely matters :)
 
275
        try:
 
276
            test.tearDown()
 
277
        except KeyboardInterrupt:
 
278
            raise
 
279
        except:
 
280
            self.addError(test, test.__exc_info())
 
281
        else:
 
282
            unittest.TestResult.addSuccess(self, test)
 
283
 
 
284
    def printErrorList(self, flavour, errors):
 
285
        for test, err in errors:
 
286
            self.stream.writeln(self.separator1)
 
287
            self.stream.writeln("%s: %s" % (flavour, self.getDescription(test)))
 
288
            if getattr(test, '_get_log', None) is not None:
 
289
                print >>self.stream
 
290
                print >>self.stream, \
 
291
                        ('vvvv[log from %s]' % test.id()).ljust(78,'-')
 
292
                print >>self.stream, test._get_log()
 
293
                print >>self.stream, \
 
294
                        ('^^^^[log from %s]' % test.id()).ljust(78,'-')
 
295
            self.stream.writeln(self.separator2)
 
296
            self.stream.writeln("%s" % err)
 
297
 
 
298
 
 
299
class TextTestRunner(object):
 
300
    stop_on_failure = False
 
301
 
 
302
    def __init__(self,
 
303
                 stream=sys.stderr,
 
304
                 descriptions=0,
 
305
                 verbosity=1,
 
306
                 keep_output=False,
 
307
                 pb=None):
 
308
        self.stream = unittest._WritelnDecorator(stream)
 
309
        self.descriptions = descriptions
 
310
        self.verbosity = verbosity
 
311
        self.keep_output = keep_output
 
312
        self.pb = pb
 
313
 
 
314
    def _makeResult(self):
 
315
        result = _MyResult(self.stream,
 
316
                           self.descriptions,
 
317
                           self.verbosity,
 
318
                           pb=self.pb)
 
319
        result.stop_early = self.stop_on_failure
 
320
        return result
 
321
 
 
322
    def run(self, test):
 
323
        "Run the given test case or test suite."
 
324
        result = self._makeResult()
 
325
        startTime = time.time()
 
326
        if self.pb is not None:
 
327
            self.pb.update('Running tests', 0, test.countTestCases())
 
328
        test.run(result)
 
329
        stopTime = time.time()
 
330
        timeTaken = stopTime - startTime
 
331
        result.printErrors()
 
332
        self.stream.writeln(result.separator2)
 
333
        run = result.testsRun
 
334
        self.stream.writeln("Ran %d test%s in %.3fs" %
 
335
                            (run, run != 1 and "s" or "", timeTaken))
 
336
        self.stream.writeln()
 
337
        if not result.wasSuccessful():
 
338
            self.stream.write("FAILED (")
 
339
            failed, errored = map(len, (result.failures, result.errors))
 
340
            if failed:
 
341
                self.stream.write("failures=%d" % failed)
 
342
            if errored:
 
343
                if failed: self.stream.write(", ")
 
344
                self.stream.write("errors=%d" % errored)
 
345
            self.stream.writeln(")")
 
346
        else:
 
347
            self.stream.writeln("OK")
 
348
        if self.pb is not None:
 
349
            self.pb.update('Cleaning up', 0, 1)
 
350
        # This is still a little bogus, 
 
351
        # but only a little. Folk not using our testrunner will
 
352
        # have to delete their temp directories themselves.
 
353
        test_root = TestCaseInTempDir.TEST_ROOT
 
354
        if result.wasSuccessful() or not self.keep_output:
 
355
            if test_root is not None:
 
356
                # If LANG=C we probably have created some bogus paths
 
357
                # which rmtree(unicode) will fail to delete
 
358
                # so make sure we are using rmtree(str) to delete everything
 
359
                # except on win32, where rmtree(str) will fail
 
360
                # since it doesn't have the property of byte-stream paths
 
361
                # (they are either ascii or mbcs)
 
362
                if sys.platform == 'win32':
 
363
                    # make sure we are using the unicode win32 api
 
364
                    test_root = unicode(test_root)
 
365
                else:
 
366
                    test_root = test_root.encode(
 
367
                        sys.getfilesystemencoding())
 
368
                osutils.rmtree(test_root)
 
369
        else:
 
370
            if self.pb is not None:
 
371
                self.pb.note("Failed tests working directories are in '%s'\n",
 
372
                             test_root)
 
373
            else:
 
374
                self.stream.writeln(
 
375
                    "Failed tests working directories are in '%s'\n" %
 
376
                    test_root)
 
377
        TestCaseInTempDir.TEST_ROOT = None
 
378
        if self.pb is not None:
 
379
            self.pb.clear()
 
380
        return result
 
381
 
 
382
 
 
383
def iter_suite_tests(suite):
 
384
    """Return all tests in a suite, recursing through nested suites"""
 
385
    for item in suite._tests:
 
386
        if isinstance(item, unittest.TestCase):
 
387
            yield item
 
388
        elif isinstance(item, unittest.TestSuite):
 
389
            for r in iter_suite_tests(item):
 
390
                yield r
 
391
        else:
 
392
            raise Exception('unknown object %r inside test suite %r'
 
393
                            % (item, suite))
 
394
 
 
395
 
 
396
class TestSkipped(Exception):
 
397
    """Indicates that a test was intentionally skipped, rather than failing."""
 
398
    # XXX: Not used yet
 
399
 
 
400
 
 
401
class CommandFailed(Exception):
 
402
    pass
 
403
 
 
404
 
 
405
class StringIOWrapper(object):
 
406
    """A wrapper around cStringIO which just adds an encoding attribute.
 
407
    
 
408
    Internally we can check sys.stdout to see what the output encoding
 
409
    should be. However, cStringIO has no encoding attribute that we can
 
410
    set. So we wrap it instead.
 
411
    """
 
412
    encoding='ascii'
 
413
    _cstring = None
 
414
 
 
415
    def __init__(self, s=None):
 
416
        if s is not None:
 
417
            self.__dict__['_cstring'] = StringIO(s)
 
418
        else:
 
419
            self.__dict__['_cstring'] = StringIO()
 
420
 
 
421
    def __getattr__(self, name, getattr=getattr):
 
422
        return getattr(self.__dict__['_cstring'], name)
 
423
 
 
424
    def __setattr__(self, name, val):
 
425
        if name == 'encoding':
 
426
            self.__dict__['encoding'] = val
 
427
        else:
 
428
            return setattr(self._cstring, name, val)
 
429
 
 
430
 
 
431
class TestCase(unittest.TestCase):
 
432
    """Base class for bzr unit tests.
 
433
    
 
434
    Tests that need access to disk resources should subclass 
 
435
    TestCaseInTempDir not TestCase.
 
436
 
 
437
    Error and debug log messages are redirected from their usual
 
438
    location into a temporary file, the contents of which can be
 
439
    retrieved by _get_log().  We use a real OS file, not an in-memory object,
 
440
    so that it can also capture file IO.  When the test completes this file
 
441
    is read into memory and removed from disk.
 
442
       
 
443
    There are also convenience functions to invoke bzr's command-line
 
444
    routine, and to build and check bzr trees.
 
445
   
 
446
    In addition to the usual method of overriding tearDown(), this class also
 
447
    allows subclasses to register functions into the _cleanups list, which is
 
448
    run in order as the object is torn down.  It's less likely this will be
 
449
    accidentally overlooked.
 
450
    """
 
451
 
 
452
    _log_file_name = None
 
453
    _log_contents = ''
 
454
    # record lsprof data when performing benchmark calls.
 
455
    _gather_lsprof_in_benchmarks = False
 
456
 
 
457
    def __init__(self, methodName='testMethod'):
 
458
        super(TestCase, self).__init__(methodName)
 
459
        self._cleanups = []
 
460
 
 
461
    def setUp(self):
 
462
        unittest.TestCase.setUp(self)
 
463
        self._cleanEnvironment()
 
464
        bzrlib.trace.disable_default_logging()
 
465
        self._startLogFile()
 
466
        self._benchcalls = []
 
467
        self._benchtime = None
 
468
 
 
469
    def _ndiff_strings(self, a, b):
 
470
        """Return ndiff between two strings containing lines.
 
471
        
 
472
        A trailing newline is added if missing to make the strings
 
473
        print properly."""
 
474
        if b and b[-1] != '\n':
 
475
            b += '\n'
 
476
        if a and a[-1] != '\n':
 
477
            a += '\n'
 
478
        difflines = difflib.ndiff(a.splitlines(True),
 
479
                                  b.splitlines(True),
 
480
                                  linejunk=lambda x: False,
 
481
                                  charjunk=lambda x: False)
 
482
        return ''.join(difflines)
 
483
 
 
484
    def assertEqualDiff(self, a, b, message=None):
 
485
        """Assert two texts are equal, if not raise an exception.
 
486
        
 
487
        This is intended for use with multi-line strings where it can 
 
488
        be hard to find the differences by eye.
 
489
        """
 
490
        # TODO: perhaps override assertEquals to call this for strings?
 
491
        if a == b:
 
492
            return
 
493
        if message is None:
 
494
            message = "texts not equal:\n"
 
495
        raise AssertionError(message + 
 
496
                             self._ndiff_strings(a, b))      
 
497
        
 
498
    def assertEqualMode(self, mode, mode_test):
 
499
        self.assertEqual(mode, mode_test,
 
500
                         'mode mismatch %o != %o' % (mode, mode_test))
 
501
 
 
502
    def assertStartsWith(self, s, prefix):
 
503
        if not s.startswith(prefix):
 
504
            raise AssertionError('string %r does not start with %r' % (s, prefix))
 
505
 
 
506
    def assertEndsWith(self, s, suffix):
 
507
        """Asserts that s ends with suffix."""
 
508
        if not s.endswith(suffix):
 
509
            raise AssertionError('string %r does not end with %r' % (s, suffix))
 
510
 
 
511
    def assertContainsRe(self, haystack, needle_re):
 
512
        """Assert that a contains something matching a regular expression."""
 
513
        if not re.search(needle_re, haystack):
 
514
            raise AssertionError('pattern "%s" not found in "%s"'
 
515
                    % (needle_re, haystack))
 
516
 
 
517
    def assertNotContainsRe(self, haystack, needle_re):
 
518
        """Assert that a does not match a regular expression"""
 
519
        if re.search(needle_re, haystack):
 
520
            raise AssertionError('pattern "%s" found in "%s"'
 
521
                    % (needle_re, haystack))
 
522
 
 
523
    def assertSubset(self, sublist, superlist):
 
524
        """Assert that every entry in sublist is present in superlist."""
 
525
        missing = []
 
526
        for entry in sublist:
 
527
            if entry not in superlist:
 
528
                missing.append(entry)
 
529
        if len(missing) > 0:
 
530
            raise AssertionError("value(s) %r not present in container %r" % 
 
531
                                 (missing, superlist))
 
532
 
 
533
    def assertIs(self, left, right):
 
534
        if not (left is right):
 
535
            raise AssertionError("%r is not %r." % (left, right))
 
536
 
 
537
    def assertTransportMode(self, transport, path, mode):
 
538
        """Fail if a path does not have mode mode.
 
539
        
 
540
        If modes are not supported on this transport, the assertion is ignored.
 
541
        """
 
542
        if not transport._can_roundtrip_unix_modebits():
 
543
            return
 
544
        path_stat = transport.stat(path)
 
545
        actual_mode = stat.S_IMODE(path_stat.st_mode)
 
546
        self.assertEqual(mode, actual_mode,
 
547
            'mode of %r incorrect (%o != %o)' % (path, mode, actual_mode))
 
548
 
 
549
    def assertIsInstance(self, obj, kls):
 
550
        """Fail if obj is not an instance of kls"""
 
551
        if not isinstance(obj, kls):
 
552
            self.fail("%r is an instance of %s rather than %s" % (
 
553
                obj, obj.__class__, kls))
 
554
 
 
555
    def _startLogFile(self):
 
556
        """Send bzr and test log messages to a temporary file.
 
557
 
 
558
        The file is removed as the test is torn down.
 
559
        """
 
560
        fileno, name = tempfile.mkstemp(suffix='.log', prefix='testbzr')
 
561
        encoder, decoder, stream_reader, stream_writer = codecs.lookup('UTF-8')
 
562
        self._log_file = stream_writer(os.fdopen(fileno, 'w+'))
 
563
        self._log_nonce = bzrlib.trace.enable_test_log(self._log_file)
 
564
        self._log_file_name = name
 
565
        self.addCleanup(self._finishLogFile)
 
566
 
 
567
    def _finishLogFile(self):
 
568
        """Finished with the log file.
 
569
 
 
570
        Read contents into memory, close, and delete.
 
571
        """
 
572
        if self._log_file is None:
 
573
            return
 
574
        bzrlib.trace.disable_test_log(self._log_nonce)
 
575
        self._log_file.seek(0)
 
576
        self._log_contents = self._log_file.read()
 
577
        self._log_file.close()
 
578
        os.remove(self._log_file_name)
 
579
        self._log_file = self._log_file_name = None
 
580
 
 
581
    def addCleanup(self, callable):
 
582
        """Arrange to run a callable when this case is torn down.
 
583
 
 
584
        Callables are run in the reverse of the order they are registered, 
 
585
        ie last-in first-out.
 
586
        """
 
587
        if callable in self._cleanups:
 
588
            raise ValueError("cleanup function %r already registered on %s" 
 
589
                    % (callable, self))
 
590
        self._cleanups.append(callable)
 
591
 
 
592
    def _cleanEnvironment(self):
 
593
        new_env = {
 
594
            'HOME': os.getcwd(),
 
595
            'APPDATA': os.getcwd(),
 
596
            'BZREMAIL': None,
 
597
            'EMAIL': None,
 
598
        }
 
599
        self.__old_env = {}
 
600
        self.addCleanup(self._restoreEnvironment)
 
601
        for name, value in new_env.iteritems():
 
602
            self._captureVar(name, value)
 
603
 
 
604
 
 
605
    def _captureVar(self, name, newvalue):
 
606
        """Set an environment variable, preparing it to be reset when finished."""
 
607
        self.__old_env[name] = os.environ.get(name, None)
 
608
        if newvalue is None:
 
609
            if name in os.environ:
 
610
                del os.environ[name]
 
611
        else:
 
612
            os.environ[name] = newvalue
 
613
 
 
614
    @staticmethod
 
615
    def _restoreVar(name, value):
 
616
        if value is None:
 
617
            if name in os.environ:
 
618
                del os.environ[name]
 
619
        else:
 
620
            os.environ[name] = value
 
621
 
 
622
    def _restoreEnvironment(self):
 
623
        for name, value in self.__old_env.iteritems():
 
624
            self._restoreVar(name, value)
 
625
 
 
626
    def tearDown(self):
 
627
        self._runCleanups()
 
628
        unittest.TestCase.tearDown(self)
 
629
 
 
630
    def time(self, callable, *args, **kwargs):
 
631
        """Run callable and accrue the time it takes to the benchmark time.
 
632
        
 
633
        If lsprofiling is enabled (i.e. by --lsprof-time to bzr selftest) then
 
634
        this will cause lsprofile statistics to be gathered and stored in
 
635
        self._benchcalls.
 
636
        """
 
637
        if self._benchtime is None:
 
638
            self._benchtime = 0
 
639
        start = time.time()
 
640
        try:
 
641
            if not self._gather_lsprof_in_benchmarks:
 
642
                return callable(*args, **kwargs)
 
643
            else:
 
644
                # record this benchmark
 
645
                ret, stats = bzrlib.lsprof.profile(callable, *args, **kwargs)
 
646
                stats.sort()
 
647
                self._benchcalls.append(((callable, args, kwargs), stats))
 
648
                return ret
 
649
        finally:
 
650
            self._benchtime += time.time() - start
 
651
 
 
652
    def _runCleanups(self):
 
653
        """Run registered cleanup functions. 
 
654
 
 
655
        This should only be called from TestCase.tearDown.
 
656
        """
 
657
        # TODO: Perhaps this should keep running cleanups even if 
 
658
        # one of them fails?
 
659
        for cleanup_fn in reversed(self._cleanups):
 
660
            cleanup_fn()
 
661
 
 
662
    def log(self, *args):
 
663
        mutter(*args)
 
664
 
 
665
    def _get_log(self):
 
666
        """Return as a string the log for this test"""
 
667
        if self._log_file_name:
 
668
            return open(self._log_file_name).read()
 
669
        else:
 
670
            return self._log_contents
 
671
        # TODO: Delete the log after it's been read in
 
672
 
 
673
    def capture(self, cmd, retcode=0):
 
674
        """Shortcut that splits cmd into words, runs, and returns stdout"""
 
675
        return self.run_bzr_captured(cmd.split(), retcode=retcode)[0]
 
676
 
 
677
    def run_bzr_captured(self, argv, retcode=0, encoding=None, stdin=None):
 
678
        """Invoke bzr and return (stdout, stderr).
 
679
 
 
680
        Useful for code that wants to check the contents of the
 
681
        output, the way error messages are presented, etc.
 
682
 
 
683
        This should be the main method for tests that want to exercise the
 
684
        overall behavior of the bzr application (rather than a unit test
 
685
        or a functional test of the library.)
 
686
 
 
687
        Much of the old code runs bzr by forking a new copy of Python, but
 
688
        that is slower, harder to debug, and generally not necessary.
 
689
 
 
690
        This runs bzr through the interface that catches and reports
 
691
        errors, and with logging set to something approximating the
 
692
        default, so that error reporting can be checked.
 
693
 
 
694
        :param argv: arguments to invoke bzr
 
695
        :param retcode: expected return code, or None for don't-care.
 
696
        :param encoding: encoding for sys.stdout and sys.stderr
 
697
        :param stdin: A string to be used as stdin for the command.
 
698
        """
 
699
        if encoding is None:
 
700
            encoding = bzrlib.user_encoding
 
701
        if stdin is not None:
 
702
            stdin = StringIO(stdin)
 
703
        stdout = StringIOWrapper()
 
704
        stderr = StringIOWrapper()
 
705
        stdout.encoding = encoding
 
706
        stderr.encoding = encoding
 
707
 
 
708
        self.log('run bzr: %r', argv)
 
709
        # FIXME: don't call into logging here
 
710
        handler = logging.StreamHandler(stderr)
 
711
        handler.setLevel(logging.INFO)
 
712
        logger = logging.getLogger('')
 
713
        logger.addHandler(handler)
 
714
        old_ui_factory = bzrlib.ui.ui_factory
 
715
        bzrlib.ui.ui_factory = bzrlib.tests.blackbox.TestUIFactory(
 
716
            stdout=stdout,
 
717
            stderr=stderr)
 
718
        bzrlib.ui.ui_factory.stdin = stdin
 
719
        try:
 
720
            result = self.apply_redirected(stdin, stdout, stderr,
 
721
                                           bzrlib.commands.run_bzr_catch_errors,
 
722
                                           argv)
 
723
        finally:
 
724
            logger.removeHandler(handler)
 
725
            bzrlib.ui.ui_factory = old_ui_factory
 
726
 
 
727
        out = stdout.getvalue()
 
728
        err = stderr.getvalue()
 
729
        if out:
 
730
            self.log('output:\n%r', out)
 
731
        if err:
 
732
            self.log('errors:\n%r', err)
 
733
        if retcode is not None:
 
734
            self.assertEquals(retcode, result)
 
735
        return out, err
 
736
 
 
737
    def run_bzr(self, *args, **kwargs):
 
738
        """Invoke bzr, as if it were run from the command line.
 
739
 
 
740
        This should be the main method for tests that want to exercise the
 
741
        overall behavior of the bzr application (rather than a unit test
 
742
        or a functional test of the library.)
 
743
 
 
744
        This sends the stdout/stderr results into the test's log,
 
745
        where it may be useful for debugging.  See also run_captured.
 
746
 
 
747
        :param stdin: A string to be used as stdin for the command.
 
748
        """
 
749
        retcode = kwargs.pop('retcode', 0)
 
750
        encoding = kwargs.pop('encoding', None)
 
751
        stdin = kwargs.pop('stdin', None)
 
752
        return self.run_bzr_captured(args, retcode=retcode, encoding=encoding, stdin=stdin)
 
753
 
 
754
    def run_bzr_decode(self, *args, **kwargs):
 
755
        if kwargs.has_key('encoding'):
 
756
            encoding = kwargs['encoding']
 
757
        else:
 
758
            encoding = bzrlib.user_encoding
 
759
        return self.run_bzr(*args, **kwargs)[0].decode(encoding)
 
760
 
 
761
    def run_bzr_error(self, error_regexes, *args, **kwargs):
 
762
        """Run bzr, and check that stderr contains the supplied regexes
 
763
        
 
764
        :param error_regexes: Sequence of regular expressions which 
 
765
            must each be found in the error output. The relative ordering
 
766
            is not enforced.
 
767
        :param args: command-line arguments for bzr
 
768
        :param kwargs: Keyword arguments which are interpreted by run_bzr
 
769
            This function changes the default value of retcode to be 3,
 
770
            since in most cases this is run when you expect bzr to fail.
 
771
        :return: (out, err) The actual output of running the command (in case you
 
772
                 want to do more inspection)
 
773
 
 
774
        Examples of use:
 
775
            # Make sure that commit is failing because there is nothing to do
 
776
            self.run_bzr_error(['no changes to commit'],
 
777
                               'commit', '-m', 'my commit comment')
 
778
            # Make sure --strict is handling an unknown file, rather than
 
779
            # giving us the 'nothing to do' error
 
780
            self.build_tree(['unknown'])
 
781
            self.run_bzr_error(['Commit refused because there are unknown files'],
 
782
                               'commit', '--strict', '-m', 'my commit comment')
 
783
        """
 
784
        kwargs.setdefault('retcode', 3)
 
785
        out, err = self.run_bzr(*args, **kwargs)
 
786
        for regex in error_regexes:
 
787
            self.assertContainsRe(err, regex)
 
788
        return out, err
 
789
 
 
790
    def run_bzr_subprocess(self, *args, **kwargs):
 
791
        """Run bzr in a subprocess for testing.
 
792
 
 
793
        This starts a new Python interpreter and runs bzr in there. 
 
794
        This should only be used for tests that have a justifiable need for
 
795
        this isolation: e.g. they are testing startup time, or signal
 
796
        handling, or early startup code, etc.  Subprocess code can't be 
 
797
        profiled or debugged so easily.
 
798
 
 
799
        :param retcode: The status code that is expected.  Defaults to 0.  If
 
800
        None is supplied, the status code is not checked.
 
801
        """
 
802
        bzr_path = os.path.dirname(os.path.dirname(bzrlib.__file__))+'/bzr'
 
803
        args = list(args)
 
804
        process = Popen([sys.executable, bzr_path]+args, stdout=PIPE, 
 
805
                         stderr=PIPE)
 
806
        out = process.stdout.read()
 
807
        err = process.stderr.read()
 
808
        retcode = process.wait()
 
809
        supplied_retcode = kwargs.get('retcode', 0)
 
810
        if supplied_retcode is not None:
 
811
            assert supplied_retcode == retcode
 
812
        return [out, err]
 
813
 
 
814
    def check_inventory_shape(self, inv, shape):
 
815
        """Compare an inventory to a list of expected names.
 
816
 
 
817
        Fail if they are not precisely equal.
 
818
        """
 
819
        extras = []
 
820
        shape = list(shape)             # copy
 
821
        for path, ie in inv.entries():
 
822
            name = path.replace('\\', '/')
 
823
            if ie.kind == 'dir':
 
824
                name = name + '/'
 
825
            if name in shape:
 
826
                shape.remove(name)
 
827
            else:
 
828
                extras.append(name)
 
829
        if shape:
 
830
            self.fail("expected paths not found in inventory: %r" % shape)
 
831
        if extras:
 
832
            self.fail("unexpected paths found in inventory: %r" % extras)
 
833
 
 
834
    def apply_redirected(self, stdin=None, stdout=None, stderr=None,
 
835
                         a_callable=None, *args, **kwargs):
 
836
        """Call callable with redirected std io pipes.
 
837
 
 
838
        Returns the return code."""
 
839
        if not callable(a_callable):
 
840
            raise ValueError("a_callable must be callable.")
 
841
        if stdin is None:
 
842
            stdin = StringIO("")
 
843
        if stdout is None:
 
844
            if getattr(self, "_log_file", None) is not None:
 
845
                stdout = self._log_file
 
846
            else:
 
847
                stdout = StringIO()
 
848
        if stderr is None:
 
849
            if getattr(self, "_log_file", None is not None):
 
850
                stderr = self._log_file
 
851
            else:
 
852
                stderr = StringIO()
 
853
        real_stdin = sys.stdin
 
854
        real_stdout = sys.stdout
 
855
        real_stderr = sys.stderr
 
856
        try:
 
857
            sys.stdout = stdout
 
858
            sys.stderr = stderr
 
859
            sys.stdin = stdin
 
860
            return a_callable(*args, **kwargs)
 
861
        finally:
 
862
            sys.stdout = real_stdout
 
863
            sys.stderr = real_stderr
 
864
            sys.stdin = real_stdin
 
865
 
 
866
    def merge(self, branch_from, wt_to):
 
867
        """A helper for tests to do a ui-less merge.
 
868
 
 
869
        This should move to the main library when someone has time to integrate
 
870
        it in.
 
871
        """
 
872
        # minimal ui-less merge.
 
873
        wt_to.branch.fetch(branch_from)
 
874
        base_rev = common_ancestor(branch_from.last_revision(),
 
875
                                   wt_to.branch.last_revision(),
 
876
                                   wt_to.branch.repository)
 
877
        merge_inner(wt_to.branch, branch_from.basis_tree(), 
 
878
                    wt_to.branch.repository.revision_tree(base_rev),
 
879
                    this_tree=wt_to)
 
880
        wt_to.add_pending_merge(branch_from.last_revision())
 
881
 
 
882
 
 
883
BzrTestBase = TestCase
 
884
 
 
885
     
 
886
class TestCaseInTempDir(TestCase):
 
887
    """Derived class that runs a test within a temporary directory.
 
888
 
 
889
    This is useful for tests that need to create a branch, etc.
 
890
 
 
891
    The directory is created in a slightly complex way: for each
 
892
    Python invocation, a new temporary top-level directory is created.
 
893
    All test cases create their own directory within that.  If the
 
894
    tests complete successfully, the directory is removed.
 
895
 
 
896
    InTempDir is an old alias for FunctionalTestCase.
 
897
    """
 
898
 
 
899
    TEST_ROOT = None
 
900
    _TEST_NAME = 'test'
 
901
    OVERRIDE_PYTHON = 'python'
 
902
 
 
903
    def check_file_contents(self, filename, expect):
 
904
        self.log("check contents of file %s" % filename)
 
905
        contents = file(filename, 'r').read()
 
906
        if contents != expect:
 
907
            self.log("expected: %r" % expect)
 
908
            self.log("actually: %r" % contents)
 
909
            self.fail("contents of %s not as expected" % filename)
 
910
 
 
911
    def _make_test_root(self):
 
912
        if TestCaseInTempDir.TEST_ROOT is not None:
 
913
            return
 
914
        i = 0
 
915
        while True:
 
916
            root = u'test%04d.tmp' % i
 
917
            try:
 
918
                os.mkdir(root)
 
919
            except OSError, e:
 
920
                if e.errno == errno.EEXIST:
 
921
                    i += 1
 
922
                    continue
 
923
                else:
 
924
                    raise
 
925
            # successfully created
 
926
            TestCaseInTempDir.TEST_ROOT = osutils.abspath(root)
 
927
            break
 
928
        # make a fake bzr directory there to prevent any tests propagating
 
929
        # up onto the source directory's real branch
 
930
        bzrdir.BzrDir.create_standalone_workingtree(TestCaseInTempDir.TEST_ROOT)
 
931
 
 
932
    def setUp(self):
 
933
        super(TestCaseInTempDir, self).setUp()
 
934
        self._make_test_root()
 
935
        _currentdir = os.getcwdu()
 
936
        # shorten the name, to avoid test failures due to path length
 
937
        short_id = self.id().replace('bzrlib.tests.', '') \
 
938
                   .replace('__main__.', '')[-100:]
 
939
        # it's possible the same test class is run several times for
 
940
        # parameterized tests, so make sure the names don't collide.  
 
941
        i = 0
 
942
        while True:
 
943
            if i > 0:
 
944
                candidate_dir = '%s/%s.%d' % (self.TEST_ROOT, short_id, i)
 
945
            else:
 
946
                candidate_dir = '%s/%s' % (self.TEST_ROOT, short_id)
 
947
            if os.path.exists(candidate_dir):
 
948
                i = i + 1
 
949
                continue
 
950
            else:
 
951
                self.test_dir = candidate_dir
 
952
                os.mkdir(self.test_dir)
 
953
                os.chdir(self.test_dir)
 
954
                break
 
955
        os.environ['HOME'] = self.test_dir
 
956
        os.environ['APPDATA'] = self.test_dir
 
957
        def _leaveDirectory():
 
958
            os.chdir(_currentdir)
 
959
        self.addCleanup(_leaveDirectory)
 
960
        
 
961
    def build_tree(self, shape, line_endings='native', transport=None):
 
962
        """Build a test tree according to a pattern.
 
963
 
 
964
        shape is a sequence of file specifications.  If the final
 
965
        character is '/', a directory is created.
 
966
 
 
967
        This doesn't add anything to a branch.
 
968
        :param line_endings: Either 'binary' or 'native'
 
969
                             in binary mode, exact contents are written
 
970
                             in native mode, the line endings match the
 
971
                             default platform endings.
 
972
 
 
973
        :param transport: A transport to write to, for building trees on 
 
974
                          VFS's. If the transport is readonly or None,
 
975
                          "." is opened automatically.
 
976
        """
 
977
        # XXX: It's OK to just create them using forward slashes on windows?
 
978
        if transport is None or transport.is_readonly():
 
979
            transport = get_transport(".")
 
980
        for name in shape:
 
981
            self.assert_(isinstance(name, basestring))
 
982
            if name[-1] == '/':
 
983
                transport.mkdir(urlutils.escape(name[:-1]))
 
984
            else:
 
985
                if line_endings == 'binary':
 
986
                    end = '\n'
 
987
                elif line_endings == 'native':
 
988
                    end = os.linesep
 
989
                else:
 
990
                    raise errors.BzrError('Invalid line ending request %r' % (line_endings,))
 
991
                content = "contents of %s%s" % (name.encode('utf-8'), end)
 
992
                transport.put(urlutils.escape(name), StringIO(content))
 
993
 
 
994
    def build_tree_contents(self, shape):
 
995
        build_tree_contents(shape)
 
996
 
 
997
    def failUnlessExists(self, path):
 
998
        """Fail unless path, which may be abs or relative, exists."""
 
999
        self.failUnless(osutils.lexists(path))
 
1000
 
 
1001
    def failIfExists(self, path):
 
1002
        """Fail if path, which may be abs or relative, exists."""
 
1003
        self.failIf(osutils.lexists(path))
 
1004
        
 
1005
    def assertFileEqual(self, content, path):
 
1006
        """Fail if path does not contain 'content'."""
 
1007
        self.failUnless(osutils.lexists(path))
 
1008
        # TODO: jam 20060427 Shouldn't this be 'rb'?
 
1009
        self.assertEqualDiff(content, open(path, 'r').read())
 
1010
 
 
1011
 
 
1012
class TestCaseWithTransport(TestCaseInTempDir):
 
1013
    """A test case that provides get_url and get_readonly_url facilities.
 
1014
 
 
1015
    These back onto two transport servers, one for readonly access and one for
 
1016
    read write access.
 
1017
 
 
1018
    If no explicit class is provided for readonly access, a
 
1019
    ReadonlyTransportDecorator is used instead which allows the use of non disk
 
1020
    based read write transports.
 
1021
 
 
1022
    If an explicit class is provided for readonly access, that server and the 
 
1023
    readwrite one must both define get_url() as resolving to os.getcwd().
 
1024
    """
 
1025
 
 
1026
    def __init__(self, methodName='testMethod'):
 
1027
        super(TestCaseWithTransport, self).__init__(methodName)
 
1028
        self.__readonly_server = None
 
1029
        self.__server = None
 
1030
        self.transport_server = default_transport
 
1031
        self.transport_readonly_server = None
 
1032
 
 
1033
    def get_readonly_url(self, relpath=None):
 
1034
        """Get a URL for the readonly transport.
 
1035
 
 
1036
        This will either be backed by '.' or a decorator to the transport 
 
1037
        used by self.get_url()
 
1038
        relpath provides for clients to get a path relative to the base url.
 
1039
        These should only be downwards relative, not upwards.
 
1040
        """
 
1041
        base = self.get_readonly_server().get_url()
 
1042
        if relpath is not None:
 
1043
            if not base.endswith('/'):
 
1044
                base = base + '/'
 
1045
            base = base + relpath
 
1046
        return base
 
1047
 
 
1048
    def get_readonly_server(self):
 
1049
        """Get the server instance for the readonly transport
 
1050
 
 
1051
        This is useful for some tests with specific servers to do diagnostics.
 
1052
        """
 
1053
        if self.__readonly_server is None:
 
1054
            if self.transport_readonly_server is None:
 
1055
                # readonly decorator requested
 
1056
                # bring up the server
 
1057
                self.get_url()
 
1058
                self.__readonly_server = ReadonlyServer()
 
1059
                self.__readonly_server.setUp(self.__server)
 
1060
            else:
 
1061
                self.__readonly_server = self.transport_readonly_server()
 
1062
                self.__readonly_server.setUp()
 
1063
            self.addCleanup(self.__readonly_server.tearDown)
 
1064
        return self.__readonly_server
 
1065
 
 
1066
    def get_server(self):
 
1067
        """Get the read/write server instance.
 
1068
 
 
1069
        This is useful for some tests with specific servers that need
 
1070
        diagnostics.
 
1071
        """
 
1072
        if self.__server is None:
 
1073
            self.__server = self.transport_server()
 
1074
            self.__server.setUp()
 
1075
            self.addCleanup(self.__server.tearDown)
 
1076
        return self.__server
 
1077
 
 
1078
    def get_url(self, relpath=None):
 
1079
        """Get a URL for the readwrite transport.
 
1080
 
 
1081
        This will either be backed by '.' or to an equivalent non-file based
 
1082
        facility.
 
1083
        relpath provides for clients to get a path relative to the base url.
 
1084
        These should only be downwards relative, not upwards.
 
1085
        """
 
1086
        base = self.get_server().get_url()
 
1087
        if relpath is not None and relpath != '.':
 
1088
            if not base.endswith('/'):
 
1089
                base = base + '/'
 
1090
            base = base + urlutils.escape(relpath)
 
1091
        return base
 
1092
 
 
1093
    def get_transport(self):
 
1094
        """Return a writeable transport for the test scratch space"""
 
1095
        t = get_transport(self.get_url())
 
1096
        self.assertFalse(t.is_readonly())
 
1097
        return t
 
1098
 
 
1099
    def get_readonly_transport(self):
 
1100
        """Return a readonly transport for the test scratch space
 
1101
        
 
1102
        This can be used to test that operations which should only need
 
1103
        readonly access in fact do not try to write.
 
1104
        """
 
1105
        t = get_transport(self.get_readonly_url())
 
1106
        self.assertTrue(t.is_readonly())
 
1107
        return t
 
1108
 
 
1109
    def make_branch(self, relpath, format=None):
 
1110
        """Create a branch on the transport at relpath."""
 
1111
        repo = self.make_repository(relpath, format=format)
 
1112
        return repo.bzrdir.create_branch()
 
1113
 
 
1114
    def make_bzrdir(self, relpath, format=None):
 
1115
        try:
 
1116
            url = self.get_url(relpath)
 
1117
            mutter('relpath %r => url %r', relpath, url)
 
1118
            segments = url.split('/')
 
1119
            if segments and segments[-1] not in ('', '.'):
 
1120
                parent = '/'.join(segments[:-1])
 
1121
                t = get_transport(parent)
 
1122
                try:
 
1123
                    t.mkdir(segments[-1])
 
1124
                except errors.FileExists:
 
1125
                    pass
 
1126
            if format is None:
 
1127
                format=bzrlib.bzrdir.BzrDirFormat.get_default_format()
 
1128
            # FIXME: make this use a single transport someday. RBC 20060418
 
1129
            return format.initialize_on_transport(get_transport(relpath))
 
1130
        except errors.UninitializableFormat:
 
1131
            raise TestSkipped("Format %s is not initializable." % format)
 
1132
 
 
1133
    def make_repository(self, relpath, shared=False, format=None):
 
1134
        """Create a repository on our default transport at relpath."""
 
1135
        made_control = self.make_bzrdir(relpath, format=format)
 
1136
        return made_control.create_repository(shared=shared)
 
1137
 
 
1138
    def make_branch_and_tree(self, relpath, format=None):
 
1139
        """Create a branch on the transport and a tree locally.
 
1140
 
 
1141
        Returns the tree.
 
1142
        """
 
1143
        # TODO: always use the local disk path for the working tree,
 
1144
        # this obviously requires a format that supports branch references
 
1145
        # so check for that by checking bzrdir.BzrDirFormat.get_default_format()
 
1146
        # RBC 20060208
 
1147
        b = self.make_branch(relpath, format=format)
 
1148
        try:
 
1149
            return b.bzrdir.create_workingtree()
 
1150
        except errors.NotLocalUrl:
 
1151
            # new formats - catch No tree error and create
 
1152
            # a branch reference and a checkout.
 
1153
            # old formats at that point - raise TestSkipped.
 
1154
            # TODO: rbc 20060208
 
1155
            return WorkingTreeFormat2().initialize(bzrdir.BzrDir.open(relpath))
 
1156
 
 
1157
    def assertIsDirectory(self, relpath, transport):
 
1158
        """Assert that relpath within transport is a directory.
 
1159
 
 
1160
        This may not be possible on all transports; in that case it propagates
 
1161
        a TransportNotPossible.
 
1162
        """
 
1163
        try:
 
1164
            mode = transport.stat(relpath).st_mode
 
1165
        except errors.NoSuchFile:
 
1166
            self.fail("path %s is not a directory; no such file"
 
1167
                      % (relpath))
 
1168
        if not stat.S_ISDIR(mode):
 
1169
            self.fail("path %s is not a directory; has mode %#o"
 
1170
                      % (relpath, mode))
 
1171
 
 
1172
 
 
1173
class ChrootedTestCase(TestCaseWithTransport):
 
1174
    """A support class that provides readonly urls outside the local namespace.
 
1175
 
 
1176
    This is done by checking if self.transport_server is a MemoryServer. if it
 
1177
    is then we are chrooted already, if it is not then an HttpServer is used
 
1178
    for readonly urls.
 
1179
 
 
1180
    TODO RBC 20060127: make this an option to TestCaseWithTransport so it can
 
1181
                       be used without needed to redo it when a different 
 
1182
                       subclass is in use ?
 
1183
    """
 
1184
 
 
1185
    def setUp(self):
 
1186
        super(ChrootedTestCase, self).setUp()
 
1187
        if not self.transport_server == bzrlib.transport.memory.MemoryServer:
 
1188
            self.transport_readonly_server = bzrlib.transport.http.HttpServer
 
1189
 
 
1190
 
 
1191
def filter_suite_by_re(suite, pattern):
 
1192
    result = TestUtil.TestSuite()
 
1193
    filter_re = re.compile(pattern)
 
1194
    for test in iter_suite_tests(suite):
 
1195
        if filter_re.search(test.id()):
 
1196
            result.addTest(test)
 
1197
    return result
 
1198
 
 
1199
 
 
1200
def run_suite(suite, name='test', verbose=False, pattern=".*",
 
1201
              stop_on_failure=False, keep_output=False,
 
1202
              transport=None, lsprof_timed=None):
 
1203
    TestCaseInTempDir._TEST_NAME = name
 
1204
    TestCase._gather_lsprof_in_benchmarks = lsprof_timed
 
1205
    if verbose:
 
1206
        verbosity = 2
 
1207
        pb = None
 
1208
    else:
 
1209
        verbosity = 1
 
1210
        pb = progress.ProgressBar()
 
1211
    runner = TextTestRunner(stream=sys.stdout,
 
1212
                            descriptions=0,
 
1213
                            verbosity=verbosity,
 
1214
                            keep_output=keep_output,
 
1215
                            pb=pb)
 
1216
    runner.stop_on_failure=stop_on_failure
 
1217
    if pattern != '.*':
 
1218
        suite = filter_suite_by_re(suite, pattern)
 
1219
    result = runner.run(suite)
 
1220
    return result.wasSuccessful()
 
1221
 
 
1222
 
 
1223
def selftest(verbose=False, pattern=".*", stop_on_failure=True,
 
1224
             keep_output=False,
 
1225
             transport=None,
 
1226
             test_suite_factory=None,
 
1227
             lsprof_timed=None):
 
1228
    """Run the whole test suite under the enhanced runner"""
 
1229
    global default_transport
 
1230
    if transport is None:
 
1231
        transport = default_transport
 
1232
    old_transport = default_transport
 
1233
    default_transport = transport
 
1234
    try:
 
1235
        if test_suite_factory is None:
 
1236
            suite = test_suite()
 
1237
        else:
 
1238
            suite = test_suite_factory()
 
1239
        return run_suite(suite, 'testbzr', verbose=verbose, pattern=pattern,
 
1240
                     stop_on_failure=stop_on_failure, keep_output=keep_output,
 
1241
                     transport=transport,
 
1242
                     lsprof_timed=lsprof_timed)
 
1243
    finally:
 
1244
        default_transport = old_transport
 
1245
 
 
1246
 
 
1247
def test_suite():
 
1248
    """Build and return TestSuite for the whole of bzrlib.
 
1249
    
 
1250
    This function can be replaced if you need to change the default test
 
1251
    suite on a global basis, but it is not encouraged.
 
1252
    """
 
1253
    testmod_names = [
 
1254
                   'bzrlib.tests.test_ancestry',
 
1255
                   'bzrlib.tests.test_api',
 
1256
                   'bzrlib.tests.test_bad_files',
 
1257
                   'bzrlib.tests.test_branch',
 
1258
                   'bzrlib.tests.test_bundle',
 
1259
                   'bzrlib.tests.test_bzrdir',
 
1260
                   'bzrlib.tests.test_command',
 
1261
                   'bzrlib.tests.test_commit',
 
1262
                   'bzrlib.tests.test_commit_merge',
 
1263
                   'bzrlib.tests.test_config',
 
1264
                   'bzrlib.tests.test_conflicts',
 
1265
                   'bzrlib.tests.test_decorators',
 
1266
                   'bzrlib.tests.test_diff',
 
1267
                   'bzrlib.tests.test_doc_generate',
 
1268
                   'bzrlib.tests.test_errors',
 
1269
                   'bzrlib.tests.test_escaped_store',
 
1270
                   'bzrlib.tests.test_fetch',
 
1271
                   'bzrlib.tests.test_gpg',
 
1272
                   'bzrlib.tests.test_graph',
 
1273
                   'bzrlib.tests.test_hashcache',
 
1274
                   'bzrlib.tests.test_http',
 
1275
                   'bzrlib.tests.test_http_response',
 
1276
                   'bzrlib.tests.test_identitymap',
 
1277
                   'bzrlib.tests.test_ignores',
 
1278
                   'bzrlib.tests.test_inv',
 
1279
                   'bzrlib.tests.test_knit',
 
1280
                   'bzrlib.tests.test_lockdir',
 
1281
                   'bzrlib.tests.test_lockable_files',
 
1282
                   'bzrlib.tests.test_log',
 
1283
                   'bzrlib.tests.test_merge',
 
1284
                   'bzrlib.tests.test_merge3',
 
1285
                   'bzrlib.tests.test_merge_core',
 
1286
                   'bzrlib.tests.test_missing',
 
1287
                   'bzrlib.tests.test_msgeditor',
 
1288
                   'bzrlib.tests.test_nonascii',
 
1289
                   'bzrlib.tests.test_options',
 
1290
                   'bzrlib.tests.test_osutils',
 
1291
                   'bzrlib.tests.test_patch',
 
1292
                   'bzrlib.tests.test_patches',
 
1293
                   'bzrlib.tests.test_permissions',
 
1294
                   'bzrlib.tests.test_plugins',
 
1295
                   'bzrlib.tests.test_progress',
 
1296
                   'bzrlib.tests.test_reconcile',
 
1297
                   'bzrlib.tests.test_repository',
 
1298
                   'bzrlib.tests.test_revision',
 
1299
                   'bzrlib.tests.test_revisionnamespaces',
 
1300
                   'bzrlib.tests.test_revprops',
 
1301
                   'bzrlib.tests.test_revisiontree',
 
1302
                   'bzrlib.tests.test_rio',
 
1303
                   'bzrlib.tests.test_sampler',
 
1304
                   'bzrlib.tests.test_selftest',
 
1305
                   'bzrlib.tests.test_setup',
 
1306
                   'bzrlib.tests.test_sftp_transport',
 
1307
                   'bzrlib.tests.test_smart_add',
 
1308
                   'bzrlib.tests.test_source',
 
1309
                   'bzrlib.tests.test_status',
 
1310
                   'bzrlib.tests.test_store',
 
1311
                   'bzrlib.tests.test_symbol_versioning',
 
1312
                   'bzrlib.tests.test_testament',
 
1313
                   'bzrlib.tests.test_textfile',
 
1314
                   'bzrlib.tests.test_textmerge',
 
1315
                   'bzrlib.tests.test_trace',
 
1316
                   'bzrlib.tests.test_transactions',
 
1317
                   'bzrlib.tests.test_transform',
 
1318
                   'bzrlib.tests.test_transport',
 
1319
                   'bzrlib.tests.test_tree',
 
1320
                   'bzrlib.tests.test_tsort',
 
1321
                   'bzrlib.tests.test_tuned_gzip',
 
1322
                   'bzrlib.tests.test_ui',
 
1323
                   'bzrlib.tests.test_upgrade',
 
1324
                   'bzrlib.tests.test_urlutils',
 
1325
                   'bzrlib.tests.test_versionedfile',
 
1326
                   'bzrlib.tests.test_weave',
 
1327
                   'bzrlib.tests.test_whitebox',
 
1328
                   'bzrlib.tests.test_workingtree',
 
1329
                   'bzrlib.tests.test_xml',
 
1330
                   ]
 
1331
    test_transport_implementations = [
 
1332
        'bzrlib.tests.test_transport_implementations',
 
1333
        'bzrlib.tests.test_read_bundle',
 
1334
        ]
 
1335
    suite = TestUtil.TestSuite()
 
1336
    loader = TestUtil.TestLoader()
 
1337
    suite.addTest(loader.loadTestsFromModuleNames(testmod_names))
 
1338
    from bzrlib.transport import TransportTestProviderAdapter
 
1339
    adapter = TransportTestProviderAdapter()
 
1340
    adapt_modules(test_transport_implementations, adapter, loader, suite)
 
1341
    for package in packages_to_test():
 
1342
        suite.addTest(package.test_suite())
 
1343
    for m in MODULES_TO_TEST:
 
1344
        suite.addTest(loader.loadTestsFromModule(m))
 
1345
    for m in MODULES_TO_DOCTEST:
 
1346
        suite.addTest(doctest.DocTestSuite(m))
 
1347
    for name, plugin in bzrlib.plugin.all_plugins().items():
 
1348
        if getattr(plugin, 'test_suite', None) is not None:
 
1349
            suite.addTest(plugin.test_suite())
 
1350
    return suite
 
1351
 
 
1352
 
 
1353
def adapt_modules(mods_list, adapter, loader, suite):
 
1354
    """Adapt the modules in mods_list using adapter and add to suite."""
 
1355
    for test in iter_suite_tests(loader.loadTestsFromModuleNames(mods_list)):
 
1356
        suite.addTests(adapter.adapt(test))