~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/tests/__init__.py

  • Committer: Aaron Bentley
  • Date: 2006-08-08 06:47:16 UTC
  • mto: (1910.2.43 format-bumps)
  • mto: This revision was merged to the branch mainline in revision 1922.
  • Revision ID: aaron.bentley@utoronto.ca-20060808064716-75bc465292c2708f
Ensure root entry always has a revision

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005 by Canonical Ltd
2
 
 
 
1
# Copyright (C) 2005, 2006 by Canonical Ltd
 
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
5
5
# the Free Software Foundation; either version 2 of the License, or
6
6
# (at your option) any later version.
7
 
 
 
7
#
8
8
# This program is distributed in the hope that it will be useful,
9
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
10
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11
11
# GNU General Public License for more details.
12
 
 
 
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
 
 
18
# TODO: Perhaps there should be an API to find out if bzr running under the
 
19
# test suite -- some plugins might want to avoid making intrusive changes if
 
20
# this is the case.  However, we want behaviour under to test to diverge as
 
21
# little as possible, so this should be used rarely if it's added at all.
 
22
# (Suggestion from j-a-meinel, 2005-11-24)
 
23
 
 
24
# NOTE: Some classes in here use camelCaseNaming() rather than
 
25
# underscore_naming().  That's for consistency with unittest; it's not the
 
26
# general style of bzrlib.  Please continue that consistency when adding e.g.
 
27
# new assertFoo() methods.
 
28
 
 
29
import codecs
18
30
from cStringIO import StringIO
19
31
import difflib
 
32
import doctest
20
33
import errno
21
34
import logging
22
35
import os
23
36
import re
24
 
import shutil
 
37
import shlex
 
38
import stat
 
39
from subprocess import Popen, PIPE
25
40
import sys
26
41
import tempfile
27
42
import unittest
28
43
import time
29
44
 
 
45
 
 
46
import bzrlib.branch
 
47
import bzrlib.bzrdir as bzrdir
30
48
import bzrlib.commands
 
49
import bzrlib.bundle.serializer
 
50
import bzrlib.errors as errors
 
51
import bzrlib.inventory
 
52
import bzrlib.iterablefile
 
53
import bzrlib.lockdir
 
54
try:
 
55
    import bzrlib.lsprof
 
56
except ImportError:
 
57
    # lsprof not available
 
58
    pass
 
59
from bzrlib.merge import merge_inner
 
60
import bzrlib.merge3
 
61
import bzrlib.osutils
 
62
import bzrlib.osutils as osutils
 
63
import bzrlib.plugin
 
64
import bzrlib.progress as progress
 
65
from bzrlib.revision import common_ancestor
 
66
import bzrlib.store
31
67
import bzrlib.trace
32
 
import bzrlib.fetch
33
 
import bzrlib.osutils as osutils
34
 
from bzrlib.selftest import TestUtil
35
 
from bzrlib.selftest.TestUtil import TestLoader, TestSuite
36
 
from bzrlib.selftest.treeshape import build_tree_contents
 
68
from bzrlib.transport import get_transport
 
69
import bzrlib.transport
 
70
from bzrlib.transport.local import LocalRelpathServer
 
71
from bzrlib.transport.readonly import ReadonlyServer
 
72
from bzrlib.trace import mutter
 
73
from bzrlib.tests import TestUtil
 
74
from bzrlib.tests.TestUtil import (
 
75
                          TestSuite,
 
76
                          TestLoader,
 
77
                          )
 
78
from bzrlib.tests.treeshape import build_tree_contents
 
79
import bzrlib.urlutils as urlutils
 
80
from bzrlib.workingtree import WorkingTree, WorkingTreeFormat2
 
81
 
 
82
default_transport = LocalRelpathServer
37
83
 
38
84
MODULES_TO_TEST = []
39
 
MODULES_TO_DOCTEST = []
40
 
 
41
 
from logging import debug, warning, error
42
 
 
43
 
 
44
 
 
45
 
class EarlyStoppingTestResultAdapter(object):
46
 
    """An adapter for TestResult to stop at the first first failure or error"""
47
 
 
48
 
    def __init__(self, result):
49
 
        self._result = result
50
 
 
51
 
    def addError(self, test, err):
52
 
        self._result.addError(test, err)
53
 
        self._result.stop()
54
 
 
55
 
    def addFailure(self, test, err):
56
 
        self._result.addFailure(test, err)
57
 
        self._result.stop()
58
 
 
59
 
    def __getattr__(self, name):
60
 
        return getattr(self._result, name)
61
 
 
62
 
    def __setattr__(self, name, value):
63
 
        if name == '_result':
64
 
            object.__setattr__(self, name, value)
65
 
        return setattr(self._result, name, value)
 
85
MODULES_TO_DOCTEST = [
 
86
                      bzrlib.branch,
 
87
                      bzrlib.bundle.serializer,
 
88
                      bzrlib.commands,
 
89
                      bzrlib.errors,
 
90
                      bzrlib.inventory,
 
91
                      bzrlib.iterablefile,
 
92
                      bzrlib.lockdir,
 
93
                      bzrlib.merge3,
 
94
                      bzrlib.option,
 
95
                      bzrlib.osutils,
 
96
                      bzrlib.store
 
97
                      ]
 
98
 
 
99
 
 
100
def packages_to_test():
 
101
    """Return a list of packages to test.
 
102
 
 
103
    The packages are not globally imported so that import failures are
 
104
    triggered when running selftest, not when importing the command.
 
105
    """
 
106
    import bzrlib.doc
 
107
    import bzrlib.tests.blackbox
 
108
    import bzrlib.tests.branch_implementations
 
109
    import bzrlib.tests.bzrdir_implementations
 
110
    import bzrlib.tests.interrepository_implementations
 
111
    import bzrlib.tests.interversionedfile_implementations
 
112
    import bzrlib.tests.intertree_implementations
 
113
    import bzrlib.tests.repository_implementations
 
114
    import bzrlib.tests.revisionstore_implementations
 
115
    import bzrlib.tests.tree_implementations
 
116
    import bzrlib.tests.workingtree_implementations
 
117
    return [
 
118
            bzrlib.doc,
 
119
            bzrlib.tests.blackbox,
 
120
            bzrlib.tests.branch_implementations,
 
121
            bzrlib.tests.bzrdir_implementations,
 
122
            bzrlib.tests.interrepository_implementations,
 
123
            bzrlib.tests.interversionedfile_implementations,
 
124
            bzrlib.tests.intertree_implementations,
 
125
            bzrlib.tests.repository_implementations,
 
126
            bzrlib.tests.revisionstore_implementations,
 
127
            bzrlib.tests.tree_implementations,
 
128
            bzrlib.tests.workingtree_implementations,
 
129
            ]
66
130
 
67
131
 
68
132
class _MyResult(unittest._TextTestResult):
69
 
    """
70
 
    Custom TestResult.
71
 
 
72
 
    No special behaviour for now.
73
 
    """
74
 
 
75
 
    def _elapsedTime(self):
76
 
        return "(Took %.3fs)" % (time.time() - self._start_time)
 
133
    """Custom TestResult.
 
134
 
 
135
    Shows output in a different format, including displaying runtime for tests.
 
136
    """
 
137
    stop_early = False
 
138
    
 
139
    def __init__(self, stream, descriptions, verbosity, pb=None):
 
140
        unittest._TextTestResult.__init__(self, stream, descriptions, verbosity)
 
141
        self.pb = pb
 
142
    
 
143
    def extractBenchmarkTime(self, testCase):
 
144
        """Add a benchmark time for the current test case."""
 
145
        self._benchmarkTime = getattr(testCase, "_benchtime", None)
 
146
    
 
147
    def _elapsedTestTimeString(self):
 
148
        """Return a time string for the overall time the current test has taken."""
 
149
        return self._formatTime(time.time() - self._start_time)
 
150
 
 
151
    def _testTimeString(self):
 
152
        if self._benchmarkTime is not None:
 
153
            return "%s/%s" % (
 
154
                self._formatTime(self._benchmarkTime),
 
155
                self._elapsedTestTimeString())
 
156
        else:
 
157
            return "      %s" % self._elapsedTestTimeString()
 
158
 
 
159
    def _formatTime(self, seconds):
 
160
        """Format seconds as milliseconds with leading spaces."""
 
161
        return "%5dms" % (1000 * seconds)
 
162
 
 
163
    def _ellipsise_unimportant_words(self, a_string, final_width,
 
164
                                   keep_start=False):
 
165
        """Add ellipses (sp?) for overly long strings.
 
166
        
 
167
        :param keep_start: If true preserve the start of a_string rather
 
168
                           than the end of it.
 
169
        """
 
170
        if keep_start:
 
171
            if len(a_string) > final_width:
 
172
                result = a_string[:final_width-3] + '...'
 
173
            else:
 
174
                result = a_string
 
175
        else:
 
176
            if len(a_string) > final_width:
 
177
                result = '...' + a_string[3-final_width:]
 
178
            else:
 
179
                result = a_string
 
180
        return result.ljust(final_width)
77
181
 
78
182
    def startTest(self, test):
79
183
        unittest.TestResult.startTest(self, test)
80
 
        # TODO: Maybe show test.shortDescription somewhere?
81
 
        what = test.shortDescription() or test.id()        
 
184
        # In a short description, the important words are in
 
185
        # the beginning, but in an id, the important words are
 
186
        # at the end
 
187
        SHOW_DESCRIPTIONS = False
 
188
 
 
189
        if not self.showAll and self.dots and self.pb is not None:
 
190
            final_width = 13
 
191
        else:
 
192
            final_width = osutils.terminal_width()
 
193
            final_width = final_width - 15 - 8
 
194
        what = None
 
195
        if SHOW_DESCRIPTIONS:
 
196
            what = test.shortDescription()
 
197
            if what:
 
198
                what = self._ellipsise_unimportant_words(what, final_width, keep_start=True)
 
199
        if what is None:
 
200
            what = test.id()
 
201
            if what.startswith('bzrlib.tests.'):
 
202
                what = what[13:]
 
203
            what = self._ellipsise_unimportant_words(what, final_width)
82
204
        if self.showAll:
83
 
            self.stream.write('%-70.70s' % what)
 
205
            self.stream.write(what)
 
206
        elif self.dots and self.pb is not None:
 
207
            self.pb.update(what, self.testsRun - 1, None)
84
208
        self.stream.flush()
 
209
        self._recordTestStartTime()
 
210
 
 
211
    def _recordTestStartTime(self):
 
212
        """Record that a test has started."""
85
213
        self._start_time = time.time()
86
214
 
87
215
    def addError(self, test, err):
 
216
        if isinstance(err[1], TestSkipped):
 
217
            return self.addSkipped(test, err)    
88
218
        unittest.TestResult.addError(self, test, err)
 
219
        self.extractBenchmarkTime(test)
89
220
        if self.showAll:
90
 
            self.stream.writeln("ERROR %s" % self._elapsedTime())
91
 
        elif self.dots:
 
221
            self.stream.writeln("ERROR %s" % self._testTimeString())
 
222
        elif self.dots and self.pb is None:
92
223
            self.stream.write('E')
 
224
        elif self.dots:
 
225
            self.pb.update(self._ellipsise_unimportant_words('ERROR', 13), self.testsRun, None)
 
226
            self.pb.note(self._ellipsise_unimportant_words(
 
227
                            test.id() + ': ERROR',
 
228
                            osutils.terminal_width()))
93
229
        self.stream.flush()
 
230
        if self.stop_early:
 
231
            self.stop()
94
232
 
95
233
    def addFailure(self, test, err):
96
234
        unittest.TestResult.addFailure(self, test, err)
 
235
        self.extractBenchmarkTime(test)
97
236
        if self.showAll:
98
 
            self.stream.writeln("FAIL %s" % self._elapsedTime())
99
 
        elif self.dots:
 
237
            self.stream.writeln(" FAIL %s" % self._testTimeString())
 
238
        elif self.dots and self.pb is None:
100
239
            self.stream.write('F')
 
240
        elif self.dots:
 
241
            self.pb.update(self._ellipsise_unimportant_words('FAIL', 13), self.testsRun, None)
 
242
            self.pb.note(self._ellipsise_unimportant_words(
 
243
                            test.id() + ': FAIL',
 
244
                            osutils.terminal_width()))
101
245
        self.stream.flush()
 
246
        if self.stop_early:
 
247
            self.stop()
102
248
 
103
249
    def addSuccess(self, test):
 
250
        self.extractBenchmarkTime(test)
104
251
        if self.showAll:
105
 
            self.stream.writeln('OK %s' % self._elapsedTime())
106
 
        elif self.dots:
 
252
            self.stream.writeln('   OK %s' % self._testTimeString())
 
253
            for bench_called, stats in getattr(test, '_benchcalls', []):
 
254
                self.stream.writeln('LSProf output for %s(%s, %s)' % bench_called)
 
255
                stats.pprint(file=self.stream)
 
256
        elif self.dots and self.pb is None:
107
257
            self.stream.write('~')
 
258
        elif self.dots:
 
259
            self.pb.update(self._ellipsise_unimportant_words('OK', 13), self.testsRun, None)
108
260
        self.stream.flush()
109
261
        unittest.TestResult.addSuccess(self, test)
110
262
 
 
263
    def addSkipped(self, test, skip_excinfo):
 
264
        self.extractBenchmarkTime(test)
 
265
        if self.showAll:
 
266
            print >>self.stream, ' SKIP %s' % self._testTimeString()
 
267
            print >>self.stream, '     %s' % skip_excinfo[1]
 
268
        elif self.dots and self.pb is None:
 
269
            self.stream.write('S')
 
270
        elif self.dots:
 
271
            self.pb.update(self._ellipsise_unimportant_words('SKIP', 13), self.testsRun, None)
 
272
        self.stream.flush()
 
273
        # seems best to treat this as success from point-of-view of unittest
 
274
        # -- it actually does nothing so it barely matters :)
 
275
        try:
 
276
            test.tearDown()
 
277
        except KeyboardInterrupt:
 
278
            raise
 
279
        except:
 
280
            self.addError(test, test.__exc_info())
 
281
        else:
 
282
            unittest.TestResult.addSuccess(self, test)
 
283
 
111
284
    def printErrorList(self, flavour, errors):
112
285
        for test, err in errors:
113
286
            self.stream.writeln(self.separator1)
114
 
            self.stream.writeln("%s: %s" % (flavour,self.getDescription(test)))
115
 
            if hasattr(test, '_get_log'):
116
 
                self.stream.writeln()
117
 
                self.stream.writeln('log from this test:')
 
287
            self.stream.writeln("%s: %s" % (flavour, self.getDescription(test)))
 
288
            if getattr(test, '_get_log', None) is not None:
 
289
                print >>self.stream
 
290
                print >>self.stream, \
 
291
                        ('vvvv[log from %s]' % test.id()).ljust(78,'-')
118
292
                print >>self.stream, test._get_log()
 
293
                print >>self.stream, \
 
294
                        ('^^^^[log from %s]' % test.id()).ljust(78,'-')
119
295
            self.stream.writeln(self.separator2)
120
296
            self.stream.writeln("%s" % err)
121
297
 
122
298
 
123
 
class TextTestRunner(unittest.TextTestRunner):
 
299
class TextTestRunner(object):
124
300
    stop_on_failure = False
125
301
 
 
302
    def __init__(self,
 
303
                 stream=sys.stderr,
 
304
                 descriptions=0,
 
305
                 verbosity=1,
 
306
                 keep_output=False,
 
307
                 pb=None):
 
308
        self.stream = unittest._WritelnDecorator(stream)
 
309
        self.descriptions = descriptions
 
310
        self.verbosity = verbosity
 
311
        self.keep_output = keep_output
 
312
        self.pb = pb
 
313
 
126
314
    def _makeResult(self):
127
 
        result = _MyResult(self.stream, self.descriptions, self.verbosity)
128
 
        if self.stop_on_failure:
129
 
            result = EarlyStoppingTestResultAdapter(result)
 
315
        result = _MyResult(self.stream,
 
316
                           self.descriptions,
 
317
                           self.verbosity,
 
318
                           pb=self.pb)
 
319
        result.stop_early = self.stop_on_failure
 
320
        return result
 
321
 
 
322
    def run(self, test):
 
323
        "Run the given test case or test suite."
 
324
        result = self._makeResult()
 
325
        startTime = time.time()
 
326
        if self.pb is not None:
 
327
            self.pb.update('Running tests', 0, test.countTestCases())
 
328
        test.run(result)
 
329
        stopTime = time.time()
 
330
        timeTaken = stopTime - startTime
 
331
        result.printErrors()
 
332
        self.stream.writeln(result.separator2)
 
333
        run = result.testsRun
 
334
        self.stream.writeln("Ran %d test%s in %.3fs" %
 
335
                            (run, run != 1 and "s" or "", timeTaken))
 
336
        self.stream.writeln()
 
337
        if not result.wasSuccessful():
 
338
            self.stream.write("FAILED (")
 
339
            failed, errored = map(len, (result.failures, result.errors))
 
340
            if failed:
 
341
                self.stream.write("failures=%d" % failed)
 
342
            if errored:
 
343
                if failed: self.stream.write(", ")
 
344
                self.stream.write("errors=%d" % errored)
 
345
            self.stream.writeln(")")
 
346
        else:
 
347
            self.stream.writeln("OK")
 
348
        if self.pb is not None:
 
349
            self.pb.update('Cleaning up', 0, 1)
 
350
        # This is still a little bogus, 
 
351
        # but only a little. Folk not using our testrunner will
 
352
        # have to delete their temp directories themselves.
 
353
        test_root = TestCaseInTempDir.TEST_ROOT
 
354
        if result.wasSuccessful() or not self.keep_output:
 
355
            if test_root is not None:
 
356
                # If LANG=C we probably have created some bogus paths
 
357
                # which rmtree(unicode) will fail to delete
 
358
                # so make sure we are using rmtree(str) to delete everything
 
359
                # except on win32, where rmtree(str) will fail
 
360
                # since it doesn't have the property of byte-stream paths
 
361
                # (they are either ascii or mbcs)
 
362
                if sys.platform == 'win32':
 
363
                    # make sure we are using the unicode win32 api
 
364
                    test_root = unicode(test_root)
 
365
                else:
 
366
                    test_root = test_root.encode(
 
367
                        sys.getfilesystemencoding())
 
368
                osutils.rmtree(test_root)
 
369
        else:
 
370
            if self.pb is not None:
 
371
                self.pb.note("Failed tests working directories are in '%s'\n",
 
372
                             test_root)
 
373
            else:
 
374
                self.stream.writeln(
 
375
                    "Failed tests working directories are in '%s'\n" %
 
376
                    test_root)
 
377
        TestCaseInTempDir.TEST_ROOT = None
 
378
        if self.pb is not None:
 
379
            self.pb.clear()
130
380
        return result
131
381
 
132
382
 
151
401
class CommandFailed(Exception):
152
402
    pass
153
403
 
 
404
 
 
405
class StringIOWrapper(object):
 
406
    """A wrapper around cStringIO which just adds an encoding attribute.
 
407
    
 
408
    Internally we can check sys.stdout to see what the output encoding
 
409
    should be. However, cStringIO has no encoding attribute that we can
 
410
    set. So we wrap it instead.
 
411
    """
 
412
    encoding='ascii'
 
413
    _cstring = None
 
414
 
 
415
    def __init__(self, s=None):
 
416
        if s is not None:
 
417
            self.__dict__['_cstring'] = StringIO(s)
 
418
        else:
 
419
            self.__dict__['_cstring'] = StringIO()
 
420
 
 
421
    def __getattr__(self, name, getattr=getattr):
 
422
        return getattr(self.__dict__['_cstring'], name)
 
423
 
 
424
    def __setattr__(self, name, val):
 
425
        if name == 'encoding':
 
426
            self.__dict__['encoding'] = val
 
427
        else:
 
428
            return setattr(self._cstring, name, val)
 
429
 
 
430
 
154
431
class TestCase(unittest.TestCase):
155
432
    """Base class for bzr unit tests.
156
433
    
159
436
 
160
437
    Error and debug log messages are redirected from their usual
161
438
    location into a temporary file, the contents of which can be
162
 
    retrieved by _get_log().
 
439
    retrieved by _get_log().  We use a real OS file, not an in-memory object,
 
440
    so that it can also capture file IO.  When the test completes this file
 
441
    is read into memory and removed from disk.
163
442
       
164
443
    There are also convenience functions to invoke bzr's command-line
165
 
    routine, and to build and check bzr trees."""
 
444
    routine, and to build and check bzr trees.
 
445
   
 
446
    In addition to the usual method of overriding tearDown(), this class also
 
447
    allows subclasses to register functions into the _cleanups list, which is
 
448
    run in order as the object is torn down.  It's less likely this will be
 
449
    accidentally overlooked.
 
450
    """
166
451
 
167
 
    BZRPATH = 'bzr'
168
452
    _log_file_name = None
 
453
    _log_contents = ''
 
454
    # record lsprof data when performing benchmark calls.
 
455
    _gather_lsprof_in_benchmarks = False
 
456
 
 
457
    def __init__(self, methodName='testMethod'):
 
458
        super(TestCase, self).__init__(methodName)
 
459
        self._cleanups = []
169
460
 
170
461
    def setUp(self):
171
462
        unittest.TestCase.setUp(self)
172
 
        self.oldenv = os.environ.get('HOME', None)
173
 
        os.environ['HOME'] = os.getcwd()
174
 
        self.bzr_email = os.environ.get('BZREMAIL')
175
 
        if self.bzr_email is not None:
176
 
            del os.environ['BZREMAIL']
177
 
        self.email = os.environ.get('EMAIL')
178
 
        if self.email is not None:
179
 
            del os.environ['EMAIL']
 
463
        self._cleanEnvironment()
180
464
        bzrlib.trace.disable_default_logging()
181
 
        self._enable_file_logging()
 
465
        self._startLogFile()
 
466
        self._benchcalls = []
 
467
        self._benchtime = None
182
468
 
183
469
    def _ndiff_strings(self, a, b):
184
470
        """Return ndiff between two strings containing lines.
195
481
                                  charjunk=lambda x: False)
196
482
        return ''.join(difflines)
197
483
 
198
 
    def assertEqualDiff(self, a, b):
 
484
    def assertEqualDiff(self, a, b, message=None):
199
485
        """Assert two texts are equal, if not raise an exception.
200
486
        
201
487
        This is intended for use with multi-line strings where it can 
204
490
        # TODO: perhaps override assertEquals to call this for strings?
205
491
        if a == b:
206
492
            return
207
 
        raise AssertionError("texts not equal:\n" + 
 
493
        if message is None:
 
494
            message = "texts not equal:\n"
 
495
        raise AssertionError(message + 
208
496
                             self._ndiff_strings(a, b))      
 
497
        
 
498
    def assertEqualMode(self, mode, mode_test):
 
499
        self.assertEqual(mode, mode_test,
 
500
                         'mode mismatch %o != %o' % (mode, mode_test))
 
501
 
 
502
    def assertStartsWith(self, s, prefix):
 
503
        if not s.startswith(prefix):
 
504
            raise AssertionError('string %r does not start with %r' % (s, prefix))
 
505
 
 
506
    def assertEndsWith(self, s, suffix):
 
507
        """Asserts that s ends with suffix."""
 
508
        if not s.endswith(suffix):
 
509
            raise AssertionError('string %r does not end with %r' % (s, suffix))
209
510
 
210
511
    def assertContainsRe(self, haystack, needle_re):
211
512
        """Assert that a contains something matching a regular expression."""
213
514
            raise AssertionError('pattern "%s" not found in "%s"'
214
515
                    % (needle_re, haystack))
215
516
 
216
 
    def _enable_file_logging(self):
 
517
    def assertNotContainsRe(self, haystack, needle_re):
 
518
        """Assert that a does not match a regular expression"""
 
519
        if re.search(needle_re, haystack):
 
520
            raise AssertionError('pattern "%s" found in "%s"'
 
521
                    % (needle_re, haystack))
 
522
 
 
523
    def assertSubset(self, sublist, superlist):
 
524
        """Assert that every entry in sublist is present in superlist."""
 
525
        missing = []
 
526
        for entry in sublist:
 
527
            if entry not in superlist:
 
528
                missing.append(entry)
 
529
        if len(missing) > 0:
 
530
            raise AssertionError("value(s) %r not present in container %r" % 
 
531
                                 (missing, superlist))
 
532
 
 
533
    def assertIs(self, left, right):
 
534
        if not (left is right):
 
535
            raise AssertionError("%r is not %r." % (left, right))
 
536
 
 
537
    def assertTransportMode(self, transport, path, mode):
 
538
        """Fail if a path does not have mode mode.
 
539
        
 
540
        If modes are not supported on this transport, the assertion is ignored.
 
541
        """
 
542
        if not transport._can_roundtrip_unix_modebits():
 
543
            return
 
544
        path_stat = transport.stat(path)
 
545
        actual_mode = stat.S_IMODE(path_stat.st_mode)
 
546
        self.assertEqual(mode, actual_mode,
 
547
            'mode of %r incorrect (%o != %o)' % (path, mode, actual_mode))
 
548
 
 
549
    def assertIsInstance(self, obj, kls):
 
550
        """Fail if obj is not an instance of kls"""
 
551
        if not isinstance(obj, kls):
 
552
            self.fail("%r is an instance of %s rather than %s" % (
 
553
                obj, obj.__class__, kls))
 
554
 
 
555
    def _startLogFile(self):
 
556
        """Send bzr and test log messages to a temporary file.
 
557
 
 
558
        The file is removed as the test is torn down.
 
559
        """
217
560
        fileno, name = tempfile.mkstemp(suffix='.log', prefix='testbzr')
218
 
 
219
 
        self._log_file = os.fdopen(fileno, 'w+')
220
 
 
221
 
        hdlr = logging.StreamHandler(self._log_file)
222
 
        hdlr.setLevel(logging.DEBUG)
223
 
        hdlr.setFormatter(logging.Formatter('%(levelname)8s  %(message)s'))
224
 
        logging.getLogger('').addHandler(hdlr)
225
 
        logging.getLogger('').setLevel(logging.DEBUG)
226
 
        self._log_hdlr = hdlr
227
 
        debug('opened log file %s', name)
228
 
        
 
561
        encoder, decoder, stream_reader, stream_writer = codecs.lookup('UTF-8')
 
562
        self._log_file = stream_writer(os.fdopen(fileno, 'w+'))
 
563
        self._log_nonce = bzrlib.trace.enable_test_log(self._log_file)
229
564
        self._log_file_name = name
230
 
 
231
 
    def tearDown(self):
232
 
        os.environ['HOME'] = self.oldenv
233
 
        if os.environ.get('BZREMAIL') is not None:
234
 
            del os.environ['BZREMAIL']
235
 
        if self.bzr_email is not None:
236
 
            os.environ['BZREMAIL'] = self.bzr_email
237
 
        if os.environ.get('EMAIL') is not None:
238
 
            del os.environ['EMAIL']
239
 
        if self.email is not None:
240
 
            os.environ['EMAIL'] = self.email
241
 
        logging.getLogger('').removeHandler(self._log_hdlr)
242
 
        bzrlib.trace.enable_default_logging()
243
 
        logging.debug('%s teardown', self.id())
 
565
        self.addCleanup(self._finishLogFile)
 
566
 
 
567
    def _finishLogFile(self):
 
568
        """Finished with the log file.
 
569
 
 
570
        Read contents into memory, close, and delete.
 
571
        """
 
572
        if self._log_file is None:
 
573
            return
 
574
        bzrlib.trace.disable_test_log(self._log_nonce)
 
575
        self._log_file.seek(0)
 
576
        self._log_contents = self._log_file.read()
244
577
        self._log_file.close()
 
578
        os.remove(self._log_file_name)
 
579
        self._log_file = self._log_file_name = None
 
580
 
 
581
    def addCleanup(self, callable):
 
582
        """Arrange to run a callable when this case is torn down.
 
583
 
 
584
        Callables are run in the reverse of the order they are registered, 
 
585
        ie last-in first-out.
 
586
        """
 
587
        if callable in self._cleanups:
 
588
            raise ValueError("cleanup function %r already registered on %s" 
 
589
                    % (callable, self))
 
590
        self._cleanups.append(callable)
 
591
 
 
592
    def _cleanEnvironment(self):
 
593
        new_env = {
 
594
            'HOME': os.getcwd(),
 
595
            'APPDATA': os.getcwd(),
 
596
            'BZR_EMAIL': None,
 
597
            'EMAIL': None,
 
598
        }
 
599
        self.__old_env = {}
 
600
        self.addCleanup(self._restoreEnvironment)
 
601
        for name, value in new_env.iteritems():
 
602
            self._captureVar(name, value)
 
603
 
 
604
 
 
605
    def _captureVar(self, name, newvalue):
 
606
        """Set an environment variable, preparing it to be reset when finished."""
 
607
        self.__old_env[name] = os.environ.get(name, None)
 
608
        if newvalue is None:
 
609
            if name in os.environ:
 
610
                del os.environ[name]
 
611
        else:
 
612
            os.environ[name] = newvalue
 
613
 
 
614
    @staticmethod
 
615
    def _restoreVar(name, value):
 
616
        if value is None:
 
617
            if name in os.environ:
 
618
                del os.environ[name]
 
619
        else:
 
620
            os.environ[name] = value
 
621
 
 
622
    def _restoreEnvironment(self):
 
623
        for name, value in self.__old_env.iteritems():
 
624
            self._restoreVar(name, value)
 
625
 
 
626
    def tearDown(self):
 
627
        self._runCleanups()
245
628
        unittest.TestCase.tearDown(self)
246
629
 
 
630
    def time(self, callable, *args, **kwargs):
 
631
        """Run callable and accrue the time it takes to the benchmark time.
 
632
        
 
633
        If lsprofiling is enabled (i.e. by --lsprof-time to bzr selftest) then
 
634
        this will cause lsprofile statistics to be gathered and stored in
 
635
        self._benchcalls.
 
636
        """
 
637
        if self._benchtime is None:
 
638
            self._benchtime = 0
 
639
        start = time.time()
 
640
        try:
 
641
            if not self._gather_lsprof_in_benchmarks:
 
642
                return callable(*args, **kwargs)
 
643
            else:
 
644
                # record this benchmark
 
645
                ret, stats = bzrlib.lsprof.profile(callable, *args, **kwargs)
 
646
                stats.sort()
 
647
                self._benchcalls.append(((callable, args, kwargs), stats))
 
648
                return ret
 
649
        finally:
 
650
            self._benchtime += time.time() - start
 
651
 
 
652
    def _runCleanups(self):
 
653
        """Run registered cleanup functions. 
 
654
 
 
655
        This should only be called from TestCase.tearDown.
 
656
        """
 
657
        # TODO: Perhaps this should keep running cleanups even if 
 
658
        # one of them fails?
 
659
        for cleanup_fn in reversed(self._cleanups):
 
660
            cleanup_fn()
 
661
 
247
662
    def log(self, *args):
248
 
        logging.debug(*args)
 
663
        mutter(*args)
249
664
 
250
665
    def _get_log(self):
251
666
        """Return as a string the log for this test"""
252
667
        if self._log_file_name:
253
668
            return open(self._log_file_name).read()
254
669
        else:
255
 
            return ''
 
670
            return self._log_contents
 
671
        # TODO: Delete the log after it's been read in
256
672
 
257
 
    def capture(self, cmd):
 
673
    def capture(self, cmd, retcode=0):
258
674
        """Shortcut that splits cmd into words, runs, and returns stdout"""
259
 
        return self.run_bzr_captured(cmd.split())[0]
 
675
        return self.run_bzr_captured(cmd.split(), retcode=retcode)[0]
260
676
 
261
 
    def run_bzr_captured(self, argv, retcode=0):
262
 
        """Invoke bzr and return (result, stdout, stderr).
 
677
    def run_bzr_captured(self, argv, retcode=0, encoding=None, stdin=None):
 
678
        """Invoke bzr and return (stdout, stderr).
263
679
 
264
680
        Useful for code that wants to check the contents of the
265
681
        output, the way error messages are presented, etc.
275
691
        errors, and with logging set to something approximating the
276
692
        default, so that error reporting can be checked.
277
693
 
278
 
        argv -- arguments to invoke bzr
279
 
        retcode -- expected return code, or None for don't-care.
 
694
        :param argv: arguments to invoke bzr
 
695
        :param retcode: expected return code, or None for don't-care.
 
696
        :param encoding: encoding for sys.stdout and sys.stderr
 
697
        :param stdin: A string to be used as stdin for the command.
280
698
        """
281
 
        stdout = StringIO()
282
 
        stderr = StringIO()
283
 
        self.log('run bzr: %s', ' '.join(argv))
 
699
        if encoding is None:
 
700
            encoding = bzrlib.user_encoding
 
701
        if stdin is not None:
 
702
            stdin = StringIO(stdin)
 
703
        stdout = StringIOWrapper()
 
704
        stderr = StringIOWrapper()
 
705
        stdout.encoding = encoding
 
706
        stderr.encoding = encoding
 
707
 
 
708
        self.log('run bzr: %r', argv)
 
709
        # FIXME: don't call into logging here
284
710
        handler = logging.StreamHandler(stderr)
285
 
        handler.setFormatter(bzrlib.trace.QuietFormatter())
286
711
        handler.setLevel(logging.INFO)
287
712
        logger = logging.getLogger('')
288
713
        logger.addHandler(handler)
 
714
        old_ui_factory = bzrlib.ui.ui_factory
 
715
        bzrlib.ui.ui_factory = bzrlib.tests.blackbox.TestUIFactory(
 
716
            stdout=stdout,
 
717
            stderr=stderr)
 
718
        bzrlib.ui.ui_factory.stdin = stdin
289
719
        try:
290
 
            result = self.apply_redirected(None, stdout, stderr,
 
720
            result = self.apply_redirected(stdin, stdout, stderr,
291
721
                                           bzrlib.commands.run_bzr_catch_errors,
292
722
                                           argv)
293
723
        finally:
294
724
            logger.removeHandler(handler)
 
725
            bzrlib.ui.ui_factory = old_ui_factory
 
726
 
295
727
        out = stdout.getvalue()
296
728
        err = stderr.getvalue()
297
729
        if out:
298
 
            self.log('output:\n%s', out)
 
730
            self.log('output:\n%r', out)
299
731
        if err:
300
 
            self.log('errors:\n%s', err)
 
732
            self.log('errors:\n%r', err)
301
733
        if retcode is not None:
302
 
            self.assertEquals(result, retcode)
 
734
            self.assertEquals(retcode, result)
303
735
        return out, err
304
736
 
305
737
    def run_bzr(self, *args, **kwargs):
311
743
 
312
744
        This sends the stdout/stderr results into the test's log,
313
745
        where it may be useful for debugging.  See also run_captured.
 
746
 
 
747
        :param stdin: A string to be used as stdin for the command.
314
748
        """
315
749
        retcode = kwargs.pop('retcode', 0)
316
 
        return self.run_bzr_captured(args, retcode)
 
750
        encoding = kwargs.pop('encoding', None)
 
751
        stdin = kwargs.pop('stdin', None)
 
752
        return self.run_bzr_captured(args, retcode=retcode, encoding=encoding, stdin=stdin)
 
753
 
 
754
    def run_bzr_decode(self, *args, **kwargs):
 
755
        if kwargs.has_key('encoding'):
 
756
            encoding = kwargs['encoding']
 
757
        else:
 
758
            encoding = bzrlib.user_encoding
 
759
        return self.run_bzr(*args, **kwargs)[0].decode(encoding)
 
760
 
 
761
    def run_bzr_error(self, error_regexes, *args, **kwargs):
 
762
        """Run bzr, and check that stderr contains the supplied regexes
 
763
        
 
764
        :param error_regexes: Sequence of regular expressions which 
 
765
            must each be found in the error output. The relative ordering
 
766
            is not enforced.
 
767
        :param args: command-line arguments for bzr
 
768
        :param kwargs: Keyword arguments which are interpreted by run_bzr
 
769
            This function changes the default value of retcode to be 3,
 
770
            since in most cases this is run when you expect bzr to fail.
 
771
        :return: (out, err) The actual output of running the command (in case you
 
772
                 want to do more inspection)
 
773
 
 
774
        Examples of use:
 
775
            # Make sure that commit is failing because there is nothing to do
 
776
            self.run_bzr_error(['no changes to commit'],
 
777
                               'commit', '-m', 'my commit comment')
 
778
            # Make sure --strict is handling an unknown file, rather than
 
779
            # giving us the 'nothing to do' error
 
780
            self.build_tree(['unknown'])
 
781
            self.run_bzr_error(['Commit refused because there are unknown files'],
 
782
                               'commit', '--strict', '-m', 'my commit comment')
 
783
        """
 
784
        kwargs.setdefault('retcode', 3)
 
785
        out, err = self.run_bzr(*args, **kwargs)
 
786
        for regex in error_regexes:
 
787
            self.assertContainsRe(err, regex)
 
788
        return out, err
 
789
 
 
790
    def run_bzr_subprocess(self, *args, **kwargs):
 
791
        """Run bzr in a subprocess for testing.
 
792
 
 
793
        This starts a new Python interpreter and runs bzr in there. 
 
794
        This should only be used for tests that have a justifiable need for
 
795
        this isolation: e.g. they are testing startup time, or signal
 
796
        handling, or early startup code, etc.  Subprocess code can't be 
 
797
        profiled or debugged so easily.
 
798
 
 
799
        :param retcode: The status code that is expected.  Defaults to 0.  If
 
800
        None is supplied, the status code is not checked.
 
801
        """
 
802
        bzr_path = os.path.dirname(os.path.dirname(bzrlib.__file__))+'/bzr'
 
803
        args = list(args)
 
804
        process = Popen([sys.executable, bzr_path]+args, stdout=PIPE, 
 
805
                         stderr=PIPE)
 
806
        out = process.stdout.read()
 
807
        err = process.stderr.read()
 
808
        retcode = process.wait()
 
809
        supplied_retcode = kwargs.get('retcode', 0)
 
810
        if supplied_retcode is not None:
 
811
            assert supplied_retcode == retcode
 
812
        return [out, err]
317
813
 
318
814
    def check_inventory_shape(self, inv, shape):
319
815
        """Compare an inventory to a list of expected names.
345
841
        if stdin is None:
346
842
            stdin = StringIO("")
347
843
        if stdout is None:
348
 
            if hasattr(self, "_log_file"):
 
844
            if getattr(self, "_log_file", None) is not None:
349
845
                stdout = self._log_file
350
846
            else:
351
847
                stdout = StringIO()
352
848
        if stderr is None:
353
 
            if hasattr(self, "_log_file"):
 
849
            if getattr(self, "_log_file", None is not None):
354
850
                stderr = self._log_file
355
851
            else:
356
852
                stderr = StringIO()
367
863
            sys.stderr = real_stderr
368
864
            sys.stdin = real_stdin
369
865
 
 
866
    def merge(self, branch_from, wt_to):
 
867
        """A helper for tests to do a ui-less merge.
 
868
 
 
869
        This should move to the main library when someone has time to integrate
 
870
        it in.
 
871
        """
 
872
        # minimal ui-less merge.
 
873
        wt_to.branch.fetch(branch_from)
 
874
        base_rev = common_ancestor(branch_from.last_revision(),
 
875
                                   wt_to.branch.last_revision(),
 
876
                                   wt_to.branch.repository)
 
877
        merge_inner(wt_to.branch, branch_from.basis_tree(), 
 
878
                    wt_to.branch.repository.revision_tree(base_rev),
 
879
                    this_tree=wt_to)
 
880
        wt_to.add_pending_merge(branch_from.last_revision())
 
881
 
370
882
 
371
883
BzrTestBase = TestCase
372
884
 
401
913
            return
402
914
        i = 0
403
915
        while True:
404
 
            root = 'test%04d.tmp' % i
 
916
            root = u'test%04d.tmp' % i
405
917
            try:
406
918
                os.mkdir(root)
407
919
            except OSError, e:
411
923
                else:
412
924
                    raise
413
925
            # successfully created
414
 
            TestCaseInTempDir.TEST_ROOT = os.path.abspath(root)
 
926
            TestCaseInTempDir.TEST_ROOT = osutils.abspath(root)
415
927
            break
416
928
        # make a fake bzr directory there to prevent any tests propagating
417
929
        # up onto the source directory's real branch
418
 
        os.mkdir(os.path.join(TestCaseInTempDir.TEST_ROOT, '.bzr'))
 
930
        bzrdir.BzrDir.create_standalone_workingtree(TestCaseInTempDir.TEST_ROOT)
419
931
 
420
932
    def setUp(self):
 
933
        super(TestCaseInTempDir, self).setUp()
421
934
        self._make_test_root()
422
 
        self._currentdir = os.getcwdu()
423
 
        short_id = self.id().replace('bzrlib.selftest.', '') \
424
 
                   .replace('__main__.', '')
425
 
        self.test_dir = os.path.join(self.TEST_ROOT, short_id)
426
 
        os.mkdir(self.test_dir)
427
 
        os.chdir(self.test_dir)
428
 
        super(TestCaseInTempDir, self).setUp()
 
935
        _currentdir = os.getcwdu()
 
936
        # shorten the name, to avoid test failures due to path length
 
937
        short_id = self.id().replace('bzrlib.tests.', '') \
 
938
                   .replace('__main__.', '')[-100:]
 
939
        # it's possible the same test class is run several times for
 
940
        # parameterized tests, so make sure the names don't collide.  
 
941
        i = 0
 
942
        while True:
 
943
            if i > 0:
 
944
                candidate_dir = '%s/%s.%d' % (self.TEST_ROOT, short_id, i)
 
945
            else:
 
946
                candidate_dir = '%s/%s' % (self.TEST_ROOT, short_id)
 
947
            if os.path.exists(candidate_dir):
 
948
                i = i + 1
 
949
                continue
 
950
            else:
 
951
                self.test_dir = candidate_dir
 
952
                os.mkdir(self.test_dir)
 
953
                os.chdir(self.test_dir)
 
954
                break
 
955
        os.environ['HOME'] = self.test_dir
 
956
        os.environ['APPDATA'] = self.test_dir
 
957
        def _leaveDirectory():
 
958
            os.chdir(_currentdir)
 
959
        self.addCleanup(_leaveDirectory)
429
960
        
430
 
    def tearDown(self):
431
 
        os.chdir(self._currentdir)
432
 
        super(TestCaseInTempDir, self).tearDown()
433
 
 
434
 
    def build_tree(self, shape):
 
961
    def build_tree(self, shape, line_endings='native', transport=None):
435
962
        """Build a test tree according to a pattern.
436
963
 
437
964
        shape is a sequence of file specifications.  If the final
438
965
        character is '/', a directory is created.
439
966
 
440
967
        This doesn't add anything to a branch.
 
968
        :param line_endings: Either 'binary' or 'native'
 
969
                             in binary mode, exact contents are written
 
970
                             in native mode, the line endings match the
 
971
                             default platform endings.
 
972
 
 
973
        :param transport: A transport to write to, for building trees on 
 
974
                          VFS's. If the transport is readonly or None,
 
975
                          "." is opened automatically.
441
976
        """
442
977
        # XXX: It's OK to just create them using forward slashes on windows?
 
978
        if transport is None or transport.is_readonly():
 
979
            transport = get_transport(".")
443
980
        for name in shape:
444
 
            assert isinstance(name, basestring)
 
981
            self.assert_(isinstance(name, basestring))
445
982
            if name[-1] == '/':
446
 
                os.mkdir(name[:-1])
 
983
                transport.mkdir(urlutils.escape(name[:-1]))
447
984
            else:
448
 
                f = file(name, 'wt')
449
 
                print >>f, "contents of", name
450
 
                f.close()
 
985
                if line_endings == 'binary':
 
986
                    end = '\n'
 
987
                elif line_endings == 'native':
 
988
                    end = os.linesep
 
989
                else:
 
990
                    raise errors.BzrError('Invalid line ending request %r' % (line_endings,))
 
991
                content = "contents of %s%s" % (name.encode('utf-8'), end)
 
992
                transport.put(urlutils.escape(name), StringIO(content))
451
993
 
452
994
    def build_tree_contents(self, shape):
453
 
        bzrlib.selftest.build_tree_contents(shape)
 
995
        build_tree_contents(shape)
454
996
 
455
997
    def failUnlessExists(self, path):
456
998
        """Fail unless path, which may be abs or relative, exists."""
457
999
        self.failUnless(osutils.lexists(path))
 
1000
 
 
1001
    def failIfExists(self, path):
 
1002
        """Fail if path, which may be abs or relative, exists."""
 
1003
        self.failIf(osutils.lexists(path))
458
1004
        
459
1005
    def assertFileEqual(self, content, path):
460
1006
        """Fail if path does not contain 'content'."""
461
1007
        self.failUnless(osutils.lexists(path))
 
1008
        # TODO: jam 20060427 Shouldn't this be 'rb'?
462
1009
        self.assertEqualDiff(content, open(path, 'r').read())
 
1010
 
 
1011
 
 
1012
class TestCaseWithTransport(TestCaseInTempDir):
 
1013
    """A test case that provides get_url and get_readonly_url facilities.
 
1014
 
 
1015
    These back onto two transport servers, one for readonly access and one for
 
1016
    read write access.
 
1017
 
 
1018
    If no explicit class is provided for readonly access, a
 
1019
    ReadonlyTransportDecorator is used instead which allows the use of non disk
 
1020
    based read write transports.
 
1021
 
 
1022
    If an explicit class is provided for readonly access, that server and the 
 
1023
    readwrite one must both define get_url() as resolving to os.getcwd().
 
1024
    """
 
1025
 
 
1026
    def __init__(self, methodName='testMethod'):
 
1027
        super(TestCaseWithTransport, self).__init__(methodName)
 
1028
        self.__readonly_server = None
 
1029
        self.__server = None
 
1030
        self.transport_server = default_transport
 
1031
        self.transport_readonly_server = None
 
1032
 
 
1033
    def get_readonly_url(self, relpath=None):
 
1034
        """Get a URL for the readonly transport.
 
1035
 
 
1036
        This will either be backed by '.' or a decorator to the transport 
 
1037
        used by self.get_url()
 
1038
        relpath provides for clients to get a path relative to the base url.
 
1039
        These should only be downwards relative, not upwards.
 
1040
        """
 
1041
        base = self.get_readonly_server().get_url()
 
1042
        if relpath is not None:
 
1043
            if not base.endswith('/'):
 
1044
                base = base + '/'
 
1045
            base = base + relpath
 
1046
        return base
 
1047
 
 
1048
    def get_readonly_server(self):
 
1049
        """Get the server instance for the readonly transport
 
1050
 
 
1051
        This is useful for some tests with specific servers to do diagnostics.
 
1052
        """
 
1053
        if self.__readonly_server is None:
 
1054
            if self.transport_readonly_server is None:
 
1055
                # readonly decorator requested
 
1056
                # bring up the server
 
1057
                self.get_url()
 
1058
                self.__readonly_server = ReadonlyServer()
 
1059
                self.__readonly_server.setUp(self.__server)
 
1060
            else:
 
1061
                self.__readonly_server = self.transport_readonly_server()
 
1062
                self.__readonly_server.setUp()
 
1063
            self.addCleanup(self.__readonly_server.tearDown)
 
1064
        return self.__readonly_server
 
1065
 
 
1066
    def get_server(self):
 
1067
        """Get the read/write server instance.
 
1068
 
 
1069
        This is useful for some tests with specific servers that need
 
1070
        diagnostics.
 
1071
        """
 
1072
        if self.__server is None:
 
1073
            self.__server = self.transport_server()
 
1074
            self.__server.setUp()
 
1075
            self.addCleanup(self.__server.tearDown)
 
1076
        return self.__server
 
1077
 
 
1078
    def get_url(self, relpath=None):
 
1079
        """Get a URL for the readwrite transport.
 
1080
 
 
1081
        This will either be backed by '.' or to an equivalent non-file based
 
1082
        facility.
 
1083
        relpath provides for clients to get a path relative to the base url.
 
1084
        These should only be downwards relative, not upwards.
 
1085
        """
 
1086
        base = self.get_server().get_url()
 
1087
        if relpath is not None and relpath != '.':
 
1088
            if not base.endswith('/'):
 
1089
                base = base + '/'
 
1090
            base = base + urlutils.escape(relpath)
 
1091
        return base
 
1092
 
 
1093
    def get_transport(self):
 
1094
        """Return a writeable transport for the test scratch space"""
 
1095
        t = get_transport(self.get_url())
 
1096
        self.assertFalse(t.is_readonly())
 
1097
        return t
 
1098
 
 
1099
    def get_readonly_transport(self):
 
1100
        """Return a readonly transport for the test scratch space
463
1101
        
464
 
 
465
 
class MetaTestLog(TestCase):
466
 
    def test_logging(self):
467
 
        """Test logs are captured when a test fails."""
468
 
        logging.info('an info message')
469
 
        warning('something looks dodgy...')
470
 
        logging.debug('hello, test is running')
471
 
        ## assert 0
 
1102
        This can be used to test that operations which should only need
 
1103
        readonly access in fact do not try to write.
 
1104
        """
 
1105
        t = get_transport(self.get_readonly_url())
 
1106
        self.assertTrue(t.is_readonly())
 
1107
        return t
 
1108
 
 
1109
    def make_branch(self, relpath, format=None):
 
1110
        """Create a branch on the transport at relpath."""
 
1111
        repo = self.make_repository(relpath, format=format)
 
1112
        return repo.bzrdir.create_branch()
 
1113
 
 
1114
    def make_bzrdir(self, relpath, format=None):
 
1115
        try:
 
1116
            url = self.get_url(relpath)
 
1117
            mutter('relpath %r => url %r', relpath, url)
 
1118
            segments = url.split('/')
 
1119
            if segments and segments[-1] not in ('', '.'):
 
1120
                parent = '/'.join(segments[:-1])
 
1121
                t = get_transport(parent)
 
1122
                try:
 
1123
                    t.mkdir(segments[-1])
 
1124
                except errors.FileExists:
 
1125
                    pass
 
1126
            if format is None:
 
1127
                format=bzrlib.bzrdir.BzrDirFormat.get_default_format()
 
1128
            # FIXME: make this use a single transport someday. RBC 20060418
 
1129
            return format.initialize_on_transport(get_transport(relpath))
 
1130
        except errors.UninitializableFormat:
 
1131
            raise TestSkipped("Format %s is not initializable." % format)
 
1132
 
 
1133
    def make_repository(self, relpath, shared=False, format=None):
 
1134
        """Create a repository on our default transport at relpath."""
 
1135
        made_control = self.make_bzrdir(relpath, format=format)
 
1136
        return made_control.create_repository(shared=shared)
 
1137
 
 
1138
    def make_branch_and_tree(self, relpath, format=None):
 
1139
        """Create a branch on the transport and a tree locally.
 
1140
 
 
1141
        Returns the tree.
 
1142
        """
 
1143
        # TODO: always use the local disk path for the working tree,
 
1144
        # this obviously requires a format that supports branch references
 
1145
        # so check for that by checking bzrdir.BzrDirFormat.get_default_format()
 
1146
        # RBC 20060208
 
1147
        b = self.make_branch(relpath, format=format)
 
1148
        try:
 
1149
            return b.bzrdir.create_workingtree()
 
1150
        except errors.NotLocalUrl:
 
1151
            # new formats - catch No tree error and create
 
1152
            # a branch reference and a checkout.
 
1153
            # old formats at that point - raise TestSkipped.
 
1154
            # TODO: rbc 20060208
 
1155
            return WorkingTreeFormat2().initialize(bzrdir.BzrDir.open(relpath))
 
1156
 
 
1157
    def assertIsDirectory(self, relpath, transport):
 
1158
        """Assert that relpath within transport is a directory.
 
1159
 
 
1160
        This may not be possible on all transports; in that case it propagates
 
1161
        a TransportNotPossible.
 
1162
        """
 
1163
        try:
 
1164
            mode = transport.stat(relpath).st_mode
 
1165
        except errors.NoSuchFile:
 
1166
            self.fail("path %s is not a directory; no such file"
 
1167
                      % (relpath))
 
1168
        if not stat.S_ISDIR(mode):
 
1169
            self.fail("path %s is not a directory; has mode %#o"
 
1170
                      % (relpath, mode))
 
1171
 
 
1172
 
 
1173
class ChrootedTestCase(TestCaseWithTransport):
 
1174
    """A support class that provides readonly urls outside the local namespace.
 
1175
 
 
1176
    This is done by checking if self.transport_server is a MemoryServer. if it
 
1177
    is then we are chrooted already, if it is not then an HttpServer is used
 
1178
    for readonly urls.
 
1179
 
 
1180
    TODO RBC 20060127: make this an option to TestCaseWithTransport so it can
 
1181
                       be used without needed to redo it when a different 
 
1182
                       subclass is in use ?
 
1183
    """
 
1184
 
 
1185
    def setUp(self):
 
1186
        super(ChrootedTestCase, self).setUp()
 
1187
        if not self.transport_server == bzrlib.transport.memory.MemoryServer:
 
1188
            self.transport_readonly_server = bzrlib.transport.http.HttpServer
472
1189
 
473
1190
 
474
1191
def filter_suite_by_re(suite, pattern):
481
1198
 
482
1199
 
483
1200
def run_suite(suite, name='test', verbose=False, pattern=".*",
484
 
              stop_on_failure=False):
 
1201
              stop_on_failure=False, keep_output=False,
 
1202
              transport=None, lsprof_timed=None):
485
1203
    TestCaseInTempDir._TEST_NAME = name
 
1204
    TestCase._gather_lsprof_in_benchmarks = lsprof_timed
486
1205
    if verbose:
487
1206
        verbosity = 2
 
1207
        pb = None
488
1208
    else:
489
1209
        verbosity = 1
 
1210
        pb = progress.ProgressBar()
490
1211
    runner = TextTestRunner(stream=sys.stdout,
491
1212
                            descriptions=0,
492
 
                            verbosity=verbosity)
 
1213
                            verbosity=verbosity,
 
1214
                            keep_output=keep_output,
 
1215
                            pb=pb)
493
1216
    runner.stop_on_failure=stop_on_failure
494
1217
    if pattern != '.*':
495
1218
        suite = filter_suite_by_re(suite, pattern)
496
1219
    result = runner.run(suite)
497
 
    # This is still a little bogus, 
498
 
    # but only a little. Folk not using our testrunner will
499
 
    # have to delete their temp directories themselves.
500
 
    if result.wasSuccessful():
501
 
        if TestCaseInTempDir.TEST_ROOT is not None:
502
 
            shutil.rmtree(TestCaseInTempDir.TEST_ROOT) 
503
 
    else:
504
 
        print "Failed tests working directories are in '%s'\n" % TestCaseInTempDir.TEST_ROOT
505
1220
    return result.wasSuccessful()
506
1221
 
507
1222
 
508
 
def selftest(verbose=False, pattern=".*", stop_on_failure=True):
 
1223
def selftest(verbose=False, pattern=".*", stop_on_failure=True,
 
1224
             keep_output=False,
 
1225
             transport=None,
 
1226
             test_suite_factory=None,
 
1227
             lsprof_timed=None):
509
1228
    """Run the whole test suite under the enhanced runner"""
510
 
    return run_suite(test_suite(), 'testbzr', verbose=verbose, pattern=pattern,
511
 
                     stop_on_failure=stop_on_failure)
 
1229
    global default_transport
 
1230
    if transport is None:
 
1231
        transport = default_transport
 
1232
    old_transport = default_transport
 
1233
    default_transport = transport
 
1234
    try:
 
1235
        if test_suite_factory is None:
 
1236
            suite = test_suite()
 
1237
        else:
 
1238
            suite = test_suite_factory()
 
1239
        return run_suite(suite, 'testbzr', verbose=verbose, pattern=pattern,
 
1240
                     stop_on_failure=stop_on_failure, keep_output=keep_output,
 
1241
                     transport=transport,
 
1242
                     lsprof_timed=lsprof_timed)
 
1243
    finally:
 
1244
        default_transport = old_transport
512
1245
 
513
1246
 
514
1247
def test_suite():
515
 
    """Build and return TestSuite for the whole program."""
516
 
    import bzrlib.store, bzrlib.inventory, bzrlib.branch
517
 
    import bzrlib.osutils, bzrlib.merge3, bzrlib.plugin
518
 
    from doctest import DocTestSuite
519
 
 
520
 
    global MODULES_TO_TEST, MODULES_TO_DOCTEST
521
 
 
522
 
    testmod_names = \
523
 
                  ['bzrlib.selftest.MetaTestLog',
524
 
                   'bzrlib.selftest.testgpg',
525
 
                   'bzrlib.selftest.testidentitymap',
526
 
                   'bzrlib.selftest.testinv',
527
 
                   'bzrlib.selftest.test_ancestry',
528
 
                   'bzrlib.selftest.test_commit',
529
 
                   'bzrlib.selftest.test_commit_merge',
530
 
                   'bzrlib.selftest.testconfig',
531
 
                   'bzrlib.selftest.versioning',
532
 
                   'bzrlib.selftest.testmerge3',
533
 
                   'bzrlib.selftest.testmerge',
534
 
                   'bzrlib.selftest.testhashcache',
535
 
                   'bzrlib.selftest.teststatus',
536
 
                   'bzrlib.selftest.testlog',
537
 
                   'bzrlib.selftest.testrevisionnamespaces',
538
 
                   'bzrlib.selftest.testbranch',
539
 
                   'bzrlib.selftest.testrevision',
540
 
                   'bzrlib.selftest.test_revision_info',
541
 
                   'bzrlib.selftest.test_merge_core',
542
 
                   'bzrlib.selftest.test_smart_add',
543
 
                   'bzrlib.selftest.test_bad_files',
544
 
                   'bzrlib.selftest.testdiff',
545
 
                   'bzrlib.selftest.test_parent',
546
 
                   'bzrlib.selftest.test_xml',
547
 
                   'bzrlib.selftest.test_weave',
548
 
                   'bzrlib.selftest.testfetch',
549
 
                   'bzrlib.selftest.whitebox',
550
 
                   'bzrlib.selftest.teststore',
551
 
                   'bzrlib.selftest.blackbox',
552
 
                   'bzrlib.selftest.testsampler',
553
 
                   'bzrlib.selftest.testtransactions',
554
 
                   'bzrlib.selftest.testtransport',
555
 
                   'bzrlib.selftest.testgraph',
556
 
                   'bzrlib.selftest.testworkingtree',
557
 
                   'bzrlib.selftest.test_upgrade',
558
 
                   'bzrlib.selftest.test_conflicts',
559
 
                   'bzrlib.selftest.testtestament',
560
 
                   'bzrlib.selftest.testannotate',
561
 
                   'bzrlib.selftest.testrevprops',
562
 
                   'bzrlib.selftest.testoptions',
563
 
                   'bzrlib.selftest.testhttp',
564
 
                   'bzrlib.selftest.testnonascii',
 
1248
    """Build and return TestSuite for the whole of bzrlib.
 
1249
    
 
1250
    This function can be replaced if you need to change the default test
 
1251
    suite on a global basis, but it is not encouraged.
 
1252
    """
 
1253
    testmod_names = [
 
1254
                   'bzrlib.tests.test_ancestry',
 
1255
                   'bzrlib.tests.test_api',
 
1256
                   'bzrlib.tests.test_bad_files',
 
1257
                   'bzrlib.tests.test_branch',
 
1258
                   'bzrlib.tests.test_bundle',
 
1259
                   'bzrlib.tests.test_bzrdir',
 
1260
                   'bzrlib.tests.test_command',
 
1261
                   'bzrlib.tests.test_commit',
 
1262
                   'bzrlib.tests.test_commit_merge',
 
1263
                   'bzrlib.tests.test_config',
 
1264
                   'bzrlib.tests.test_conflicts',
 
1265
                   'bzrlib.tests.test_decorators',
 
1266
                   'bzrlib.tests.test_diff',
 
1267
                   'bzrlib.tests.test_doc_generate',
 
1268
                   'bzrlib.tests.test_errors',
 
1269
                   'bzrlib.tests.test_escaped_store',
 
1270
                   'bzrlib.tests.test_fetch',
 
1271
                   'bzrlib.tests.test_gpg',
 
1272
                   'bzrlib.tests.test_graph',
 
1273
                   'bzrlib.tests.test_hashcache',
 
1274
                   'bzrlib.tests.test_http',
 
1275
                   'bzrlib.tests.test_http_response',
 
1276
                   'bzrlib.tests.test_identitymap',
 
1277
                   'bzrlib.tests.test_ignores',
 
1278
                   'bzrlib.tests.test_inv',
 
1279
                   'bzrlib.tests.test_knit',
 
1280
                   'bzrlib.tests.test_lockdir',
 
1281
                   'bzrlib.tests.test_lockable_files',
 
1282
                   'bzrlib.tests.test_log',
 
1283
                   'bzrlib.tests.test_merge',
 
1284
                   'bzrlib.tests.test_merge3',
 
1285
                   'bzrlib.tests.test_merge_core',
 
1286
                   'bzrlib.tests.test_missing',
 
1287
                   'bzrlib.tests.test_msgeditor',
 
1288
                   'bzrlib.tests.test_nonascii',
 
1289
                   'bzrlib.tests.test_options',
 
1290
                   'bzrlib.tests.test_osutils',
 
1291
                   'bzrlib.tests.test_patch',
 
1292
                   'bzrlib.tests.test_patches',
 
1293
                   'bzrlib.tests.test_permissions',
 
1294
                   'bzrlib.tests.test_plugins',
 
1295
                   'bzrlib.tests.test_progress',
 
1296
                   'bzrlib.tests.test_reconcile',
 
1297
                   'bzrlib.tests.test_repository',
 
1298
                   'bzrlib.tests.test_revision',
 
1299
                   'bzrlib.tests.test_revisionnamespaces',
 
1300
                   'bzrlib.tests.test_revisiontree',
 
1301
                   'bzrlib.tests.test_rio',
 
1302
                   'bzrlib.tests.test_sampler',
 
1303
                   'bzrlib.tests.test_selftest',
 
1304
                   'bzrlib.tests.test_setup',
 
1305
                   'bzrlib.tests.test_sftp_transport',
 
1306
                   'bzrlib.tests.test_smart_add',
 
1307
                   'bzrlib.tests.test_source',
 
1308
                   'bzrlib.tests.test_status',
 
1309
                   'bzrlib.tests.test_store',
 
1310
                   'bzrlib.tests.test_symbol_versioning',
 
1311
                   'bzrlib.tests.test_testament',
 
1312
                   'bzrlib.tests.test_textfile',
 
1313
                   'bzrlib.tests.test_textmerge',
 
1314
                   'bzrlib.tests.test_trace',
 
1315
                   'bzrlib.tests.test_transactions',
 
1316
                   'bzrlib.tests.test_transform',
 
1317
                   'bzrlib.tests.test_transport',
 
1318
                   'bzrlib.tests.test_tree',
 
1319
                   'bzrlib.tests.test_tsort',
 
1320
                   'bzrlib.tests.test_tuned_gzip',
 
1321
                   'bzrlib.tests.test_ui',
 
1322
                   'bzrlib.tests.test_upgrade',
 
1323
                   'bzrlib.tests.test_urlutils',
 
1324
                   'bzrlib.tests.test_versionedfile',
 
1325
                   'bzrlib.tests.test_weave',
 
1326
                   'bzrlib.tests.test_whitebox',
 
1327
                   'bzrlib.tests.test_workingtree',
 
1328
                   'bzrlib.tests.test_xml',
565
1329
                   ]
566
 
 
567
 
    for m in (bzrlib.store, bzrlib.inventory, bzrlib.branch,
568
 
              bzrlib.osutils, bzrlib.commands, bzrlib.merge3,
569
 
              bzrlib.errors,
570
 
              ):
571
 
        if m not in MODULES_TO_DOCTEST:
572
 
            MODULES_TO_DOCTEST.append(m)
573
 
 
574
 
    TestCase.BZRPATH = os.path.join(os.path.realpath(os.path.dirname(bzrlib.__path__[0])), 'bzr')
575
 
    print '%-30s %s' % ('bzr binary', TestCase.BZRPATH)
576
 
    print
577
 
    suite = TestSuite()
578
 
    suite.addTest(TestLoader().loadTestsFromNames(testmod_names))
 
1330
    test_transport_implementations = [
 
1331
        'bzrlib.tests.test_transport_implementations',
 
1332
        'bzrlib.tests.test_read_bundle',
 
1333
        ]
 
1334
    suite = TestUtil.TestSuite()
 
1335
    loader = TestUtil.TestLoader()
 
1336
    suite.addTest(loader.loadTestsFromModuleNames(testmod_names))
 
1337
    from bzrlib.transport import TransportTestProviderAdapter
 
1338
    adapter = TransportTestProviderAdapter()
 
1339
    adapt_modules(test_transport_implementations, adapter, loader, suite)
 
1340
    for package in packages_to_test():
 
1341
        suite.addTest(package.test_suite())
579
1342
    for m in MODULES_TO_TEST:
580
 
         suite.addTest(TestLoader().loadTestsFromModule(m))
581
 
    for m in (MODULES_TO_DOCTEST):
582
 
        suite.addTest(DocTestSuite(m))
583
 
    for p in bzrlib.plugin.all_plugins:
584
 
        if hasattr(p, 'test_suite'):
585
 
            suite.addTest(p.test_suite())
 
1343
        suite.addTest(loader.loadTestsFromModule(m))
 
1344
    for m in MODULES_TO_DOCTEST:
 
1345
        suite.addTest(doctest.DocTestSuite(m))
 
1346
    for name, plugin in bzrlib.plugin.all_plugins().items():
 
1347
        if getattr(plugin, 'test_suite', None) is not None:
 
1348
            suite.addTest(plugin.test_suite())
586
1349
    return suite
587
1350
 
 
1351
 
 
1352
def adapt_modules(mods_list, adapter, loader, suite):
 
1353
    """Adapt the modules in mods_list using adapter and add to suite."""
 
1354
    for test in iter_suite_tests(loader.loadTestsFromModuleNames(mods_list)):
 
1355
        suite.addTests(adapter.adapt(test))