~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/selftest/__init__.py

  • Committer: Martin Pool
  • Date: 2005-09-07 04:00:21 UTC
  • Revision ID: mbp@sourcefrog.net-20050907040020-2c7a5e0176888d95
- BROKEN: partial support for commit into weave

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005, 2006, 2007 Canonical Ltd
2
 
#
 
1
# Copyright (C) 2005 by Canonical Ltd
 
2
 
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
5
5
# the Free Software Foundation; either version 2 of the License, or
6
6
# (at your option) any later version.
7
 
#
 
7
 
8
8
# This program is distributed in the hope that it will be useful,
9
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
10
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11
11
# GNU General Public License for more details.
12
 
#
 
12
 
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
 
18
 
# TODO: Perhaps there should be an API to find out if bzr running under the
19
 
# test suite -- some plugins might want to avoid making intrusive changes if
20
 
# this is the case.  However, we want behaviour under to test to diverge as
21
 
# little as possible, so this should be used rarely if it's added at all.
22
 
# (Suggestion from j-a-meinel, 2005-11-24)
23
 
 
24
 
# NOTE: Some classes in here use camelCaseNaming() rather than
25
 
# underscore_naming().  That's for consistency with unittest; it's not the
26
 
# general style of bzrlib.  Please continue that consistency when adding e.g.
27
 
# new assertFoo() methods.
28
 
 
29
 
import atexit
30
 
import codecs
31
 
from cStringIO import StringIO
32
 
import difflib
33
 
import doctest
34
 
import errno
35
18
import logging
 
19
import unittest
 
20
import tempfile
36
21
import os
37
 
from pprint import pformat
38
 
import random
39
 
import re
40
 
import shlex
41
 
import stat
42
 
from subprocess import Popen, PIPE
43
22
import sys
44
 
import tempfile
45
 
import unittest
46
 
import time
47
 
import warnings
48
 
 
49
 
 
50
 
from bzrlib import (
51
 
    bzrdir,
52
 
    debug,
53
 
    errors,
54
 
    memorytree,
55
 
    osutils,
56
 
    progress,
57
 
    ui,
58
 
    urlutils,
59
 
    workingtree,
60
 
    )
61
 
import bzrlib.branch
 
23
import subprocess
 
24
 
 
25
from testsweet import run_suite
62
26
import bzrlib.commands
63
 
import bzrlib.timestamp
64
 
import bzrlib.export
65
 
import bzrlib.inventory
66
 
import bzrlib.iterablefile
67
 
import bzrlib.lockdir
68
 
try:
69
 
    import bzrlib.lsprof
70
 
except ImportError:
71
 
    # lsprof not available
72
 
    pass
73
 
from bzrlib.merge import merge_inner
74
 
import bzrlib.merge3
75
 
import bzrlib.osutils
76
 
import bzrlib.plugin
77
 
from bzrlib.revision import common_ancestor
78
 
import bzrlib.store
79
 
from bzrlib import symbol_versioning
80
 
from bzrlib.symbol_versioning import (
81
 
    deprecated_method,
82
 
    zero_eighteen,
83
 
    )
 
27
 
84
28
import bzrlib.trace
85
 
from bzrlib.transport import get_transport
86
 
import bzrlib.transport
87
 
from bzrlib.transport.local import LocalURLServer
88
 
from bzrlib.transport.memory import MemoryServer
89
 
from bzrlib.transport.readonly import ReadonlyServer
90
 
from bzrlib.trace import mutter, note
91
 
from bzrlib.tests import TestUtil
92
 
from bzrlib.tests.HttpServer import HttpServer
93
 
from bzrlib.tests.TestUtil import (
94
 
                          TestSuite,
95
 
                          TestLoader,
96
 
                          )
97
 
from bzrlib.tests.treeshape import build_tree_contents
98
 
from bzrlib.workingtree import WorkingTree, WorkingTreeFormat2
99
 
 
100
 
# Mark this python module as being part of the implementation
101
 
# of unittest: this gives us better tracebacks where the last
102
 
# shown frame is the test code, not our assertXYZ.
103
 
__unittest = 1
104
 
 
105
 
default_transport = LocalURLServer
 
29
import bzrlib.fetch
 
30
 
106
31
 
107
32
MODULES_TO_TEST = []
108
 
MODULES_TO_DOCTEST = [
109
 
                      bzrlib.timestamp,
110
 
                      bzrlib.errors,
111
 
                      bzrlib.export,
112
 
                      bzrlib.inventory,
113
 
                      bzrlib.iterablefile,
114
 
                      bzrlib.lockdir,
115
 
                      bzrlib.merge3,
116
 
                      bzrlib.option,
117
 
                      bzrlib.store,
118
 
                      ]
119
 
 
120
 
 
121
 
def packages_to_test():
122
 
    """Return a list of packages to test.
123
 
 
124
 
    The packages are not globally imported so that import failures are
125
 
    triggered when running selftest, not when importing the command.
126
 
    """
127
 
    import bzrlib.doc
128
 
    import bzrlib.tests.blackbox
129
 
    import bzrlib.tests.branch_implementations
130
 
    import bzrlib.tests.bzrdir_implementations
131
 
    import bzrlib.tests.interrepository_implementations
132
 
    import bzrlib.tests.interversionedfile_implementations
133
 
    import bzrlib.tests.intertree_implementations
134
 
    import bzrlib.tests.per_lock
135
 
    import bzrlib.tests.repository_implementations
136
 
    import bzrlib.tests.revisionstore_implementations
137
 
    import bzrlib.tests.tree_implementations
138
 
    import bzrlib.tests.workingtree_implementations
139
 
    return [
140
 
            bzrlib.doc,
141
 
            bzrlib.tests.blackbox,
142
 
            bzrlib.tests.branch_implementations,
143
 
            bzrlib.tests.bzrdir_implementations,
144
 
            bzrlib.tests.interrepository_implementations,
145
 
            bzrlib.tests.interversionedfile_implementations,
146
 
            bzrlib.tests.intertree_implementations,
147
 
            bzrlib.tests.per_lock,
148
 
            bzrlib.tests.repository_implementations,
149
 
            bzrlib.tests.revisionstore_implementations,
150
 
            bzrlib.tests.tree_implementations,
151
 
            bzrlib.tests.workingtree_implementations,
152
 
            ]
153
 
 
154
 
 
155
 
class ExtendedTestResult(unittest._TextTestResult):
156
 
    """Accepts, reports and accumulates the results of running tests.
157
 
 
158
 
    Compared to this unittest version this class adds support for profiling,
159
 
    benchmarking, stopping as soon as a test fails,  and skipping tests.
160
 
    There are further-specialized subclasses for different types of display.
161
 
    """
162
 
 
163
 
    stop_early = False
164
 
    
165
 
    def __init__(self, stream, descriptions, verbosity,
166
 
                 bench_history=None,
167
 
                 num_tests=None,
168
 
                 use_numbered_dirs=False,
169
 
                 ):
170
 
        """Construct new TestResult.
171
 
 
172
 
        :param bench_history: Optionally, a writable file object to accumulate
173
 
            benchmark results.
174
 
        """
175
 
        unittest._TextTestResult.__init__(self, stream, descriptions, verbosity)
176
 
        if bench_history is not None:
177
 
            from bzrlib.version import _get_bzr_source_tree
178
 
            src_tree = _get_bzr_source_tree()
179
 
            if src_tree:
180
 
                try:
181
 
                    revision_id = src_tree.get_parent_ids()[0]
182
 
                except IndexError:
183
 
                    # XXX: if this is a brand new tree, do the same as if there
184
 
                    # is no branch.
185
 
                    revision_id = ''
186
 
            else:
187
 
                # XXX: If there's no branch, what should we do?
188
 
                revision_id = ''
189
 
            bench_history.write("--date %s %s\n" % (time.time(), revision_id))
190
 
        self._bench_history = bench_history
191
 
        self.ui = ui.ui_factory
192
 
        self.num_tests = num_tests
193
 
        self.error_count = 0
194
 
        self.failure_count = 0
195
 
        self.known_failure_count = 0
196
 
        self.skip_count = 0
197
 
        self.unsupported = {}
198
 
        self.count = 0
199
 
        self.use_numbered_dirs = use_numbered_dirs
200
 
        self._overall_start_time = time.time()
201
 
    
202
 
    def extractBenchmarkTime(self, testCase):
203
 
        """Add a benchmark time for the current test case."""
204
 
        self._benchmarkTime = getattr(testCase, "_benchtime", None)
205
 
    
206
 
    def _elapsedTestTimeString(self):
207
 
        """Return a time string for the overall time the current test has taken."""
208
 
        return self._formatTime(time.time() - self._start_time)
209
 
 
210
 
    def _testTimeString(self):
211
 
        if self._benchmarkTime is not None:
212
 
            return "%s/%s" % (
213
 
                self._formatTime(self._benchmarkTime),
214
 
                self._elapsedTestTimeString())
215
 
        else:
216
 
            return "           %s" % self._elapsedTestTimeString()
217
 
 
218
 
    def _formatTime(self, seconds):
219
 
        """Format seconds as milliseconds with leading spaces."""
220
 
        # some benchmarks can take thousands of seconds to run, so we need 8
221
 
        # places
222
 
        return "%8dms" % (1000 * seconds)
223
 
 
224
 
    def _shortened_test_description(self, test):
225
 
        what = test.id()
226
 
        what = re.sub(r'^bzrlib\.(tests|benchmarks)\.', '', what)
227
 
        return what
228
 
 
229
 
    def startTest(self, test):
230
 
        unittest.TestResult.startTest(self, test)
231
 
        self.report_test_start(test)
232
 
        test.number = self.count
233
 
        self._recordTestStartTime()
234
 
 
235
 
    def _recordTestStartTime(self):
236
 
        """Record that a test has started."""
237
 
        self._start_time = time.time()
238
 
 
239
 
    def _cleanupLogFile(self, test):
240
 
        # We can only do this if we have one of our TestCases, not if
241
 
        # we have a doctest.
242
 
        setKeepLogfile = getattr(test, 'setKeepLogfile', None)
243
 
        if setKeepLogfile is not None:
244
 
            setKeepLogfile()
245
 
 
246
 
    def addError(self, test, err):
247
 
        self.extractBenchmarkTime(test)
248
 
        self._cleanupLogFile(test)
249
 
        if isinstance(err[1], TestSkipped):
250
 
            return self.addSkipped(test, err)
251
 
        elif isinstance(err[1], UnavailableFeature):
252
 
            return self.addNotSupported(test, err[1].args[0])
253
 
        unittest.TestResult.addError(self, test, err)
254
 
        self.error_count += 1
255
 
        self.report_error(test, err)
256
 
        if self.stop_early:
257
 
            self.stop()
258
 
 
259
 
    def addFailure(self, test, err):
260
 
        self._cleanupLogFile(test)
261
 
        self.extractBenchmarkTime(test)
262
 
        if isinstance(err[1], KnownFailure):
263
 
            return self.addKnownFailure(test, err)
264
 
        unittest.TestResult.addFailure(self, test, err)
265
 
        self.failure_count += 1
266
 
        self.report_failure(test, err)
267
 
        if self.stop_early:
268
 
            self.stop()
269
 
 
270
 
    def addKnownFailure(self, test, err):
271
 
        self.known_failure_count += 1
272
 
        self.report_known_failure(test, err)
273
 
 
274
 
    def addNotSupported(self, test, feature):
275
 
        self.unsupported.setdefault(str(feature), 0)
276
 
        self.unsupported[str(feature)] += 1
277
 
        self.report_unsupported(test, feature)
278
 
 
279
 
    def addSuccess(self, test):
280
 
        self.extractBenchmarkTime(test)
281
 
        if self._bench_history is not None:
282
 
            if self._benchmarkTime is not None:
283
 
                self._bench_history.write("%s %s\n" % (
284
 
                    self._formatTime(self._benchmarkTime),
285
 
                    test.id()))
286
 
        self.report_success(test)
287
 
        unittest.TestResult.addSuccess(self, test)
288
 
 
289
 
    def addSkipped(self, test, skip_excinfo):
290
 
        self.report_skip(test, skip_excinfo)
291
 
        # seems best to treat this as success from point-of-view of unittest
292
 
        # -- it actually does nothing so it barely matters :)
293
 
        try:
294
 
            test.tearDown()
295
 
        except KeyboardInterrupt:
296
 
            raise
297
 
        except:
298
 
            self.addError(test, test.__exc_info())
299
 
        else:
300
 
            unittest.TestResult.addSuccess(self, test)
301
 
 
302
 
    def printErrorList(self, flavour, errors):
303
 
        for test, err in errors:
304
 
            self.stream.writeln(self.separator1)
305
 
            self.stream.write("%s: " % flavour)
306
 
            if self.use_numbered_dirs:
307
 
                self.stream.write('#%d ' % test.number)
308
 
            self.stream.writeln(self.getDescription(test))
309
 
            if getattr(test, '_get_log', None) is not None:
310
 
                print >>self.stream
311
 
                print >>self.stream, \
312
 
                        ('vvvv[log from %s]' % test.id()).ljust(78,'-')
313
 
                print >>self.stream, test._get_log()
314
 
                print >>self.stream, \
315
 
                        ('^^^^[log from %s]' % test.id()).ljust(78,'-')
316
 
            self.stream.writeln(self.separator2)
317
 
            self.stream.writeln("%s" % err)
318
 
 
319
 
    def finished(self):
320
 
        pass
321
 
 
322
 
    def report_cleaning_up(self):
323
 
        pass
324
 
 
325
 
    def report_success(self, test):
326
 
        pass
327
 
 
328
 
 
329
 
class TextTestResult(ExtendedTestResult):
330
 
    """Displays progress and results of tests in text form"""
331
 
 
332
 
    def __init__(self, stream, descriptions, verbosity,
333
 
                 bench_history=None,
334
 
                 num_tests=None,
335
 
                 pb=None,
336
 
                 use_numbered_dirs=False,
337
 
                 ):
338
 
        ExtendedTestResult.__init__(self, stream, descriptions, verbosity,
339
 
            bench_history, num_tests, use_numbered_dirs)
340
 
        if pb is None:
341
 
            self.pb = self.ui.nested_progress_bar()
342
 
            self._supplied_pb = False
343
 
        else:
344
 
            self.pb = pb
345
 
            self._supplied_pb = True
346
 
        self.pb.show_pct = False
347
 
        self.pb.show_spinner = False
348
 
        self.pb.show_eta = False,
349
 
        self.pb.show_count = False
350
 
        self.pb.show_bar = False
351
 
 
352
 
    def report_starting(self):
353
 
        self.pb.update('[test 0/%d] starting...' % (self.num_tests))
354
 
 
355
 
    def _progress_prefix_text(self):
356
 
        a = '[%d' % self.count
357
 
        if self.num_tests is not None:
358
 
            a +='/%d' % self.num_tests
359
 
        a += ' in %ds' % (time.time() - self._overall_start_time)
360
 
        if self.error_count:
361
 
            a += ', %d errors' % self.error_count
362
 
        if self.failure_count:
363
 
            a += ', %d failed' % self.failure_count
364
 
        if self.known_failure_count:
365
 
            a += ', %d known failures' % self.known_failure_count
366
 
        if self.skip_count:
367
 
            a += ', %d skipped' % self.skip_count
368
 
        if self.unsupported:
369
 
            a += ', %d missing features' % len(self.unsupported)
370
 
        a += ']'
371
 
        return a
372
 
 
373
 
    def report_test_start(self, test):
374
 
        self.count += 1
375
 
        self.pb.update(
376
 
                self._progress_prefix_text()
377
 
                + ' ' 
378
 
                + self._shortened_test_description(test))
379
 
 
380
 
    def _test_description(self, test):
381
 
        if self.use_numbered_dirs:
382
 
            return '#%d %s' % (self.count,
383
 
                               self._shortened_test_description(test))
384
 
        else:
385
 
            return self._shortened_test_description(test)
386
 
 
387
 
    def report_error(self, test, err):
388
 
        self.pb.note('ERROR: %s\n    %s\n', 
389
 
            self._test_description(test),
390
 
            err[1],
391
 
            )
392
 
 
393
 
    def report_failure(self, test, err):
394
 
        self.pb.note('FAIL: %s\n    %s\n', 
395
 
            self._test_description(test),
396
 
            err[1],
397
 
            )
398
 
 
399
 
    def report_known_failure(self, test, err):
400
 
        self.pb.note('XFAIL: %s\n%s\n',
401
 
            self._test_description(test), err[1])
402
 
 
403
 
    def report_skip(self, test, skip_excinfo):
404
 
        self.skip_count += 1
405
 
        if False:
406
 
            # at the moment these are mostly not things we can fix
407
 
            # and so they just produce stipple; use the verbose reporter
408
 
            # to see them.
409
 
            if False:
410
 
                # show test and reason for skip
411
 
                self.pb.note('SKIP: %s\n    %s\n', 
412
 
                    self._shortened_test_description(test),
413
 
                    skip_excinfo[1])
414
 
            else:
415
 
                # since the class name was left behind in the still-visible
416
 
                # progress bar...
417
 
                self.pb.note('SKIP: %s', skip_excinfo[1])
418
 
 
419
 
    def report_unsupported(self, test, feature):
420
 
        """test cannot be run because feature is missing."""
421
 
                  
422
 
    def report_cleaning_up(self):
423
 
        self.pb.update('cleaning up...')
424
 
 
425
 
    def finished(self):
426
 
        if not self._supplied_pb:
427
 
            self.pb.finished()
428
 
 
429
 
 
430
 
class VerboseTestResult(ExtendedTestResult):
431
 
    """Produce long output, with one line per test run plus times"""
432
 
 
433
 
    def _ellipsize_to_right(self, a_string, final_width):
434
 
        """Truncate and pad a string, keeping the right hand side"""
435
 
        if len(a_string) > final_width:
436
 
            result = '...' + a_string[3-final_width:]
437
 
        else:
438
 
            result = a_string
439
 
        return result.ljust(final_width)
440
 
 
441
 
    def report_starting(self):
442
 
        self.stream.write('running %d tests...\n' % self.num_tests)
443
 
 
444
 
    def report_test_start(self, test):
445
 
        self.count += 1
446
 
        name = self._shortened_test_description(test)
447
 
        # width needs space for 6 char status, plus 1 for slash, plus 2 10-char
448
 
        # numbers, plus a trailing blank
449
 
        # when NUMBERED_DIRS: plus 5 chars on test number, plus 1 char on space
450
 
        if self.use_numbered_dirs:
451
 
            self.stream.write('%5d ' % self.count)
452
 
            self.stream.write(self._ellipsize_to_right(name,
453
 
                                osutils.terminal_width()-36))
454
 
        else:
455
 
            self.stream.write(self._ellipsize_to_right(name,
456
 
                                osutils.terminal_width()-30))
457
 
        self.stream.flush()
458
 
 
459
 
    def _error_summary(self, err):
460
 
        indent = ' ' * 4
461
 
        if self.use_numbered_dirs:
462
 
            indent += ' ' * 6
463
 
        return '%s%s' % (indent, err[1])
464
 
 
465
 
    def report_error(self, test, err):
466
 
        self.stream.writeln('ERROR %s\n%s'
467
 
                % (self._testTimeString(),
468
 
                   self._error_summary(err)))
469
 
 
470
 
    def report_failure(self, test, err):
471
 
        self.stream.writeln(' FAIL %s\n%s'
472
 
                % (self._testTimeString(),
473
 
                   self._error_summary(err)))
474
 
 
475
 
    def report_known_failure(self, test, err):
476
 
        self.stream.writeln('XFAIL %s\n%s'
477
 
                % (self._testTimeString(),
478
 
                   self._error_summary(err)))
479
 
 
480
 
    def report_success(self, test):
481
 
        self.stream.writeln('   OK %s' % self._testTimeString())
482
 
        for bench_called, stats in getattr(test, '_benchcalls', []):
483
 
            self.stream.writeln('LSProf output for %s(%s, %s)' % bench_called)
484
 
            stats.pprint(file=self.stream)
485
 
        # flush the stream so that we get smooth output. This verbose mode is
486
 
        # used to show the output in PQM.
487
 
        self.stream.flush()
488
 
 
489
 
    def report_skip(self, test, skip_excinfo):
490
 
        self.skip_count += 1
491
 
        self.stream.writeln(' SKIP %s\n%s'
492
 
                % (self._testTimeString(),
493
 
                   self._error_summary(skip_excinfo)))
494
 
 
495
 
    def report_unsupported(self, test, feature):
496
 
        """test cannot be run because feature is missing."""
497
 
        self.stream.writeln("NODEP %s\n    The feature '%s' is not available."
498
 
                %(self._testTimeString(), feature))
499
 
                  
500
 
 
501
 
 
502
 
class TextTestRunner(object):
503
 
    stop_on_failure = False
504
 
 
505
 
    def __init__(self,
506
 
                 stream=sys.stderr,
507
 
                 descriptions=0,
508
 
                 verbosity=1,
509
 
                 bench_history=None,
510
 
                 use_numbered_dirs=False,
511
 
                 list_only=False
512
 
                 ):
513
 
        self.stream = unittest._WritelnDecorator(stream)
514
 
        self.descriptions = descriptions
515
 
        self.verbosity = verbosity
516
 
        self._bench_history = bench_history
517
 
        self.use_numbered_dirs = use_numbered_dirs
518
 
        self.list_only = list_only
519
 
 
520
 
    def run(self, test):
521
 
        "Run the given test case or test suite."
522
 
        startTime = time.time()
523
 
        if self.verbosity == 1:
524
 
            result_class = TextTestResult
525
 
        elif self.verbosity >= 2:
526
 
            result_class = VerboseTestResult
527
 
        result = result_class(self.stream,
528
 
                              self.descriptions,
529
 
                              self.verbosity,
530
 
                              bench_history=self._bench_history,
531
 
                              num_tests=test.countTestCases(),
532
 
                              use_numbered_dirs=self.use_numbered_dirs,
533
 
                              )
534
 
        result.stop_early = self.stop_on_failure
535
 
        result.report_starting()
536
 
        if self.list_only:
537
 
            if self.verbosity >= 2:
538
 
                self.stream.writeln("Listing tests only ...\n")
539
 
            run = 0
540
 
            for t in iter_suite_tests(test):
541
 
                self.stream.writeln("%s" % (t.id()))
542
 
                run += 1
543
 
            actionTaken = "Listed"
544
 
        else: 
545
 
            test.run(result)
546
 
            run = result.testsRun
547
 
            actionTaken = "Ran"
548
 
        stopTime = time.time()
549
 
        timeTaken = stopTime - startTime
550
 
        result.printErrors()
551
 
        self.stream.writeln(result.separator2)
552
 
        self.stream.writeln("%s %d test%s in %.3fs" % (actionTaken,
553
 
                            run, run != 1 and "s" or "", timeTaken))
554
 
        self.stream.writeln()
555
 
        if not result.wasSuccessful():
556
 
            self.stream.write("FAILED (")
557
 
            failed, errored = map(len, (result.failures, result.errors))
558
 
            if failed:
559
 
                self.stream.write("failures=%d" % failed)
560
 
            if errored:
561
 
                if failed: self.stream.write(", ")
562
 
                self.stream.write("errors=%d" % errored)
563
 
            if result.known_failure_count:
564
 
                if failed or errored: self.stream.write(", ")
565
 
                self.stream.write("known_failure_count=%d" %
566
 
                    result.known_failure_count)
567
 
            self.stream.writeln(")")
568
 
        else:
569
 
            if result.known_failure_count:
570
 
                self.stream.writeln("OK (known_failures=%d)" %
571
 
                    result.known_failure_count)
572
 
            else:
573
 
                self.stream.writeln("OK")
574
 
        if result.skip_count > 0:
575
 
            skipped = result.skip_count
576
 
            self.stream.writeln('%d test%s skipped' %
577
 
                                (skipped, skipped != 1 and "s" or ""))
578
 
        if result.unsupported:
579
 
            for feature, count in sorted(result.unsupported.items()):
580
 
                self.stream.writeln("Missing feature '%s' skipped %d tests." %
581
 
                    (feature, count))
582
 
        result.finished()
583
 
        return result
584
 
 
585
 
 
586
 
def iter_suite_tests(suite):
587
 
    """Return all tests in a suite, recursing through nested suites"""
588
 
    for item in suite._tests:
589
 
        if isinstance(item, unittest.TestCase):
590
 
            yield item
591
 
        elif isinstance(item, unittest.TestSuite):
592
 
            for r in iter_suite_tests(item):
593
 
                yield r
594
 
        else:
595
 
            raise Exception('unknown object %r inside test suite %r'
596
 
                            % (item, suite))
597
 
 
598
 
 
599
 
class TestSkipped(Exception):
600
 
    """Indicates that a test was intentionally skipped, rather than failing."""
601
 
 
602
 
 
603
 
class KnownFailure(AssertionError):
604
 
    """Indicates that a test failed in a precisely expected manner.
605
 
 
606
 
    Such failures dont block the whole test suite from passing because they are
607
 
    indicators of partially completed code or of future work. We have an
608
 
    explicit error for them so that we can ensure that they are always visible:
609
 
    KnownFailures are always shown in the output of bzr selftest.
610
 
    """
611
 
 
612
 
 
613
 
class UnavailableFeature(Exception):
614
 
    """A feature required for this test was not available.
615
 
 
616
 
    The feature should be used to construct the exception.
617
 
    """
618
 
 
 
33
MODULES_TO_DOCTEST = []
 
34
 
 
35
from logging import debug, warning, error
619
36
 
620
37
class CommandFailed(Exception):
621
38
    pass
622
39
 
623
 
 
624
 
class StringIOWrapper(object):
625
 
    """A wrapper around cStringIO which just adds an encoding attribute.
626
 
    
627
 
    Internally we can check sys.stdout to see what the output encoding
628
 
    should be. However, cStringIO has no encoding attribute that we can
629
 
    set. So we wrap it instead.
630
 
    """
631
 
    encoding='ascii'
632
 
    _cstring = None
633
 
 
634
 
    def __init__(self, s=None):
635
 
        if s is not None:
636
 
            self.__dict__['_cstring'] = StringIO(s)
637
 
        else:
638
 
            self.__dict__['_cstring'] = StringIO()
639
 
 
640
 
    def __getattr__(self, name, getattr=getattr):
641
 
        return getattr(self.__dict__['_cstring'], name)
642
 
 
643
 
    def __setattr__(self, name, val):
644
 
        if name == 'encoding':
645
 
            self.__dict__['encoding'] = val
646
 
        else:
647
 
            return setattr(self._cstring, name, val)
648
 
 
649
 
 
650
 
class TestUIFactory(ui.CLIUIFactory):
651
 
    """A UI Factory for testing.
652
 
 
653
 
    Hide the progress bar but emit note()s.
654
 
    Redirect stdin.
655
 
    Allows get_password to be tested without real tty attached.
656
 
    """
657
 
 
658
 
    def __init__(self,
659
 
                 stdout=None,
660
 
                 stderr=None,
661
 
                 stdin=None):
662
 
        super(TestUIFactory, self).__init__()
663
 
        if stdin is not None:
664
 
            # We use a StringIOWrapper to be able to test various
665
 
            # encodings, but the user is still responsible to
666
 
            # encode the string and to set the encoding attribute
667
 
            # of StringIOWrapper.
668
 
            self.stdin = StringIOWrapper(stdin)
669
 
        if stdout is None:
670
 
            self.stdout = sys.stdout
671
 
        else:
672
 
            self.stdout = stdout
673
 
        if stderr is None:
674
 
            self.stderr = sys.stderr
675
 
        else:
676
 
            self.stderr = stderr
677
 
 
678
 
    def clear(self):
679
 
        """See progress.ProgressBar.clear()."""
680
 
 
681
 
    def clear_term(self):
682
 
        """See progress.ProgressBar.clear_term()."""
683
 
 
684
 
    def clear_term(self):
685
 
        """See progress.ProgressBar.clear_term()."""
686
 
 
687
 
    def finished(self):
688
 
        """See progress.ProgressBar.finished()."""
689
 
 
690
 
    def note(self, fmt_string, *args, **kwargs):
691
 
        """See progress.ProgressBar.note()."""
692
 
        self.stdout.write((fmt_string + "\n") % args)
693
 
 
694
 
    def progress_bar(self):
695
 
        return self
696
 
 
697
 
    def nested_progress_bar(self):
698
 
        return self
699
 
 
700
 
    def update(self, message, count=None, total=None):
701
 
        """See progress.ProgressBar.update()."""
702
 
 
703
 
    def get_non_echoed_password(self, prompt):
704
 
        """Get password from stdin without trying to handle the echo mode"""
705
 
        if prompt:
706
 
            self.stdout.write(prompt.encode(self.stdout.encoding, 'replace'))
707
 
        password = self.stdin.readline()
708
 
        if not password:
709
 
            raise EOFError
710
 
        if password[-1] == '\n':
711
 
            password = password[:-1]
712
 
        return password
713
 
 
714
 
 
715
40
class TestCase(unittest.TestCase):
716
41
    """Base class for bzr unit tests.
717
42
    
720
45
 
721
46
    Error and debug log messages are redirected from their usual
722
47
    location into a temporary file, the contents of which can be
723
 
    retrieved by _get_log().  We use a real OS file, not an in-memory object,
724
 
    so that it can also capture file IO.  When the test completes this file
725
 
    is read into memory and removed from disk.
 
48
    retrieved by _get_log().
726
49
       
727
50
    There are also convenience functions to invoke bzr's command-line
728
 
    routine, and to build and check bzr trees.
729
 
   
730
 
    In addition to the usual method of overriding tearDown(), this class also
731
 
    allows subclasses to register functions into the _cleanups list, which is
732
 
    run in order as the object is torn down.  It's less likely this will be
733
 
    accidentally overlooked.
734
 
    """
735
 
 
736
 
    _log_file_name = None
737
 
    _log_contents = ''
738
 
    _keep_log_file = False
739
 
    # record lsprof data when performing benchmark calls.
740
 
    _gather_lsprof_in_benchmarks = False
741
 
 
742
 
    def __init__(self, methodName='testMethod'):
743
 
        super(TestCase, self).__init__(methodName)
744
 
        self._cleanups = []
 
51
    routine, and to build and check bzr trees."""
 
52
 
 
53
    BZRPATH = 'bzr'
745
54
 
746
55
    def setUp(self):
 
56
        # this replaces the default testsweet.TestCase; we don't want logging changed
747
57
        unittest.TestCase.setUp(self)
748
 
        self._cleanEnvironment()
749
58
        bzrlib.trace.disable_default_logging()
750
 
        self._silenceUI()
751
 
        self._startLogFile()
752
 
        self._benchcalls = []
753
 
        self._benchtime = None
754
 
        self._clear_hooks()
755
 
        self._clear_debug_flags()
756
 
 
757
 
    def _clear_debug_flags(self):
758
 
        """Prevent externally set debug flags affecting tests.
759
 
        
760
 
        Tests that want to use debug flags can just set them in the
761
 
        debug_flags set during setup/teardown.
762
 
        """
763
 
        self._preserved_debug_flags = set(debug.debug_flags)
764
 
        debug.debug_flags.clear()
765
 
        self.addCleanup(self._restore_debug_flags)
766
 
 
767
 
    def _clear_hooks(self):
768
 
        # prevent hooks affecting tests
769
 
        import bzrlib.branch
770
 
        import bzrlib.smart.server
771
 
        self._preserved_hooks = {
772
 
            bzrlib.branch.Branch: bzrlib.branch.Branch.hooks,
773
 
            bzrlib.smart.server.SmartTCPServer: bzrlib.smart.server.SmartTCPServer.hooks,
774
 
            }
775
 
        self.addCleanup(self._restoreHooks)
776
 
        # reset all hooks to an empty instance of the appropriate type
777
 
        bzrlib.branch.Branch.hooks = bzrlib.branch.BranchHooks()
778
 
        bzrlib.smart.server.SmartTCPServer.hooks = bzrlib.smart.server.SmartServerHooks()
779
 
 
780
 
    def _silenceUI(self):
781
 
        """Turn off UI for duration of test"""
782
 
        # by default the UI is off; tests can turn it on if they want it.
783
 
        saved = ui.ui_factory
784
 
        def _restore():
785
 
            ui.ui_factory = saved
786
 
        ui.ui_factory = ui.SilentUIFactory()
787
 
        self.addCleanup(_restore)
788
 
 
789
 
    def _ndiff_strings(self, a, b):
790
 
        """Return ndiff between two strings containing lines.
791
 
        
792
 
        A trailing newline is added if missing to make the strings
793
 
        print properly."""
794
 
        if b and b[-1] != '\n':
795
 
            b += '\n'
796
 
        if a and a[-1] != '\n':
797
 
            a += '\n'
798
 
        difflines = difflib.ndiff(a.splitlines(True),
799
 
                                  b.splitlines(True),
800
 
                                  linejunk=lambda x: False,
801
 
                                  charjunk=lambda x: False)
802
 
        return ''.join(difflines)
803
 
 
804
 
    def assertEqual(self, a, b, message=''):
805
 
        try:
806
 
            if a == b:
807
 
                return
808
 
        except UnicodeError, e:
809
 
            # If we can't compare without getting a UnicodeError, then
810
 
            # obviously they are different
811
 
            mutter('UnicodeError: %s', e)
812
 
        if message:
813
 
            message += '\n'
814
 
        raise AssertionError("%snot equal:\na = %s\nb = %s\n"
815
 
            % (message,
816
 
               pformat(a), pformat(b)))
817
 
 
818
 
    assertEquals = assertEqual
819
 
 
820
 
    def assertEqualDiff(self, a, b, message=None):
821
 
        """Assert two texts are equal, if not raise an exception.
822
 
        
823
 
        This is intended for use with multi-line strings where it can 
824
 
        be hard to find the differences by eye.
825
 
        """
826
 
        # TODO: perhaps override assertEquals to call this for strings?
827
 
        if a == b:
828
 
            return
829
 
        if message is None:
830
 
            message = "texts not equal:\n"
831
 
        raise AssertionError(message + 
832
 
                             self._ndiff_strings(a, b))      
833
 
        
834
 
    def assertEqualMode(self, mode, mode_test):
835
 
        self.assertEqual(mode, mode_test,
836
 
                         'mode mismatch %o != %o' % (mode, mode_test))
837
 
 
838
 
    def assertStartsWith(self, s, prefix):
839
 
        if not s.startswith(prefix):
840
 
            raise AssertionError('string %r does not start with %r' % (s, prefix))
841
 
 
842
 
    def assertEndsWith(self, s, suffix):
843
 
        """Asserts that s ends with suffix."""
844
 
        if not s.endswith(suffix):
845
 
            raise AssertionError('string %r does not end with %r' % (s, suffix))
846
 
 
847
 
    def assertContainsRe(self, haystack, needle_re):
848
 
        """Assert that a contains something matching a regular expression."""
849
 
        if not re.search(needle_re, haystack):
850
 
            raise AssertionError('pattern "%r" not found in "%r"'
851
 
                    % (needle_re, haystack))
852
 
 
853
 
    def assertNotContainsRe(self, haystack, needle_re):
854
 
        """Assert that a does not match a regular expression"""
855
 
        if re.search(needle_re, haystack):
856
 
            raise AssertionError('pattern "%s" found in "%s"'
857
 
                    % (needle_re, haystack))
858
 
 
859
 
    def assertSubset(self, sublist, superlist):
860
 
        """Assert that every entry in sublist is present in superlist."""
861
 
        missing = []
862
 
        for entry in sublist:
863
 
            if entry not in superlist:
864
 
                missing.append(entry)
865
 
        if len(missing) > 0:
866
 
            raise AssertionError("value(s) %r not present in container %r" % 
867
 
                                 (missing, superlist))
868
 
 
869
 
    def assertListRaises(self, excClass, func, *args, **kwargs):
870
 
        """Fail unless excClass is raised when the iterator from func is used.
871
 
        
872
 
        Many functions can return generators this makes sure
873
 
        to wrap them in a list() call to make sure the whole generator
874
 
        is run, and that the proper exception is raised.
875
 
        """
876
 
        try:
877
 
            list(func(*args, **kwargs))
878
 
        except excClass:
879
 
            return
880
 
        else:
881
 
            if getattr(excClass,'__name__', None) is not None:
882
 
                excName = excClass.__name__
883
 
            else:
884
 
                excName = str(excClass)
885
 
            raise self.failureException, "%s not raised" % excName
886
 
 
887
 
    def assertRaises(self, excClass, callableObj, *args, **kwargs):
888
 
        """Assert that a callable raises a particular exception.
889
 
 
890
 
        :param excClass: As for the except statement, this may be either an
891
 
            exception class, or a tuple of classes.
892
 
        :param callableObj: A callable, will be passed ``*args`` and
893
 
            ``**kwargs``.
894
 
 
895
 
        Returns the exception so that you can examine it.
896
 
        """
897
 
        try:
898
 
            callableObj(*args, **kwargs)
899
 
        except excClass, e:
900
 
            return e
901
 
        else:
902
 
            if getattr(excClass,'__name__', None) is not None:
903
 
                excName = excClass.__name__
904
 
            else:
905
 
                # probably a tuple
906
 
                excName = str(excClass)
907
 
            raise self.failureException, "%s not raised" % excName
908
 
 
909
 
    def assertIs(self, left, right, message=None):
910
 
        if not (left is right):
911
 
            if message is not None:
912
 
                raise AssertionError(message)
913
 
            else:
914
 
                raise AssertionError("%r is not %r." % (left, right))
915
 
 
916
 
    def assertIsNot(self, left, right, message=None):
917
 
        if (left is right):
918
 
            if message is not None:
919
 
                raise AssertionError(message)
920
 
            else:
921
 
                raise AssertionError("%r is %r." % (left, right))
922
 
 
923
 
    def assertTransportMode(self, transport, path, mode):
924
 
        """Fail if a path does not have mode mode.
925
 
        
926
 
        If modes are not supported on this transport, the assertion is ignored.
927
 
        """
928
 
        if not transport._can_roundtrip_unix_modebits():
929
 
            return
930
 
        path_stat = transport.stat(path)
931
 
        actual_mode = stat.S_IMODE(path_stat.st_mode)
932
 
        self.assertEqual(mode, actual_mode,
933
 
            'mode of %r incorrect (%o != %o)' % (path, mode, actual_mode))
934
 
 
935
 
    def assertIsInstance(self, obj, kls):
936
 
        """Fail if obj is not an instance of kls"""
937
 
        if not isinstance(obj, kls):
938
 
            self.fail("%r is an instance of %s rather than %s" % (
939
 
                obj, obj.__class__, kls))
940
 
 
941
 
    def expectFailure(self, reason, assertion, *args, **kwargs):
942
 
        """Invoke a test, expecting it to fail for the given reason.
943
 
 
944
 
        This is for assertions that ought to succeed, but currently fail.
945
 
        (The failure is *expected* but not *wanted*.)  Please be very precise
946
 
        about the failure you're expecting.  If a new bug is introduced,
947
 
        AssertionError should be raised, not KnownFailure.
948
 
 
949
 
        Frequently, expectFailure should be followed by an opposite assertion.
950
 
        See example below.
951
 
 
952
 
        Intended to be used with a callable that raises AssertionError as the
953
 
        'assertion' parameter.  args and kwargs are passed to the 'assertion'.
954
 
 
955
 
        Raises KnownFailure if the test fails.  Raises AssertionError if the
956
 
        test succeeds.
957
 
 
958
 
        example usage::
959
 
 
960
 
          self.expectFailure('Math is broken', self.assertNotEqual, 54,
961
 
                             dynamic_val)
962
 
          self.assertEqual(42, dynamic_val)
963
 
 
964
 
          This means that a dynamic_val of 54 will cause the test to raise
965
 
          a KnownFailure.  Once math is fixed and the expectFailure is removed,
966
 
          only a dynamic_val of 42 will allow the test to pass.  Anything other
967
 
          than 54 or 42 will cause an AssertionError.
968
 
        """
969
 
        try:
970
 
            assertion(*args, **kwargs)
971
 
        except AssertionError:
972
 
            raise KnownFailure(reason)
973
 
        else:
974
 
            self.fail('Unexpected success.  Should have failed: %s' % reason)
975
 
 
976
 
    def _capture_warnings(self, a_callable, *args, **kwargs):
977
 
        """A helper for callDeprecated and applyDeprecated.
978
 
 
979
 
        :param a_callable: A callable to call.
980
 
        :param args: The positional arguments for the callable
981
 
        :param kwargs: The keyword arguments for the callable
982
 
        :return: A tuple (warnings, result). result is the result of calling
983
 
            a_callable(``*args``, ``**kwargs``).
984
 
        """
985
 
        local_warnings = []
986
 
        def capture_warnings(msg, cls=None, stacklevel=None):
987
 
            # we've hooked into a deprecation specific callpath,
988
 
            # only deprecations should getting sent via it.
989
 
            self.assertEqual(cls, DeprecationWarning)
990
 
            local_warnings.append(msg)
991
 
        original_warning_method = symbol_versioning.warn
992
 
        symbol_versioning.set_warning_method(capture_warnings)
993
 
        try:
994
 
            result = a_callable(*args, **kwargs)
995
 
        finally:
996
 
            symbol_versioning.set_warning_method(original_warning_method)
997
 
        return (local_warnings, result)
998
 
 
999
 
    def applyDeprecated(self, deprecation_format, a_callable, *args, **kwargs):
1000
 
        """Call a deprecated callable without warning the user.
1001
 
 
1002
 
        Note that this only captures warnings raised by symbol_versioning.warn,
1003
 
        not other callers that go direct to the warning module.
1004
 
 
1005
 
        :param deprecation_format: The deprecation format that the callable
1006
 
            should have been deprecated with. This is the same type as the
1007
 
            parameter to deprecated_method/deprecated_function. If the
1008
 
            callable is not deprecated with this format, an assertion error
1009
 
            will be raised.
1010
 
        :param a_callable: A callable to call. This may be a bound method or
1011
 
            a regular function. It will be called with ``*args`` and
1012
 
            ``**kwargs``.
1013
 
        :param args: The positional arguments for the callable
1014
 
        :param kwargs: The keyword arguments for the callable
1015
 
        :return: The result of a_callable(``*args``, ``**kwargs``)
1016
 
        """
1017
 
        call_warnings, result = self._capture_warnings(a_callable,
1018
 
            *args, **kwargs)
1019
 
        expected_first_warning = symbol_versioning.deprecation_string(
1020
 
            a_callable, deprecation_format)
1021
 
        if len(call_warnings) == 0:
1022
 
            self.fail("No deprecation warning generated by call to %s" %
1023
 
                a_callable)
1024
 
        self.assertEqual(expected_first_warning, call_warnings[0])
1025
 
        return result
1026
 
 
1027
 
    def callDeprecated(self, expected, callable, *args, **kwargs):
1028
 
        """Assert that a callable is deprecated in a particular way.
1029
 
 
1030
 
        This is a very precise test for unusual requirements. The 
1031
 
        applyDeprecated helper function is probably more suited for most tests
1032
 
        as it allows you to simply specify the deprecation format being used
1033
 
        and will ensure that that is issued for the function being called.
1034
 
 
1035
 
        Note that this only captures warnings raised by symbol_versioning.warn,
1036
 
        not other callers that go direct to the warning module.
1037
 
 
1038
 
        :param expected: a list of the deprecation warnings expected, in order
1039
 
        :param callable: The callable to call
1040
 
        :param args: The positional arguments for the callable
1041
 
        :param kwargs: The keyword arguments for the callable
1042
 
        """
1043
 
        call_warnings, result = self._capture_warnings(callable,
1044
 
            *args, **kwargs)
1045
 
        self.assertEqual(expected, call_warnings)
1046
 
        return result
1047
 
 
1048
 
    def _startLogFile(self):
1049
 
        """Send bzr and test log messages to a temporary file.
1050
 
 
1051
 
        The file is removed as the test is torn down.
1052
 
        """
 
59
        self._enable_file_logging()
 
60
 
 
61
 
 
62
    def _enable_file_logging(self):
1053
63
        fileno, name = tempfile.mkstemp(suffix='.log', prefix='testbzr')
 
64
 
1054
65
        self._log_file = os.fdopen(fileno, 'w+')
1055
 
        self._log_nonce = bzrlib.trace.enable_test_log(self._log_file)
 
66
 
 
67
        hdlr = logging.StreamHandler(self._log_file)
 
68
        hdlr.setLevel(logging.DEBUG)
 
69
        hdlr.setFormatter(logging.Formatter('%(levelname)4.4s  %(message)s'))
 
70
        logging.getLogger('').addHandler(hdlr)
 
71
        logging.getLogger('').setLevel(logging.DEBUG)
 
72
        self._log_hdlr = hdlr
 
73
        debug('opened log file %s', name)
 
74
        
1056
75
        self._log_file_name = name
1057
 
        self.addCleanup(self._finishLogFile)
1058
 
 
1059
 
    def _finishLogFile(self):
1060
 
        """Finished with the log file.
1061
 
 
1062
 
        Close the file and delete it, unless setKeepLogfile was called.
1063
 
        """
1064
 
        if self._log_file is None:
1065
 
            return
1066
 
        bzrlib.trace.disable_test_log(self._log_nonce)
 
76
 
 
77
        
 
78
    def tearDown(self):
 
79
        logging.getLogger('').removeHandler(self._log_hdlr)
 
80
        bzrlib.trace.enable_default_logging()
 
81
        logging.debug('%s teardown', self.id())
1067
82
        self._log_file.close()
1068
 
        self._log_file = None
1069
 
        if not self._keep_log_file:
1070
 
            os.remove(self._log_file_name)
1071
 
            self._log_file_name = None
1072
 
 
1073
 
    def setKeepLogfile(self):
1074
 
        """Make the logfile not be deleted when _finishLogFile is called."""
1075
 
        self._keep_log_file = True
1076
 
 
1077
 
    def addCleanup(self, callable):
1078
 
        """Arrange to run a callable when this case is torn down.
1079
 
 
1080
 
        Callables are run in the reverse of the order they are registered, 
1081
 
        ie last-in first-out.
1082
 
        """
1083
 
        if callable in self._cleanups:
1084
 
            raise ValueError("cleanup function %r already registered on %s" 
1085
 
                    % (callable, self))
1086
 
        self._cleanups.append(callable)
1087
 
 
1088
 
    def _cleanEnvironment(self):
1089
 
        new_env = {
1090
 
            'BZR_HOME': None, # Don't inherit BZR_HOME to all the tests.
1091
 
            'HOME': os.getcwd(),
1092
 
            'APPDATA': None,  # bzr now use Win32 API and don't rely on APPDATA
1093
 
            'BZR_EMAIL': None,
1094
 
            'BZREMAIL': None, # may still be present in the environment
1095
 
            'EMAIL': None,
1096
 
            'BZR_PROGRESS_BAR': None,
1097
 
            # Proxies
1098
 
            'http_proxy': None,
1099
 
            'HTTP_PROXY': None,
1100
 
            'https_proxy': None,
1101
 
            'HTTPS_PROXY': None,
1102
 
            'no_proxy': None,
1103
 
            'NO_PROXY': None,
1104
 
            'all_proxy': None,
1105
 
            'ALL_PROXY': None,
1106
 
            # Nobody cares about these ones AFAIK. So far at
1107
 
            # least. If you do (care), please update this comment
1108
 
            # -- vila 20061212
1109
 
            'ftp_proxy': None,
1110
 
            'FTP_PROXY': None,
1111
 
            'BZR_REMOTE_PATH': None,
1112
 
        }
1113
 
        self.__old_env = {}
1114
 
        self.addCleanup(self._restoreEnvironment)
1115
 
        for name, value in new_env.iteritems():
1116
 
            self._captureVar(name, value)
1117
 
 
1118
 
    def _captureVar(self, name, newvalue):
1119
 
        """Set an environment variable, and reset it when finished."""
1120
 
        self.__old_env[name] = osutils.set_or_unset_env(name, newvalue)
1121
 
 
1122
 
    def _restore_debug_flags(self):
1123
 
        debug.debug_flags.clear()
1124
 
        debug.debug_flags.update(self._preserved_debug_flags)
1125
 
 
1126
 
    def _restoreEnvironment(self):
1127
 
        for name, value in self.__old_env.iteritems():
1128
 
            osutils.set_or_unset_env(name, value)
1129
 
 
1130
 
    def _restoreHooks(self):
1131
 
        for klass, hooks in self._preserved_hooks.items():
1132
 
            setattr(klass, 'hooks', hooks)
1133
 
 
1134
 
    def knownFailure(self, reason):
1135
 
        """This test has failed for some known reason."""
1136
 
        raise KnownFailure(reason)
1137
 
 
1138
 
    def run(self, result=None):
1139
 
        if result is None: result = self.defaultTestResult()
1140
 
        for feature in getattr(self, '_test_needs_features', []):
1141
 
            if not feature.available():
1142
 
                result.startTest(self)
1143
 
                if getattr(result, 'addNotSupported', None):
1144
 
                    result.addNotSupported(self, feature)
1145
 
                else:
1146
 
                    result.addSuccess(self)
1147
 
                result.stopTest(self)
1148
 
                return
1149
 
        return unittest.TestCase.run(self, result)
1150
 
 
1151
 
    def tearDown(self):
1152
 
        self._runCleanups()
1153
83
        unittest.TestCase.tearDown(self)
1154
84
 
1155
 
    def time(self, callable, *args, **kwargs):
1156
 
        """Run callable and accrue the time it takes to the benchmark time.
1157
 
        
1158
 
        If lsprofiling is enabled (i.e. by --lsprof-time to bzr selftest) then
1159
 
        this will cause lsprofile statistics to be gathered and stored in
1160
 
        self._benchcalls.
1161
 
        """
1162
 
        if self._benchtime is None:
1163
 
            self._benchtime = 0
1164
 
        start = time.time()
1165
 
        try:
1166
 
            if not self._gather_lsprof_in_benchmarks:
1167
 
                return callable(*args, **kwargs)
1168
 
            else:
1169
 
                # record this benchmark
1170
 
                ret, stats = bzrlib.lsprof.profile(callable, *args, **kwargs)
1171
 
                stats.sort()
1172
 
                self._benchcalls.append(((callable, args, kwargs), stats))
1173
 
                return ret
1174
 
        finally:
1175
 
            self._benchtime += time.time() - start
1176
 
 
1177
 
    def _runCleanups(self):
1178
 
        """Run registered cleanup functions. 
1179
 
 
1180
 
        This should only be called from TestCase.tearDown.
1181
 
        """
1182
 
        # TODO: Perhaps this should keep running cleanups even if 
1183
 
        # one of them fails?
1184
 
 
1185
 
        # Actually pop the cleanups from the list so tearDown running
1186
 
        # twice is safe (this happens for skipped tests).
1187
 
        while self._cleanups:
1188
 
            self._cleanups.pop()()
1189
85
 
1190
86
    def log(self, *args):
1191
 
        mutter(*args)
1192
 
 
1193
 
    def _get_log(self, keep_log_file=False):
1194
 
        """Return as a string the log for this test. If the file is still
1195
 
        on disk and keep_log_file=False, delete the log file and store the
1196
 
        content in self._log_contents."""
1197
 
        # flush the log file, to get all content
1198
 
        import bzrlib.trace
1199
 
        bzrlib.trace._trace_file.flush()
1200
 
        if self._log_contents:
1201
 
            return self._log_contents
1202
 
        if self._log_file_name is not None:
1203
 
            logfile = open(self._log_file_name)
1204
 
            try:
1205
 
                log_contents = logfile.read()
1206
 
            finally:
1207
 
                logfile.close()
1208
 
            if not keep_log_file:
1209
 
                self._log_contents = log_contents
1210
 
                try:
1211
 
                    os.remove(self._log_file_name)
1212
 
                except OSError, e:
1213
 
                    if sys.platform == 'win32' and e.errno == errno.EACCES:
1214
 
                        print >>sys.stderr, ('Unable to delete log file '
1215
 
                                             ' %r' % self._log_file_name)
1216
 
                    else:
1217
 
                        raise
1218
 
            return log_contents
1219
 
        else:
1220
 
            return "DELETED log file to reduce memory footprint"
1221
 
 
1222
 
    @deprecated_method(zero_eighteen)
1223
 
    def capture(self, cmd, retcode=0):
1224
 
        """Shortcut that splits cmd into words, runs, and returns stdout"""
1225
 
        return self.run_bzr_captured(cmd.split(), retcode=retcode)[0]
1226
 
 
1227
 
    def requireFeature(self, feature):
1228
 
        """This test requires a specific feature is available.
1229
 
 
1230
 
        :raises UnavailableFeature: When feature is not available.
1231
 
        """
1232
 
        if not feature.available():
1233
 
            raise UnavailableFeature(feature)
1234
 
 
1235
 
    @deprecated_method(zero_eighteen)
1236
 
    def run_bzr_captured(self, argv, retcode=0, encoding=None, stdin=None,
1237
 
                         working_dir=None):
1238
 
        """Invoke bzr and return (stdout, stderr).
1239
 
 
1240
 
        Don't call this method, just use run_bzr() which is equivalent.
1241
 
 
1242
 
        :param argv: Arguments to invoke bzr.  This may be either a 
1243
 
            single string, in which case it is split by shlex into words, 
1244
 
            or a list of arguments.
1245
 
        :param retcode: Expected return code, or None for don't-care.
1246
 
        :param encoding: Encoding for sys.stdout and sys.stderr
1247
 
        :param stdin: A string to be used as stdin for the command.
1248
 
        :param working_dir: Change to this directory before running
1249
 
        """
1250
 
        return self._run_bzr_autosplit(argv, retcode=retcode,
1251
 
                encoding=encoding, stdin=stdin, working_dir=working_dir,
1252
 
                )
1253
 
 
1254
 
    def _run_bzr_autosplit(self, args, retcode, encoding, stdin,
1255
 
            working_dir):
1256
 
        """Run bazaar command line, splitting up a string command line."""
1257
 
        if isinstance(args, basestring):
1258
 
            args = list(shlex.split(args))
1259
 
        return self._run_bzr_core(args, retcode=retcode,
1260
 
                encoding=encoding, stdin=stdin, working_dir=working_dir,
1261
 
                )
1262
 
 
1263
 
    def _run_bzr_core(self, args, retcode, encoding, stdin,
1264
 
            working_dir):
1265
 
        if encoding is None:
1266
 
            encoding = bzrlib.user_encoding
1267
 
        stdout = StringIOWrapper()
1268
 
        stderr = StringIOWrapper()
1269
 
        stdout.encoding = encoding
1270
 
        stderr.encoding = encoding
1271
 
 
1272
 
        self.log('run bzr: %r', args)
1273
 
        # FIXME: don't call into logging here
1274
 
        handler = logging.StreamHandler(stderr)
1275
 
        handler.setLevel(logging.INFO)
1276
 
        logger = logging.getLogger('')
1277
 
        logger.addHandler(handler)
1278
 
        old_ui_factory = ui.ui_factory
1279
 
        ui.ui_factory = TestUIFactory(stdin=stdin, stdout=stdout, stderr=stderr)
1280
 
 
1281
 
        cwd = None
1282
 
        if working_dir is not None:
1283
 
            cwd = osutils.getcwd()
1284
 
            os.chdir(working_dir)
1285
 
 
1286
 
        try:
1287
 
            result = self.apply_redirected(ui.ui_factory.stdin,
1288
 
                stdout, stderr,
1289
 
                bzrlib.commands.run_bzr_catch_errors,
1290
 
                args)
1291
 
        finally:
1292
 
            logger.removeHandler(handler)
1293
 
            ui.ui_factory = old_ui_factory
1294
 
            if cwd is not None:
1295
 
                os.chdir(cwd)
1296
 
 
1297
 
        out = stdout.getvalue()
1298
 
        err = stderr.getvalue()
1299
 
        if out:
1300
 
            self.log('output:\n%r', out)
1301
 
        if err:
1302
 
            self.log('errors:\n%r', err)
1303
 
        if retcode is not None:
1304
 
            self.assertEquals(retcode, result,
1305
 
                              message='Unexpected return code')
1306
 
        return out, err
 
87
        logging.debug(*args)
 
88
 
 
89
    def _get_log(self):
 
90
        """Return as a string the log for this test"""
 
91
        return open(self._log_file_name).read()
1307
92
 
1308
93
    def run_bzr(self, *args, **kwargs):
1309
94
        """Invoke bzr, as if it were run from the command line.
1310
95
 
1311
 
        The argument list should not include the bzr program name - the
1312
 
        first argument is normally the bzr command.  Arguments may be
1313
 
        passed in three ways:
1314
 
 
1315
 
        1- A list of strings, eg ["commit", "a"].  This is recommended
1316
 
        when the command contains whitespace or metacharacters, or 
1317
 
        is built up at run time.
1318
 
 
1319
 
        2- A single string, eg "add a".  This is the most convenient 
1320
 
        for hardcoded commands.
1321
 
 
1322
 
        3- Several varargs parameters, eg run_bzr("add", "a").  
1323
 
        This is not recommended for new code.
1324
 
 
1325
 
        This runs bzr through the interface that catches and reports
1326
 
        errors, and with logging set to something approximating the
1327
 
        default, so that error reporting can be checked.
1328
 
 
1329
96
        This should be the main method for tests that want to exercise the
1330
97
        overall behavior of the bzr application (rather than a unit test
1331
98
        or a functional test of the library.)
1332
99
 
1333
 
        This sends the stdout/stderr results into the test's log,
1334
 
        where it may be useful for debugging.  See also run_captured.
1335
 
 
1336
 
        :keyword stdin: A string to be used as stdin for the command.
1337
 
        :keyword retcode: The status code the command should return;
1338
 
            default 0.
1339
 
        :keyword working_dir: The directory to run the command in
1340
 
        :keyword error_regexes: A list of expected error messages.  If
1341
 
            specified they must be seen in the error output of the command.
1342
 
        """
1343
 
        retcode = kwargs.pop('retcode', 0)
1344
 
        encoding = kwargs.pop('encoding', None)
1345
 
        stdin = kwargs.pop('stdin', None)
1346
 
        working_dir = kwargs.pop('working_dir', None)
1347
 
        error_regexes = kwargs.pop('error_regexes', [])
1348
 
 
1349
 
        if len(args) == 1:
1350
 
            if isinstance(args[0], (list, basestring)):
1351
 
                args = args[0]
1352
 
        else:
1353
 
            ## symbol_versioning.warn(zero_eighteen % "passing varargs to run_bzr",
1354
 
            ##         DeprecationWarning, stacklevel=2)
1355
 
            # not done yet, because too many tests would need to  be updated -
1356
 
            # but please don't do this in new code.  -- mbp 20070626
1357
 
            pass
1358
 
 
1359
 
        out, err = self._run_bzr_autosplit(args=args,
1360
 
            retcode=retcode,
1361
 
            encoding=encoding, stdin=stdin, working_dir=working_dir,
1362
 
            )
1363
 
 
1364
 
        for regex in error_regexes:
1365
 
            self.assertContainsRe(err, regex)
1366
 
        return out, err
1367
 
 
1368
 
    def run_bzr_decode(self, *args, **kwargs):
1369
 
        if 'encoding' in kwargs:
1370
 
            encoding = kwargs['encoding']
1371
 
        else:
1372
 
            encoding = bzrlib.user_encoding
1373
 
        return self.run_bzr(*args, **kwargs)[0].decode(encoding)
1374
 
 
1375
 
    def run_bzr_error(self, error_regexes, *args, **kwargs):
1376
 
        """Run bzr, and check that stderr contains the supplied regexes
1377
 
 
1378
 
        :param error_regexes: Sequence of regular expressions which
1379
 
            must each be found in the error output. The relative ordering
1380
 
            is not enforced.
1381
 
        :param args: command-line arguments for bzr
1382
 
        :param kwargs: Keyword arguments which are interpreted by run_bzr
1383
 
            This function changes the default value of retcode to be 3,
1384
 
            since in most cases this is run when you expect bzr to fail.
1385
 
        :return: (out, err) The actual output of running the command (in case
1386
 
            you want to do more inspection)
1387
 
 
1388
 
        Examples of use::
1389
 
 
1390
 
            # Make sure that commit is failing because there is nothing to do
1391
 
            self.run_bzr_error(['no changes to commit'],
1392
 
                               'commit', '-m', 'my commit comment')
1393
 
            # Make sure --strict is handling an unknown file, rather than
1394
 
            # giving us the 'nothing to do' error
1395
 
            self.build_tree(['unknown'])
1396
 
            self.run_bzr_error(['Commit refused because there are unknown files'],
1397
 
                               'commit', '--strict', '-m', 'my commit comment')
1398
 
        """
1399
 
        kwargs.setdefault('retcode', 3)
1400
 
        out, err = self.run_bzr(error_regexes=error_regexes, *args, **kwargs)
1401
 
        return out, err
1402
 
 
1403
 
    def run_bzr_subprocess(self, *args, **kwargs):
1404
 
        """Run bzr in a subprocess for testing.
1405
 
 
1406
 
        This starts a new Python interpreter and runs bzr in there. 
1407
 
        This should only be used for tests that have a justifiable need for
1408
 
        this isolation: e.g. they are testing startup time, or signal
1409
 
        handling, or early startup code, etc.  Subprocess code can't be 
1410
 
        profiled or debugged so easily.
1411
 
 
1412
 
        :keyword retcode: The status code that is expected.  Defaults to 0.  If
1413
 
            None is supplied, the status code is not checked.
1414
 
        :keyword env_changes: A dictionary which lists changes to environment
1415
 
            variables. A value of None will unset the env variable.
1416
 
            The values must be strings. The change will only occur in the
1417
 
            child, so you don't need to fix the environment after running.
1418
 
        :keyword universal_newlines: Convert CRLF => LF
1419
 
        :keyword allow_plugins: By default the subprocess is run with
1420
 
            --no-plugins to ensure test reproducibility. Also, it is possible
1421
 
            for system-wide plugins to create unexpected output on stderr,
1422
 
            which can cause unnecessary test failures.
1423
 
        """
1424
 
        env_changes = kwargs.get('env_changes', {})
1425
 
        working_dir = kwargs.get('working_dir', None)
1426
 
        allow_plugins = kwargs.get('allow_plugins', False)
1427
 
        process = self.start_bzr_subprocess(args, env_changes=env_changes,
1428
 
                                            working_dir=working_dir,
1429
 
                                            allow_plugins=allow_plugins)
1430
 
        # We distinguish between retcode=None and retcode not passed.
1431
 
        supplied_retcode = kwargs.get('retcode', 0)
1432
 
        return self.finish_bzr_subprocess(process, retcode=supplied_retcode,
1433
 
            universal_newlines=kwargs.get('universal_newlines', False),
1434
 
            process_args=args)
1435
 
 
1436
 
    def start_bzr_subprocess(self, process_args, env_changes=None,
1437
 
                             skip_if_plan_to_signal=False,
1438
 
                             working_dir=None,
1439
 
                             allow_plugins=False):
1440
 
        """Start bzr in a subprocess for testing.
1441
 
 
1442
 
        This starts a new Python interpreter and runs bzr in there.
1443
 
        This should only be used for tests that have a justifiable need for
1444
 
        this isolation: e.g. they are testing startup time, or signal
1445
 
        handling, or early startup code, etc.  Subprocess code can't be
1446
 
        profiled or debugged so easily.
1447
 
 
1448
 
        :param process_args: a list of arguments to pass to the bzr executable,
1449
 
            for example ``['--version']``.
1450
 
        :param env_changes: A dictionary which lists changes to environment
1451
 
            variables. A value of None will unset the env variable.
1452
 
            The values must be strings. The change will only occur in the
1453
 
            child, so you don't need to fix the environment after running.
1454
 
        :param skip_if_plan_to_signal: raise TestSkipped when true and os.kill
1455
 
            is not available.
1456
 
        :param allow_plugins: If False (default) pass --no-plugins to bzr.
1457
 
 
1458
 
        :returns: Popen object for the started process.
1459
 
        """
1460
 
        if skip_if_plan_to_signal:
1461
 
            if not getattr(os, 'kill', None):
1462
 
                raise TestSkipped("os.kill not available.")
1463
 
 
1464
 
        if env_changes is None:
1465
 
            env_changes = {}
1466
 
        old_env = {}
1467
 
 
1468
 
        def cleanup_environment():
1469
 
            for env_var, value in env_changes.iteritems():
1470
 
                old_env[env_var] = osutils.set_or_unset_env(env_var, value)
1471
 
 
1472
 
        def restore_environment():
1473
 
            for env_var, value in old_env.iteritems():
1474
 
                osutils.set_or_unset_env(env_var, value)
1475
 
 
1476
 
        bzr_path = self.get_bzr_path()
1477
 
 
1478
 
        cwd = None
1479
 
        if working_dir is not None:
1480
 
            cwd = osutils.getcwd()
1481
 
            os.chdir(working_dir)
1482
 
 
1483
 
        try:
1484
 
            # win32 subprocess doesn't support preexec_fn
1485
 
            # so we will avoid using it on all platforms, just to
1486
 
            # make sure the code path is used, and we don't break on win32
1487
 
            cleanup_environment()
1488
 
            command = [sys.executable, bzr_path]
1489
 
            if not allow_plugins:
1490
 
                command.append('--no-plugins')
1491
 
            command.extend(process_args)
1492
 
            process = self._popen(command, stdin=PIPE, stdout=PIPE, stderr=PIPE)
1493
 
        finally:
1494
 
            restore_environment()
1495
 
            if cwd is not None:
1496
 
                os.chdir(cwd)
1497
 
 
1498
 
        return process
1499
 
 
1500
 
    def _popen(self, *args, **kwargs):
1501
 
        """Place a call to Popen.
1502
 
 
1503
 
        Allows tests to override this method to intercept the calls made to
1504
 
        Popen for introspection.
1505
 
        """
1506
 
        return Popen(*args, **kwargs)
1507
 
 
1508
 
    def get_bzr_path(self):
1509
 
        """Return the path of the 'bzr' executable for this test suite."""
1510
 
        bzr_path = os.path.dirname(os.path.dirname(bzrlib.__file__))+'/bzr'
1511
 
        if not os.path.isfile(bzr_path):
1512
 
            # We are probably installed. Assume sys.argv is the right file
1513
 
            bzr_path = sys.argv[0]
1514
 
        return bzr_path
1515
 
 
1516
 
    def finish_bzr_subprocess(self, process, retcode=0, send_signal=None,
1517
 
                              universal_newlines=False, process_args=None):
1518
 
        """Finish the execution of process.
1519
 
 
1520
 
        :param process: the Popen object returned from start_bzr_subprocess.
1521
 
        :param retcode: The status code that is expected.  Defaults to 0.  If
1522
 
            None is supplied, the status code is not checked.
1523
 
        :param send_signal: an optional signal to send to the process.
1524
 
        :param universal_newlines: Convert CRLF => LF
1525
 
        :returns: (stdout, stderr)
1526
 
        """
1527
 
        if send_signal is not None:
1528
 
            os.kill(process.pid, send_signal)
1529
 
        out, err = process.communicate()
1530
 
 
1531
 
        if universal_newlines:
1532
 
            out = out.replace('\r\n', '\n')
1533
 
            err = err.replace('\r\n', '\n')
1534
 
 
1535
 
        if retcode is not None and retcode != process.returncode:
1536
 
            if process_args is None:
1537
 
                process_args = "(unknown args)"
1538
 
            mutter('Output of bzr %s:\n%s', process_args, out)
1539
 
            mutter('Error for bzr %s:\n%s', process_args, err)
1540
 
            self.fail('Command bzr %s failed with retcode %s != %s'
1541
 
                      % (process_args, retcode, process.returncode))
1542
 
        return [out, err]
1543
 
 
 
100
        Much of the old code runs bzr by forking a new copy of Python, but
 
101
        that is slower, harder to debug, and generally not necessary.
 
102
        """
 
103
        retcode = kwargs.get('retcode', 0)
 
104
        result = self.apply_redirected(None, None, None,
 
105
                                       bzrlib.commands.run_bzr, args)
 
106
        self.assertEquals(result, retcode)
 
107
        
 
108
        
1544
109
    def check_inventory_shape(self, inv, shape):
1545
 
        """Compare an inventory to a list of expected names.
 
110
        """
 
111
        Compare an inventory to a list of expected names.
1546
112
 
1547
113
        Fail if they are not precisely equal.
1548
114
        """
1550
116
        shape = list(shape)             # copy
1551
117
        for path, ie in inv.entries():
1552
118
            name = path.replace('\\', '/')
1553
 
            if ie.kind == 'directory':
 
119
            if ie.kind == 'dir':
1554
120
                name = name + '/'
1555
121
            if name in shape:
1556
122
                shape.remove(name)
1566
132
        """Call callable with redirected std io pipes.
1567
133
 
1568
134
        Returns the return code."""
 
135
        from StringIO import StringIO
1569
136
        if not callable(a_callable):
1570
137
            raise ValueError("a_callable must be callable.")
1571
138
        if stdin is None:
1572
139
            stdin = StringIO("")
1573
140
        if stdout is None:
1574
 
            if getattr(self, "_log_file", None) is not None:
1575
 
                stdout = self._log_file
1576
 
            else:
1577
 
                stdout = StringIO()
 
141
            stdout = self._log_file
1578
142
        if stderr is None:
1579
 
            if getattr(self, "_log_file", None is not None):
1580
 
                stderr = self._log_file
1581
 
            else:
1582
 
                stderr = StringIO()
 
143
            stderr = self._log_file
1583
144
        real_stdin = sys.stdin
1584
145
        real_stdout = sys.stdout
1585
146
        real_stderr = sys.stderr
1593
154
            sys.stderr = real_stderr
1594
155
            sys.stdin = real_stdin
1595
156
 
1596
 
    def reduceLockdirTimeout(self):
1597
 
        """Reduce the default lock timeout for the duration of the test, so that
1598
 
        if LockContention occurs during a test, it does so quickly.
1599
 
 
1600
 
        Tests that expect to provoke LockContention errors should call this.
1601
 
        """
1602
 
        orig_timeout = bzrlib.lockdir._DEFAULT_TIMEOUT_SECONDS
1603
 
        def resetTimeout():
1604
 
            bzrlib.lockdir._DEFAULT_TIMEOUT_SECONDS = orig_timeout
1605
 
        self.addCleanup(resetTimeout)
1606
 
        bzrlib.lockdir._DEFAULT_TIMEOUT_SECONDS = 0
1607
 
 
1608
 
 
1609
 
class TestCaseWithMemoryTransport(TestCase):
1610
 
    """Common test class for tests that do not need disk resources.
1611
 
 
1612
 
    Tests that need disk resources should derive from TestCaseWithTransport.
1613
 
 
1614
 
    TestCaseWithMemoryTransport sets the TEST_ROOT variable for all bzr tests.
1615
 
 
1616
 
    For TestCaseWithMemoryTransport the test_home_dir is set to the name of
1617
 
    a directory which does not exist. This serves to help ensure test isolation
1618
 
    is preserved. test_dir is set to the TEST_ROOT, as is cwd, because they
1619
 
    must exist. However, TestCaseWithMemoryTransport does not offer local
1620
 
    file defaults for the transport in tests, nor does it obey the command line
1621
 
    override, so tests that accidentally write to the common directory should
1622
 
    be rare.
1623
 
 
1624
 
    :cvar TEST_ROOT: Directory containing all temporary directories, plus
1625
 
    a .bzr directory that stops us ascending higher into the filesystem.
1626
 
    """
1627
 
 
1628
 
    TEST_ROOT = None
1629
 
    _TEST_NAME = 'test'
1630
 
 
1631
 
    def __init__(self, methodName='runTest'):
1632
 
        # allow test parameterisation after test construction and before test
1633
 
        # execution. Variables that the parameteriser sets need to be 
1634
 
        # ones that are not set by setUp, or setUp will trash them.
1635
 
        super(TestCaseWithMemoryTransport, self).__init__(methodName)
1636
 
        self.vfs_transport_factory = default_transport
1637
 
        self.transport_server = None
1638
 
        self.transport_readonly_server = None
1639
 
        self.__vfs_server = None
1640
 
 
1641
 
    def get_transport(self):
1642
 
        """Return a writeable transport for the test scratch space"""
1643
 
        t = get_transport(self.get_url())
1644
 
        self.assertFalse(t.is_readonly())
1645
 
        return t
1646
 
 
1647
 
    def get_readonly_transport(self):
1648
 
        """Return a readonly transport for the test scratch space
1649
 
        
1650
 
        This can be used to test that operations which should only need
1651
 
        readonly access in fact do not try to write.
1652
 
        """
1653
 
        t = get_transport(self.get_readonly_url())
1654
 
        self.assertTrue(t.is_readonly())
1655
 
        return t
1656
 
 
1657
 
    def create_transport_readonly_server(self):
1658
 
        """Create a transport server from class defined at init.
1659
 
 
1660
 
        This is mostly a hook for daughter classes.
1661
 
        """
1662
 
        return self.transport_readonly_server()
1663
 
 
1664
 
    def get_readonly_server(self):
1665
 
        """Get the server instance for the readonly transport
1666
 
 
1667
 
        This is useful for some tests with specific servers to do diagnostics.
1668
 
        """
1669
 
        if self.__readonly_server is None:
1670
 
            if self.transport_readonly_server is None:
1671
 
                # readonly decorator requested
1672
 
                # bring up the server
1673
 
                self.__readonly_server = ReadonlyServer()
1674
 
                self.__readonly_server.setUp(self.get_vfs_only_server())
1675
 
            else:
1676
 
                self.__readonly_server = self.create_transport_readonly_server()
1677
 
                self.__readonly_server.setUp(self.get_vfs_only_server())
1678
 
            self.addCleanup(self.__readonly_server.tearDown)
1679
 
        return self.__readonly_server
1680
 
 
1681
 
    def get_readonly_url(self, relpath=None):
1682
 
        """Get a URL for the readonly transport.
1683
 
 
1684
 
        This will either be backed by '.' or a decorator to the transport 
1685
 
        used by self.get_url()
1686
 
        relpath provides for clients to get a path relative to the base url.
1687
 
        These should only be downwards relative, not upwards.
1688
 
        """
1689
 
        base = self.get_readonly_server().get_url()
1690
 
        if relpath is not None:
1691
 
            if not base.endswith('/'):
1692
 
                base = base + '/'
1693
 
            base = base + relpath
1694
 
        return base
1695
 
 
1696
 
    def get_vfs_only_server(self):
1697
 
        """Get the vfs only read/write server instance.
1698
 
 
1699
 
        This is useful for some tests with specific servers that need
1700
 
        diagnostics.
1701
 
 
1702
 
        For TestCaseWithMemoryTransport this is always a MemoryServer, and there
1703
 
        is no means to override it.
1704
 
        """
1705
 
        if self.__vfs_server is None:
1706
 
            self.__vfs_server = MemoryServer()
1707
 
            self.__vfs_server.setUp()
1708
 
            self.addCleanup(self.__vfs_server.tearDown)
1709
 
        return self.__vfs_server
1710
 
 
1711
 
    def get_server(self):
1712
 
        """Get the read/write server instance.
1713
 
 
1714
 
        This is useful for some tests with specific servers that need
1715
 
        diagnostics.
1716
 
 
1717
 
        This is built from the self.transport_server factory. If that is None,
1718
 
        then the self.get_vfs_server is returned.
1719
 
        """
1720
 
        if self.__server is None:
1721
 
            if self.transport_server is None or self.transport_server is self.vfs_transport_factory:
1722
 
                return self.get_vfs_only_server()
1723
 
            else:
1724
 
                # bring up a decorated means of access to the vfs only server.
1725
 
                self.__server = self.transport_server()
1726
 
                try:
1727
 
                    self.__server.setUp(self.get_vfs_only_server())
1728
 
                except TypeError, e:
1729
 
                    # This should never happen; the try:Except here is to assist
1730
 
                    # developers having to update code rather than seeing an
1731
 
                    # uninformative TypeError.
1732
 
                    raise Exception, "Old server API in use: %s, %s" % (self.__server, e)
1733
 
            self.addCleanup(self.__server.tearDown)
1734
 
        return self.__server
1735
 
 
1736
 
    def _adjust_url(self, base, relpath):
1737
 
        """Get a URL (or maybe a path) for the readwrite transport.
1738
 
 
1739
 
        This will either be backed by '.' or to an equivalent non-file based
1740
 
        facility.
1741
 
        relpath provides for clients to get a path relative to the base url.
1742
 
        These should only be downwards relative, not upwards.
1743
 
        """
1744
 
        if relpath is not None and relpath != '.':
1745
 
            if not base.endswith('/'):
1746
 
                base = base + '/'
1747
 
            # XXX: Really base should be a url; we did after all call
1748
 
            # get_url()!  But sometimes it's just a path (from
1749
 
            # LocalAbspathServer), and it'd be wrong to append urlescaped data
1750
 
            # to a non-escaped local path.
1751
 
            if base.startswith('./') or base.startswith('/'):
1752
 
                base += relpath
1753
 
            else:
1754
 
                base += urlutils.escape(relpath)
1755
 
        return base
1756
 
 
1757
 
    def get_url(self, relpath=None):
1758
 
        """Get a URL (or maybe a path) for the readwrite transport.
1759
 
 
1760
 
        This will either be backed by '.' or to an equivalent non-file based
1761
 
        facility.
1762
 
        relpath provides for clients to get a path relative to the base url.
1763
 
        These should only be downwards relative, not upwards.
1764
 
        """
1765
 
        base = self.get_server().get_url()
1766
 
        return self._adjust_url(base, relpath)
1767
 
 
1768
 
    def get_vfs_only_url(self, relpath=None):
1769
 
        """Get a URL (or maybe a path for the plain old vfs transport.
1770
 
 
1771
 
        This will never be a smart protocol.  It always has all the
1772
 
        capabilities of the local filesystem, but it might actually be a
1773
 
        MemoryTransport or some other similar virtual filesystem.
1774
 
 
1775
 
        This is the backing transport (if any) of the server returned by
1776
 
        get_url and get_readonly_url.
1777
 
 
1778
 
        :param relpath: provides for clients to get a path relative to the base
1779
 
            url.  These should only be downwards relative, not upwards.
1780
 
        :return: A URL
1781
 
        """
1782
 
        base = self.get_vfs_only_server().get_url()
1783
 
        return self._adjust_url(base, relpath)
1784
 
 
1785
 
    def _make_test_root(self):
1786
 
        if TestCaseWithMemoryTransport.TEST_ROOT is not None:
1787
 
            return
1788
 
        root = tempfile.mkdtemp(prefix='testbzr-', suffix='.tmp')
1789
 
        TestCaseWithMemoryTransport.TEST_ROOT = root
1790
 
        
1791
 
        # make a fake bzr directory there to prevent any tests propagating
1792
 
        # up onto the source directory's real branch
1793
 
        bzrdir.BzrDir.create_standalone_workingtree(root)
1794
 
 
1795
 
        # The same directory is used by all tests, and we're not specifically
1796
 
        # told when all tests are finished.  This will do.
1797
 
        atexit.register(_rmtree_temp_dir, root)
1798
 
 
1799
 
    def makeAndChdirToTestDir(self):
1800
 
        """Create a temporary directories for this one test.
1801
 
        
1802
 
        This must set self.test_home_dir and self.test_dir and chdir to
1803
 
        self.test_dir.
1804
 
        
1805
 
        For TestCaseWithMemoryTransport we chdir to the TEST_ROOT for this test.
1806
 
        """
1807
 
        os.chdir(TestCaseWithMemoryTransport.TEST_ROOT)
1808
 
        self.test_dir = TestCaseWithMemoryTransport.TEST_ROOT
1809
 
        self.test_home_dir = self.test_dir + "/MemoryTransportMissingHomeDir"
1810
 
        
1811
 
    def make_branch(self, relpath, format=None):
1812
 
        """Create a branch on the transport at relpath."""
1813
 
        repo = self.make_repository(relpath, format=format)
1814
 
        return repo.bzrdir.create_branch()
1815
 
 
1816
 
    def make_bzrdir(self, relpath, format=None):
1817
 
        try:
1818
 
            # might be a relative or absolute path
1819
 
            maybe_a_url = self.get_url(relpath)
1820
 
            segments = maybe_a_url.rsplit('/', 1)
1821
 
            t = get_transport(maybe_a_url)
1822
 
            if len(segments) > 1 and segments[-1] not in ('', '.'):
1823
 
                t.ensure_base()
1824
 
            if format is None:
1825
 
                format = 'default'
1826
 
            if isinstance(format, basestring):
1827
 
                format = bzrdir.format_registry.make_bzrdir(format)
1828
 
            return format.initialize_on_transport(t)
1829
 
        except errors.UninitializableFormat:
1830
 
            raise TestSkipped("Format %s is not initializable." % format)
1831
 
 
1832
 
    def make_repository(self, relpath, shared=False, format=None):
1833
 
        """Create a repository on our default transport at relpath.
1834
 
        
1835
 
        Note that relpath must be a relative path, not a full url.
1836
 
        """
1837
 
        # FIXME: If you create a remoterepository this returns the underlying
1838
 
        # real format, which is incorrect.  Actually we should make sure that 
1839
 
        # RemoteBzrDir returns a RemoteRepository.
1840
 
        # maybe  mbp 20070410
1841
 
        made_control = self.make_bzrdir(relpath, format=format)
1842
 
        return made_control.create_repository(shared=shared)
1843
 
 
1844
 
    def make_branch_and_memory_tree(self, relpath, format=None):
1845
 
        """Create a branch on the default transport and a MemoryTree for it."""
1846
 
        b = self.make_branch(relpath, format=format)
1847
 
        return memorytree.MemoryTree.create_on_branch(b)
1848
 
 
1849
 
    def overrideEnvironmentForTesting(self):
1850
 
        os.environ['HOME'] = self.test_home_dir
1851
 
        os.environ['BZR_HOME'] = self.test_home_dir
1852
 
        
1853
 
    def setUp(self):
1854
 
        super(TestCaseWithMemoryTransport, self).setUp()
1855
 
        self._make_test_root()
1856
 
        _currentdir = os.getcwdu()
1857
 
        def _leaveDirectory():
1858
 
            os.chdir(_currentdir)
1859
 
        self.addCleanup(_leaveDirectory)
1860
 
        self.makeAndChdirToTestDir()
1861
 
        self.overrideEnvironmentForTesting()
1862
 
        self.__readonly_server = None
1863
 
        self.__server = None
1864
 
        self.reduceLockdirTimeout()
 
157
 
 
158
BzrTestBase = TestCase
1865
159
 
1866
160
     
1867
 
class TestCaseInTempDir(TestCaseWithMemoryTransport):
 
161
class TestCaseInTempDir(TestCase):
1868
162
    """Derived class that runs a test within a temporary directory.
1869
163
 
1870
164
    This is useful for tests that need to create a branch, etc.
1874
168
    All test cases create their own directory within that.  If the
1875
169
    tests complete successfully, the directory is removed.
1876
170
 
1877
 
    :ivar test_base_dir: The path of the top-level directory for this 
1878
 
    test, which contains a home directory and a work directory.
1879
 
 
1880
 
    :ivar test_home_dir: An initially empty directory under test_base_dir
1881
 
    which is used as $HOME for this test.
1882
 
 
1883
 
    :ivar test_dir: A directory under test_base_dir used as the current
1884
 
    directory when the test proper is run.
 
171
    InTempDir is an old alias for FunctionalTestCase.
1885
172
    """
1886
173
 
 
174
    TEST_ROOT = None
 
175
    _TEST_NAME = 'test'
1887
176
    OVERRIDE_PYTHON = 'python'
1888
 
    use_numbered_dirs = False
1889
177
 
1890
178
    def check_file_contents(self, filename, expect):
1891
179
        self.log("check contents of file %s" % filename)
1893
181
        if contents != expect:
1894
182
            self.log("expected: %r" % expect)
1895
183
            self.log("actually: %r" % contents)
1896
 
            self.fail("contents of %s not as expected" % filename)
 
184
            self.fail("contents of %s not as expected")
1897
185
 
1898
 
    def makeAndChdirToTestDir(self):
1899
 
        """See TestCaseWithMemoryTransport.makeAndChdirToTestDir().
 
186
    def _make_test_root(self):
 
187
        import os
 
188
        import shutil
 
189
        import tempfile
1900
190
        
1901
 
        For TestCaseInTempDir we create a temporary directory based on the test
1902
 
        name and then create two subdirs - test and home under it.
1903
 
        """
1904
 
        # create a directory within the top level test directory
1905
 
        candidate_dir = tempfile.mkdtemp(dir=self.TEST_ROOT)
1906
 
        # now create test and home directories within this dir
1907
 
        self.test_base_dir = candidate_dir
1908
 
        self.test_home_dir = self.test_base_dir + '/home'
1909
 
        os.mkdir(self.test_home_dir)
1910
 
        self.test_dir = self.test_base_dir + '/work'
 
191
        if TestCaseInTempDir.TEST_ROOT is not None:
 
192
            return
 
193
        TestCaseInTempDir.TEST_ROOT = os.path.abspath(
 
194
                                 tempfile.mkdtemp(suffix='.tmp',
 
195
                                                  prefix=self._TEST_NAME + '-',
 
196
                                                  dir=os.curdir))
 
197
    
 
198
        # make a fake bzr directory there to prevent any tests propagating
 
199
        # up onto the source directory's real branch
 
200
        os.mkdir(os.path.join(TestCaseInTempDir.TEST_ROOT, '.bzr'))
 
201
 
 
202
    def setUp(self):
 
203
        super(TestCaseInTempDir, self).setUp()
 
204
        import os
 
205
        self._make_test_root()
 
206
        self._currentdir = os.getcwdu()
 
207
        self.test_dir = os.path.join(self.TEST_ROOT, self.id())
1911
208
        os.mkdir(self.test_dir)
1912
209
        os.chdir(self.test_dir)
1913
 
        # put name of test inside
1914
 
        f = file(self.test_base_dir + '/name', 'w')
1915
 
        try:
1916
 
            f.write(self.id())
1917
 
        finally:
1918
 
            f.close()
1919
 
        self.addCleanup(self.deleteTestDir)
1920
 
 
1921
 
    def deleteTestDir(self):
1922
 
        os.chdir(self.TEST_ROOT)
1923
 
        _rmtree_temp_dir(self.test_base_dir)
1924
 
 
1925
 
    def build_tree(self, shape, line_endings='binary', transport=None):
 
210
        
 
211
    def tearDown(self):
 
212
        import os
 
213
        os.chdir(self._currentdir)
 
214
        super(TestCaseInTempDir, self).tearDown()
 
215
 
 
216
    def _formcmd(self, cmd):
 
217
        if isinstance(cmd, basestring):
 
218
            cmd = cmd.split()
 
219
        if cmd[0] == 'bzr':
 
220
            cmd[0] = self.BZRPATH
 
221
            if self.OVERRIDE_PYTHON:
 
222
                cmd.insert(0, self.OVERRIDE_PYTHON)
 
223
        self.log('$ %r' % cmd)
 
224
        return cmd
 
225
 
 
226
    def runcmd(self, cmd, retcode=0):
 
227
        """Run one command and check the return code.
 
228
 
 
229
        Returns a tuple of (stdout,stderr) strings.
 
230
 
 
231
        If a single string is based, it is split into words.
 
232
        For commands that are not simple space-separated words, please
 
233
        pass a list instead."""
 
234
        cmd = self._formcmd(cmd)
 
235
        self.log('$ ' + ' '.join(cmd))
 
236
        actual_retcode = subprocess.call(cmd, stdout=self._log_file,
 
237
                                         stderr=self._log_file)
 
238
        if retcode != actual_retcode:
 
239
            raise CommandFailed("test failed: %r returned %d, expected %d"
 
240
                                % (cmd, actual_retcode, retcode))
 
241
 
 
242
    def backtick(self, cmd, retcode=0):
 
243
        """Run a command and return its output"""
 
244
        cmd = self._formcmd(cmd)
 
245
        child = subprocess.Popen(cmd, stdout=subprocess.PIPE, stderr=self._log_file)
 
246
        outd, errd = child.communicate()
 
247
        self.log(outd)
 
248
        actual_retcode = child.wait()
 
249
 
 
250
        outd = outd.replace('\r', '')
 
251
 
 
252
        if retcode != actual_retcode:
 
253
            raise CommandFailed("test failed: %r returned %d, expected %d"
 
254
                                % (cmd, actual_retcode, retcode))
 
255
 
 
256
        return outd
 
257
 
 
258
 
 
259
 
 
260
    def build_tree(self, shape):
1926
261
        """Build a test tree according to a pattern.
1927
262
 
1928
263
        shape is a sequence of file specifications.  If the final
1929
264
        character is '/', a directory is created.
1930
265
 
1931
 
        This assumes that all the elements in the tree being built are new.
1932
 
 
1933
266
        This doesn't add anything to a branch.
1934
 
 
1935
 
        :param line_endings: Either 'binary' or 'native'
1936
 
            in binary mode, exact contents are written in native mode, the
1937
 
            line endings match the default platform endings.
1938
 
        :param transport: A transport to write to, for building trees on VFS's.
1939
 
            If the transport is readonly or None, "." is opened automatically.
1940
 
        :return: None
1941
267
        """
1942
 
        # It's OK to just create them using forward slashes on windows.
1943
 
        if transport is None or transport.is_readonly():
1944
 
            transport = get_transport(".")
 
268
        # XXX: It's OK to just create them using forward slashes on windows?
 
269
        import os
1945
270
        for name in shape:
1946
 
            self.assert_(isinstance(name, basestring))
 
271
            assert isinstance(name, basestring)
1947
272
            if name[-1] == '/':
1948
 
                transport.mkdir(urlutils.escape(name[:-1]))
1949
 
            else:
1950
 
                if line_endings == 'binary':
1951
 
                    end = '\n'
1952
 
                elif line_endings == 'native':
1953
 
                    end = os.linesep
1954
 
                else:
1955
 
                    raise errors.BzrError(
1956
 
                        'Invalid line ending request %r' % line_endings)
1957
 
                content = "contents of %s%s" % (name.encode('utf-8'), end)
1958
 
                transport.put_bytes_non_atomic(urlutils.escape(name), content)
1959
 
 
1960
 
    def build_tree_contents(self, shape):
1961
 
        build_tree_contents(shape)
1962
 
 
1963
 
    def assertFileEqual(self, content, path):
1964
 
        """Fail if path does not contain 'content'."""
1965
 
        self.failUnlessExists(path)
1966
 
        f = file(path, 'rb')
1967
 
        try:
1968
 
            s = f.read()
1969
 
        finally:
1970
 
            f.close()
1971
 
        self.assertEqualDiff(content, s)
1972
 
 
1973
 
    def failUnlessExists(self, path):
1974
 
        """Fail unless path or paths, which may be abs or relative, exist."""
1975
 
        if not isinstance(path, basestring):
1976
 
            for p in path:
1977
 
                self.failUnlessExists(p)
1978
 
        else:
1979
 
            self.failUnless(osutils.lexists(path),path+" does not exist")
1980
 
 
1981
 
    def failIfExists(self, path):
1982
 
        """Fail if path or paths, which may be abs or relative, exist."""
1983
 
        if not isinstance(path, basestring):
1984
 
            for p in path:
1985
 
                self.failIfExists(p)
1986
 
        else:
1987
 
            self.failIf(osutils.lexists(path),path+" exists")
1988
 
 
1989
 
    def assertInWorkingTree(self,path,root_path='.',tree=None):
1990
 
        """Assert whether path or paths are in the WorkingTree"""
1991
 
        if tree is None:
1992
 
            tree = workingtree.WorkingTree.open(root_path)
1993
 
        if not isinstance(path, basestring):
1994
 
            for p in path:
1995
 
                self.assertInWorkingTree(p,tree=tree)
1996
 
        else:
1997
 
            self.assertIsNot(tree.path2id(path), None,
1998
 
                path+' not in working tree.')
1999
 
 
2000
 
    def assertNotInWorkingTree(self,path,root_path='.',tree=None):
2001
 
        """Assert whether path or paths are not in the WorkingTree"""
2002
 
        if tree is None:
2003
 
            tree = workingtree.WorkingTree.open(root_path)
2004
 
        if not isinstance(path, basestring):
2005
 
            for p in path:
2006
 
                self.assertNotInWorkingTree(p,tree=tree)
2007
 
        else:
2008
 
            self.assertIs(tree.path2id(path), None, path+' in working tree.')
2009
 
 
2010
 
 
2011
 
class TestCaseWithTransport(TestCaseInTempDir):
2012
 
    """A test case that provides get_url and get_readonly_url facilities.
2013
 
 
2014
 
    These back onto two transport servers, one for readonly access and one for
2015
 
    read write access.
2016
 
 
2017
 
    If no explicit class is provided for readonly access, a
2018
 
    ReadonlyTransportDecorator is used instead which allows the use of non disk
2019
 
    based read write transports.
2020
 
 
2021
 
    If an explicit class is provided for readonly access, that server and the 
2022
 
    readwrite one must both define get_url() as resolving to os.getcwd().
2023
 
    """
2024
 
 
2025
 
    def get_vfs_only_server(self):
2026
 
        """See TestCaseWithMemoryTransport.
2027
 
 
2028
 
        This is useful for some tests with specific servers that need
2029
 
        diagnostics.
2030
 
        """
2031
 
        if self.__vfs_server is None:
2032
 
            self.__vfs_server = self.vfs_transport_factory()
2033
 
            self.__vfs_server.setUp()
2034
 
            self.addCleanup(self.__vfs_server.tearDown)
2035
 
        return self.__vfs_server
2036
 
 
2037
 
    def make_branch_and_tree(self, relpath, format=None):
2038
 
        """Create a branch on the transport and a tree locally.
2039
 
 
2040
 
        If the transport is not a LocalTransport, the Tree can't be created on
2041
 
        the transport.  In that case if the vfs_transport_factory is
2042
 
        LocalURLServer the working tree is created in the local
2043
 
        directory backing the transport, and the returned tree's branch and
2044
 
        repository will also be accessed locally. Otherwise a lightweight
2045
 
        checkout is created and returned.
2046
 
 
2047
 
        :param format: The BzrDirFormat.
2048
 
        :returns: the WorkingTree.
2049
 
        """
2050
 
        # TODO: always use the local disk path for the working tree,
2051
 
        # this obviously requires a format that supports branch references
2052
 
        # so check for that by checking bzrdir.BzrDirFormat.get_default_format()
2053
 
        # RBC 20060208
2054
 
        b = self.make_branch(relpath, format=format)
2055
 
        try:
2056
 
            return b.bzrdir.create_workingtree()
2057
 
        except errors.NotLocalUrl:
2058
 
            # We can only make working trees locally at the moment.  If the
2059
 
            # transport can't support them, then we keep the non-disk-backed
2060
 
            # branch and create a local checkout.
2061
 
            if self.vfs_transport_factory is LocalURLServer:
2062
 
                # the branch is colocated on disk, we cannot create a checkout.
2063
 
                # hopefully callers will expect this.
2064
 
                local_controldir= bzrdir.BzrDir.open(self.get_vfs_only_url(relpath))
2065
 
                return local_controldir.create_workingtree()
2066
 
            else:
2067
 
                return b.create_checkout(relpath, lightweight=True)
2068
 
 
2069
 
    def assertIsDirectory(self, relpath, transport):
2070
 
        """Assert that relpath within transport is a directory.
2071
 
 
2072
 
        This may not be possible on all transports; in that case it propagates
2073
 
        a TransportNotPossible.
2074
 
        """
2075
 
        try:
2076
 
            mode = transport.stat(relpath).st_mode
2077
 
        except errors.NoSuchFile:
2078
 
            self.fail("path %s is not a directory; no such file"
2079
 
                      % (relpath))
2080
 
        if not stat.S_ISDIR(mode):
2081
 
            self.fail("path %s is not a directory; has mode %#o"
2082
 
                      % (relpath, mode))
2083
 
 
2084
 
    def assertTreesEqual(self, left, right):
2085
 
        """Check that left and right have the same content and properties."""
2086
 
        # we use a tree delta to check for equality of the content, and we
2087
 
        # manually check for equality of other things such as the parents list.
2088
 
        self.assertEqual(left.get_parent_ids(), right.get_parent_ids())
2089
 
        differences = left.changes_from(right)
2090
 
        self.assertFalse(differences.has_changed(),
2091
 
            "Trees %r and %r are different: %r" % (left, right, differences))
2092
 
 
2093
 
    def setUp(self):
2094
 
        super(TestCaseWithTransport, self).setUp()
2095
 
        self.__vfs_server = None
2096
 
 
2097
 
 
2098
 
class ChrootedTestCase(TestCaseWithTransport):
2099
 
    """A support class that provides readonly urls outside the local namespace.
2100
 
 
2101
 
    This is done by checking if self.transport_server is a MemoryServer. if it
2102
 
    is then we are chrooted already, if it is not then an HttpServer is used
2103
 
    for readonly urls.
2104
 
 
2105
 
    TODO RBC 20060127: make this an option to TestCaseWithTransport so it can
2106
 
                       be used without needed to redo it when a different 
2107
 
                       subclass is in use ?
2108
 
    """
2109
 
 
2110
 
    def setUp(self):
2111
 
        super(ChrootedTestCase, self).setUp()
2112
 
        if not self.vfs_transport_factory == MemoryServer:
2113
 
            self.transport_readonly_server = HttpServer
2114
 
 
2115
 
 
2116
 
def filter_suite_by_re(suite, pattern, exclude_pattern=None,
2117
 
                       random_order=False):
2118
 
    """Create a test suite by filtering another one.
2119
 
    
2120
 
    :param suite:           the source suite
2121
 
    :param pattern:         pattern that names must match
2122
 
    :param exclude_pattern: pattern that names must not match, if any
2123
 
    :param random_order:    if True, tests in the new suite will be put in
2124
 
                            random order
2125
 
    :returns: the newly created suite
2126
 
    """ 
2127
 
    return sort_suite_by_re(suite, pattern, exclude_pattern,
2128
 
        random_order, False)
2129
 
 
2130
 
 
2131
 
def sort_suite_by_re(suite, pattern, exclude_pattern=None,
2132
 
                     random_order=False, append_rest=True):
2133
 
    """Create a test suite by sorting another one.
2134
 
    
2135
 
    :param suite:           the source suite
2136
 
    :param pattern:         pattern that names must match in order to go
2137
 
                            first in the new suite
2138
 
    :param exclude_pattern: pattern that names must not match, if any
2139
 
    :param random_order:    if True, tests in the new suite will be put in
2140
 
                            random order
2141
 
    :param append_rest:     if False, pattern is a strict filter and not
2142
 
                            just an ordering directive
2143
 
    :returns: the newly created suite
2144
 
    """ 
2145
 
    first = []
2146
 
    second = []
2147
 
    filter_re = re.compile(pattern)
2148
 
    if exclude_pattern is not None:
2149
 
        exclude_re = re.compile(exclude_pattern)
2150
 
    for test in iter_suite_tests(suite):
2151
 
        test_id = test.id()
2152
 
        if exclude_pattern is None or not exclude_re.search(test_id):
2153
 
            if filter_re.search(test_id):
2154
 
                first.append(test)
2155
 
            elif append_rest:
2156
 
                second.append(test)
2157
 
    if random_order:
2158
 
        random.shuffle(first)
2159
 
        random.shuffle(second)
2160
 
    return TestUtil.TestSuite(first + second)
2161
 
 
2162
 
 
2163
 
def run_suite(suite, name='test', verbose=False, pattern=".*",
2164
 
              stop_on_failure=False,
2165
 
              transport=None, lsprof_timed=None, bench_history=None,
2166
 
              matching_tests_first=None,
2167
 
              numbered_dirs=None,
2168
 
              list_only=False,
2169
 
              random_seed=None,
2170
 
              exclude_pattern=None,
2171
 
              ):
2172
 
    use_numbered_dirs = bool(numbered_dirs)
2173
 
 
2174
 
    TestCase._gather_lsprof_in_benchmarks = lsprof_timed
2175
 
    if numbered_dirs is not None:
2176
 
        TestCaseInTempDir.use_numbered_dirs = use_numbered_dirs
2177
 
    if verbose:
2178
 
        verbosity = 2
2179
 
    else:
2180
 
        verbosity = 1
2181
 
    runner = TextTestRunner(stream=sys.stdout,
2182
 
                            descriptions=0,
2183
 
                            verbosity=verbosity,
2184
 
                            bench_history=bench_history,
2185
 
                            use_numbered_dirs=use_numbered_dirs,
2186
 
                            list_only=list_only,
2187
 
                            )
2188
 
    runner.stop_on_failure=stop_on_failure
2189
 
    # Initialise the random number generator and display the seed used.
2190
 
    # We convert the seed to a long to make it reuseable across invocations.
2191
 
    random_order = False
2192
 
    if random_seed is not None:
2193
 
        random_order = True
2194
 
        if random_seed == "now":
2195
 
            random_seed = long(time.time())
2196
 
        else:
2197
 
            # Convert the seed to a long if we can
2198
 
            try:
2199
 
                random_seed = long(random_seed)
2200
 
            except:
2201
 
                pass
2202
 
        runner.stream.writeln("Randomizing test order using seed %s\n" %
2203
 
            (random_seed))
2204
 
        random.seed(random_seed)
2205
 
    # Customise the list of tests if requested
2206
 
    if pattern != '.*' or exclude_pattern is not None or random_order:
2207
 
        if matching_tests_first:
2208
 
            suite = sort_suite_by_re(suite, pattern, exclude_pattern,
2209
 
                random_order)
2210
 
        else:
2211
 
            suite = filter_suite_by_re(suite, pattern, exclude_pattern,
2212
 
                random_order)
2213
 
    result = runner.run(suite)
2214
 
    return result.wasSuccessful()
2215
 
 
2216
 
 
2217
 
def selftest(verbose=False, pattern=".*", stop_on_failure=True,
2218
 
             transport=None,
2219
 
             test_suite_factory=None,
2220
 
             lsprof_timed=None,
2221
 
             bench_history=None,
2222
 
             matching_tests_first=None,
2223
 
             numbered_dirs=None,
2224
 
             list_only=False,
2225
 
             random_seed=None,
2226
 
             exclude_pattern=None):
2227
 
    """Run the whole test suite under the enhanced runner"""
2228
 
    # XXX: Very ugly way to do this...
2229
 
    # Disable warning about old formats because we don't want it to disturb
2230
 
    # any blackbox tests.
2231
 
    from bzrlib import repository
2232
 
    repository._deprecation_warning_done = True
2233
 
 
2234
 
    global default_transport
2235
 
    if transport is None:
2236
 
        transport = default_transport
2237
 
    old_transport = default_transport
2238
 
    default_transport = transport
2239
 
    try:
2240
 
        if test_suite_factory is None:
2241
 
            suite = test_suite()
2242
 
        else:
2243
 
            suite = test_suite_factory()
2244
 
        return run_suite(suite, 'testbzr', verbose=verbose, pattern=pattern,
2245
 
                     stop_on_failure=stop_on_failure,
2246
 
                     transport=transport,
2247
 
                     lsprof_timed=lsprof_timed,
2248
 
                     bench_history=bench_history,
2249
 
                     matching_tests_first=matching_tests_first,
2250
 
                     numbered_dirs=numbered_dirs,
2251
 
                     list_only=list_only,
2252
 
                     random_seed=random_seed,
2253
 
                     exclude_pattern=exclude_pattern)
2254
 
    finally:
2255
 
        default_transport = old_transport
 
273
                os.mkdir(name[:-1])
 
274
            else:
 
275
                f = file(name, 'wt')
 
276
                print >>f, "contents of", name
 
277
                f.close()
 
278
                
 
279
 
 
280
 
 
281
class MetaTestLog(TestCase):
 
282
    def test_logging(self):
 
283
        """Test logs are captured when a test fails."""
 
284
        logging.info('an info message')
 
285
        warning('something looks dodgy...')
 
286
        logging.debug('hello, test is running')
 
287
        ##assert 0
 
288
 
 
289
 
 
290
def selftest(verbose=False, pattern=".*"):
 
291
    return run_suite(test_suite(), 'testbzr', verbose=verbose, pattern=pattern)
2256
292
 
2257
293
 
2258
294
def test_suite():
2259
 
    """Build and return TestSuite for the whole of bzrlib.
2260
 
    
2261
 
    This function can be replaced if you need to change the default test
2262
 
    suite on a global basis, but it is not encouraged.
2263
 
    """
2264
 
    testmod_names = [
2265
 
                   'bzrlib.tests.test_ancestry',
2266
 
                   'bzrlib.tests.test_annotate',
2267
 
                   'bzrlib.tests.test_api',
2268
 
                   'bzrlib.tests.test_atomicfile',
2269
 
                   'bzrlib.tests.test_bad_files',
2270
 
                   'bzrlib.tests.test_branch',
2271
 
                   'bzrlib.tests.test_branchbuilder',
2272
 
                   'bzrlib.tests.test_bugtracker',
2273
 
                   'bzrlib.tests.test_bundle',
2274
 
                   'bzrlib.tests.test_bzrdir',
2275
 
                   'bzrlib.tests.test_cache_utf8',
2276
 
                   'bzrlib.tests.test_commands',
2277
 
                   'bzrlib.tests.test_commit',
2278
 
                   'bzrlib.tests.test_commit_merge',
2279
 
                   'bzrlib.tests.test_config',
2280
 
                   'bzrlib.tests.test_conflicts',
2281
 
                   'bzrlib.tests.test_pack',
2282
 
                   'bzrlib.tests.test_counted_lock',
2283
 
                   'bzrlib.tests.test_decorators',
2284
 
                   'bzrlib.tests.test_delta',
2285
 
                   'bzrlib.tests.test_deprecated_graph',
2286
 
                   'bzrlib.tests.test_diff',
2287
 
                   'bzrlib.tests.test_dirstate',
2288
 
                   'bzrlib.tests.test_errors',
2289
 
                   'bzrlib.tests.test_escaped_store',
2290
 
                   'bzrlib.tests.test_extract',
2291
 
                   'bzrlib.tests.test_fetch',
2292
 
                   'bzrlib.tests.test_ftp_transport',
2293
 
                   'bzrlib.tests.test_generate_docs',
2294
 
                   'bzrlib.tests.test_generate_ids',
2295
 
                   'bzrlib.tests.test_globbing',
2296
 
                   'bzrlib.tests.test_gpg',
2297
 
                   'bzrlib.tests.test_graph',
2298
 
                   'bzrlib.tests.test_hashcache',
2299
 
                   'bzrlib.tests.test_help',
2300
 
                   'bzrlib.tests.test_hooks',
2301
 
                   'bzrlib.tests.test_http',
2302
 
                   'bzrlib.tests.test_http_response',
2303
 
                   'bzrlib.tests.test_https_ca_bundle',
2304
 
                   'bzrlib.tests.test_identitymap',
2305
 
                   'bzrlib.tests.test_ignores',
2306
 
                   'bzrlib.tests.test_info',
2307
 
                   'bzrlib.tests.test_inv',
2308
 
                   'bzrlib.tests.test_knit',
2309
 
                   'bzrlib.tests.test_lazy_import',
2310
 
                   'bzrlib.tests.test_lazy_regex',
2311
 
                   'bzrlib.tests.test_lockdir',
2312
 
                   'bzrlib.tests.test_lockable_files',
2313
 
                   'bzrlib.tests.test_log',
2314
 
                   'bzrlib.tests.test_lsprof',
2315
 
                   'bzrlib.tests.test_memorytree',
2316
 
                   'bzrlib.tests.test_merge',
2317
 
                   'bzrlib.tests.test_merge3',
2318
 
                   'bzrlib.tests.test_merge_core',
2319
 
                   'bzrlib.tests.test_merge_directive',
2320
 
                   'bzrlib.tests.test_missing',
2321
 
                   'bzrlib.tests.test_msgeditor',
2322
 
                   'bzrlib.tests.test_nonascii',
2323
 
                   'bzrlib.tests.test_options',
2324
 
                   'bzrlib.tests.test_osutils',
2325
 
                   'bzrlib.tests.test_osutils_encodings',
2326
 
                   'bzrlib.tests.test_patch',
2327
 
                   'bzrlib.tests.test_patches',
2328
 
                   'bzrlib.tests.test_permissions',
2329
 
                   'bzrlib.tests.test_plugins',
2330
 
                   'bzrlib.tests.test_progress',
2331
 
                   'bzrlib.tests.test_reconcile',
2332
 
                   'bzrlib.tests.test_registry',
2333
 
                   'bzrlib.tests.test_remote',
2334
 
                   'bzrlib.tests.test_repository',
2335
 
                   'bzrlib.tests.test_revert',
2336
 
                   'bzrlib.tests.test_revision',
2337
 
                   'bzrlib.tests.test_revisionnamespaces',
2338
 
                   'bzrlib.tests.test_revisiontree',
2339
 
                   'bzrlib.tests.test_rio',
2340
 
                   'bzrlib.tests.test_sampler',
2341
 
                   'bzrlib.tests.test_selftest',
2342
 
                   'bzrlib.tests.test_setup',
2343
 
                   'bzrlib.tests.test_sftp_transport',
2344
 
                   'bzrlib.tests.test_smart',
2345
 
                   'bzrlib.tests.test_smart_add',
2346
 
                   'bzrlib.tests.test_smart_transport',
2347
 
                   'bzrlib.tests.test_smtp_connection',
2348
 
                   'bzrlib.tests.test_source',
2349
 
                   'bzrlib.tests.test_ssh_transport',
2350
 
                   'bzrlib.tests.test_status',
2351
 
                   'bzrlib.tests.test_store',
2352
 
                   'bzrlib.tests.test_strace',
2353
 
                   'bzrlib.tests.test_subsume',
2354
 
                   'bzrlib.tests.test_symbol_versioning',
2355
 
                   'bzrlib.tests.test_tag',
2356
 
                   'bzrlib.tests.test_testament',
2357
 
                   'bzrlib.tests.test_textfile',
2358
 
                   'bzrlib.tests.test_textmerge',
2359
 
                   'bzrlib.tests.test_timestamp',
2360
 
                   'bzrlib.tests.test_trace',
2361
 
                   'bzrlib.tests.test_transactions',
2362
 
                   'bzrlib.tests.test_transform',
2363
 
                   'bzrlib.tests.test_transport',
2364
 
                   'bzrlib.tests.test_tree',
2365
 
                   'bzrlib.tests.test_treebuilder',
2366
 
                   'bzrlib.tests.test_tsort',
2367
 
                   'bzrlib.tests.test_tuned_gzip',
2368
 
                   'bzrlib.tests.test_ui',
2369
 
                   'bzrlib.tests.test_upgrade',
2370
 
                   'bzrlib.tests.test_urlutils',
2371
 
                   'bzrlib.tests.test_versionedfile',
2372
 
                   'bzrlib.tests.test_version',
2373
 
                   'bzrlib.tests.test_version_info',
2374
 
                   'bzrlib.tests.test_weave',
2375
 
                   'bzrlib.tests.test_whitebox',
2376
 
                   'bzrlib.tests.test_workingtree',
2377
 
                   'bzrlib.tests.test_workingtree_4',
2378
 
                   'bzrlib.tests.test_wsgi',
2379
 
                   'bzrlib.tests.test_xml',
 
295
    from bzrlib.selftest.TestUtil import TestLoader, TestSuite
 
296
    import bzrlib, bzrlib.store, bzrlib.inventory, bzrlib.branch
 
297
    import bzrlib.osutils, bzrlib.commands, bzrlib.merge3, bzrlib.plugin
 
298
    from doctest import DocTestSuite
 
299
    import os
 
300
    import shutil
 
301
    import time
 
302
    import sys
 
303
 
 
304
    global MODULES_TO_TEST, MODULES_TO_DOCTEST
 
305
 
 
306
    testmod_names = \
 
307
                  ['bzrlib.selftest.MetaTestLog',
 
308
                   'bzrlib.selftest.test_parent',
 
309
                   'bzrlib.selftest.testinv',
 
310
                   'bzrlib.selftest.testfetch',
 
311
                   'bzrlib.selftest.versioning',
 
312
                   'bzrlib.selftest.whitebox',
 
313
                   'bzrlib.selftest.testmerge3',
 
314
                   'bzrlib.selftest.testhashcache',
 
315
                   'bzrlib.selftest.teststatus',
 
316
                   'bzrlib.selftest.testlog',
 
317
                   'bzrlib.selftest.blackbox',
 
318
                   'bzrlib.selftest.testrevisionnamespaces',
 
319
                   'bzrlib.selftest.testbranch',
 
320
                   'bzrlib.selftest.testrevision',
 
321
                   'bzrlib.selftest.test_merge_core',
 
322
                   'bzrlib.selftest.test_smart_add',
 
323
                   'bzrlib.selftest.testdiff',
 
324
                   'bzrlib.selftest.test_xml',
 
325
                   'bzrlib.fetch',
 
326
                   'bzrlib.selftest.teststore',
2380
327
                   ]
2381
 
    test_transport_implementations = [
2382
 
        'bzrlib.tests.test_transport_implementations',
2383
 
        'bzrlib.tests.test_read_bundle',
2384
 
        ]
2385
 
    suite = TestUtil.TestSuite()
2386
 
    loader = TestUtil.TestLoader()
2387
 
    suite.addTest(loader.loadTestsFromModuleNames(testmod_names))
2388
 
    from bzrlib.tests.test_transport_implementations import TransportTestProviderAdapter
2389
 
    adapter = TransportTestProviderAdapter()
2390
 
    adapt_modules(test_transport_implementations, adapter, loader, suite)
2391
 
    for package in packages_to_test():
2392
 
        suite.addTest(package.test_suite())
 
328
 
 
329
    for m in (bzrlib.store, bzrlib.inventory, bzrlib.branch,
 
330
              bzrlib.osutils, bzrlib.commands, bzrlib.merge3):
 
331
        if m not in MODULES_TO_DOCTEST:
 
332
            MODULES_TO_DOCTEST.append(m)
 
333
 
 
334
    TestCase.BZRPATH = os.path.join(os.path.realpath(os.path.dirname(bzrlib.__path__[0])), 'bzr')
 
335
    print '%-30s %s' % ('bzr binary', TestCase.BZRPATH)
 
336
    print
 
337
    suite = TestSuite()
 
338
    suite.addTest(TestLoader().loadTestsFromNames(testmod_names))
2393
339
    for m in MODULES_TO_TEST:
2394
 
        suite.addTest(loader.loadTestsFromModule(m))
2395
 
    for m in MODULES_TO_DOCTEST:
2396
 
        try:
2397
 
            suite.addTest(doctest.DocTestSuite(m))
2398
 
        except ValueError, e:
2399
 
            print '**failed to get doctest for: %s\n%s' %(m,e)
2400
 
            raise
2401
 
    for name, plugin in bzrlib.plugin.all_plugins().items():
2402
 
        if getattr(plugin, 'test_suite', None) is not None:
2403
 
            default_encoding = sys.getdefaultencoding()
2404
 
            try:
2405
 
                plugin_suite = plugin.test_suite()
2406
 
            except ImportError, e:
2407
 
                bzrlib.trace.warning(
2408
 
                    'Unable to test plugin "%s": %s', name, e)
2409
 
            else:
2410
 
                suite.addTest(plugin_suite)
2411
 
            if default_encoding != sys.getdefaultencoding():
2412
 
                bzrlib.trace.warning(
2413
 
                    'Plugin "%s" tried to reset default encoding to: %s', name,
2414
 
                    sys.getdefaultencoding())
2415
 
                reload(sys)
2416
 
                sys.setdefaultencoding(default_encoding)
 
340
         suite.addTest(TestLoader().loadTestsFromModule(m))
 
341
    for m in (MODULES_TO_DOCTEST):
 
342
        suite.addTest(DocTestSuite(m))
 
343
    for p in bzrlib.plugin.all_plugins:
 
344
        if hasattr(p, 'test_suite'):
 
345
            suite.addTest(p.test_suite())
2417
346
    return suite
2418
347
 
2419
 
 
2420
 
def adapt_modules(mods_list, adapter, loader, suite):
2421
 
    """Adapt the modules in mods_list using adapter and add to suite."""
2422
 
    for test in iter_suite_tests(loader.loadTestsFromModuleNames(mods_list)):
2423
 
        suite.addTests(adapter.adapt(test))
2424
 
 
2425
 
 
2426
 
def _rmtree_temp_dir(dirname):
2427
 
    # If LANG=C we probably have created some bogus paths
2428
 
    # which rmtree(unicode) will fail to delete
2429
 
    # so make sure we are using rmtree(str) to delete everything
2430
 
    # except on win32, where rmtree(str) will fail
2431
 
    # since it doesn't have the property of byte-stream paths
2432
 
    # (they are either ascii or mbcs)
2433
 
    if sys.platform == 'win32':
2434
 
        # make sure we are using the unicode win32 api
2435
 
        dirname = unicode(dirname)
2436
 
    else:
2437
 
        dirname = dirname.encode(sys.getfilesystemencoding())
2438
 
    try:
2439
 
        osutils.rmtree(dirname)
2440
 
    except OSError, e:
2441
 
        if sys.platform == 'win32' and e.errno == errno.EACCES:
2442
 
            print >>sys.stderr, ('Permission denied: '
2443
 
                                 'unable to remove testing dir '
2444
 
                                 '%s' % os.path.basename(dirname))
2445
 
        else:
2446
 
            raise
2447
 
 
2448
 
 
2449
 
def clean_selftest_output(root=None, quiet=False):
2450
 
    """Remove all selftest output directories from root directory.
2451
 
 
2452
 
    :param  root:   root directory for clean
2453
 
                    (if ommitted or None then clean current directory).
2454
 
    :param  quiet:  suppress report about deleting directories
2455
 
    """
2456
 
    import re
2457
 
    re_dir = re.compile(r'''test\d\d\d\d\.tmp''')
2458
 
    if root is None:
2459
 
        root = u'.'
2460
 
    for i in os.listdir(root):
2461
 
        if os.path.isdir(i) and re_dir.match(i):
2462
 
            if not quiet:
2463
 
                print 'delete directory:', i
2464
 
            _rmtree_temp_dir(i)
2465
 
 
2466
 
 
2467
 
class Feature(object):
2468
 
    """An operating system Feature."""
2469
 
 
2470
 
    def __init__(self):
2471
 
        self._available = None
2472
 
 
2473
 
    def available(self):
2474
 
        """Is the feature available?
2475
 
 
2476
 
        :return: True if the feature is available.
2477
 
        """
2478
 
        if self._available is None:
2479
 
            self._available = self._probe()
2480
 
        return self._available
2481
 
 
2482
 
    def _probe(self):
2483
 
        """Implement this method in concrete features.
2484
 
 
2485
 
        :return: True if the feature is available.
2486
 
        """
2487
 
        raise NotImplementedError
2488
 
 
2489
 
    def __str__(self):
2490
 
        if getattr(self, 'feature_name', None):
2491
 
            return self.feature_name()
2492
 
        return self.__class__.__name__
2493
 
 
2494
 
 
2495
 
class TestScenarioApplier(object):
2496
 
    """A tool to apply scenarios to tests."""
2497
 
 
2498
 
    def adapt(self, test):
2499
 
        """Return a TestSuite containing a copy of test for each scenario."""
2500
 
        result = unittest.TestSuite()
2501
 
        for scenario in self.scenarios:
2502
 
            result.addTest(self.adapt_test_to_scenario(test, scenario))
2503
 
        return result
2504
 
 
2505
 
    def adapt_test_to_scenario(self, test, scenario):
2506
 
        """Copy test and apply scenario to it.
2507
 
 
2508
 
        :param test: A test to adapt.
2509
 
        :param scenario: A tuple describing the scenarion.
2510
 
            The first element of the tuple is the new test id.
2511
 
            The second element is a dict containing attributes to set on the
2512
 
            test.
2513
 
        :return: The adapted test.
2514
 
        """
2515
 
        from copy import deepcopy
2516
 
        new_test = deepcopy(test)
2517
 
        for name, value in scenario[1].items():
2518
 
            setattr(new_test, name, value)
2519
 
        new_id = "%s(%s)" % (new_test.id(), scenario[0])
2520
 
        new_test.id = lambda: new_id
2521
 
        return new_test