~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/tests/test_osutils.py

  • Committer: Martin Albisetti
  • Date: 2008-05-06 00:21:18 UTC
  • mto: (3431.1.1 integration)
  • mto: This revision was merged to the branch mainline in revision 3432.
  • Revision ID: argentina@gmail.com-20080506002118-7w9ywklw4khddf3g
Added spanish index

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005-2010 Canonical Ltd
 
1
# Copyright (C) 2005, 2006, 2007 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
"""Tests for the osutils wrapper."""
18
18
 
19
 
from cStringIO import StringIO
20
19
import errno
21
20
import os
22
 
import re
23
21
import socket
24
22
import stat
25
23
import sys
26
 
import time
27
24
 
 
25
import bzrlib
28
26
from bzrlib import (
29
27
    errors,
30
 
    lazy_regex,
31
28
    osutils,
32
 
    symbol_versioning,
33
 
    tests,
34
 
    trace,
35
29
    win32utils,
36
30
    )
 
31
from bzrlib.errors import BzrBadParameterNotUnicode, InvalidURL
 
32
from bzrlib.osutils import (
 
33
        is_inside_any,
 
34
        is_inside_or_parent_of_any,
 
35
        pathjoin,
 
36
        )
37
37
from bzrlib.tests import (
38
 
    features,
39
 
    file_utils,
40
 
    test__walkdirs_win32,
41
 
    )
42
 
 
43
 
 
44
 
class _UTF8DirReaderFeature(tests.Feature):
45
 
 
46
 
    def _probe(self):
47
 
        try:
48
 
            from bzrlib import _readdir_pyx
49
 
            self.reader = _readdir_pyx.UTF8DirReader
50
 
            return True
51
 
        except ImportError:
52
 
            return False
53
 
 
54
 
    def feature_name(self):
55
 
        return 'bzrlib._readdir_pyx'
56
 
 
57
 
UTF8DirReaderFeature = _UTF8DirReaderFeature()
58
 
 
59
 
term_ios_feature = tests.ModuleAvailableFeature('termios')
60
 
 
61
 
 
62
 
def _already_unicode(s):
63
 
    return s
64
 
 
65
 
 
66
 
def _utf8_to_unicode(s):
67
 
    return s.decode('UTF-8')
68
 
 
69
 
 
70
 
def dir_reader_scenarios():
71
 
    # For each dir reader we define:
72
 
 
73
 
    # - native_to_unicode: a function converting the native_abspath as returned
74
 
    #   by DirReader.read_dir to its unicode representation
75
 
 
76
 
    # UnicodeDirReader is the fallback, it should be tested on all platforms.
77
 
    scenarios = [('unicode',
78
 
                  dict(_dir_reader_class=osutils.UnicodeDirReader,
79
 
                       _native_to_unicode=_already_unicode))]
80
 
    # Some DirReaders are platform specific and even there they may not be
81
 
    # available.
82
 
    if UTF8DirReaderFeature.available():
83
 
        from bzrlib import _readdir_pyx
84
 
        scenarios.append(('utf8',
85
 
                          dict(_dir_reader_class=_readdir_pyx.UTF8DirReader,
86
 
                               _native_to_unicode=_utf8_to_unicode)))
87
 
 
88
 
    if test__walkdirs_win32.win32_readdir_feature.available():
89
 
        try:
90
 
            from bzrlib import _walkdirs_win32
91
 
            scenarios.append(
92
 
                ('win32',
93
 
                 dict(_dir_reader_class=_walkdirs_win32.Win32ReadDir,
94
 
                      _native_to_unicode=_already_unicode)))
95
 
        except ImportError:
96
 
            pass
97
 
    return scenarios
98
 
 
99
 
 
100
 
def load_tests(basic_tests, module, loader):
101
 
    suite = loader.suiteClass()
102
 
    dir_reader_tests, remaining_tests = tests.split_suite_by_condition(
103
 
        basic_tests, tests.condition_isinstance(TestDirReader))
104
 
    tests.multiply_tests(dir_reader_tests, dir_reader_scenarios(), suite)
105
 
    suite.addTest(remaining_tests)
106
 
    return suite
107
 
 
108
 
 
109
 
class TestContainsWhitespace(tests.TestCase):
 
38
        probe_unicode_in_user_encoding,
 
39
        StringIOWrapper,
 
40
        SymlinkFeature,
 
41
        TestCase,
 
42
        TestCaseInTempDir,
 
43
        TestSkipped,
 
44
        )
 
45
 
 
46
 
 
47
class TestOSUtils(TestCaseInTempDir):
110
48
 
111
49
    def test_contains_whitespace(self):
112
50
        self.failUnless(osutils.contains_whitespace(u' '))
122
60
        self.failIf(osutils.contains_whitespace(u'hellothere'))
123
61
        self.failIf(osutils.contains_whitespace(u'hello\xa0there'))
124
62
 
125
 
 
126
 
class TestRename(tests.TestCaseInTempDir):
127
 
 
128
 
    def create_file(self, filename, content):
129
 
        f = open(filename, 'wb')
130
 
        try:
131
 
            f.write(content)
132
 
        finally:
133
 
            f.close()
134
 
 
135
 
    def _fancy_rename(self, a, b):
136
 
        osutils.fancy_rename(a, b, rename_func=os.rename,
137
 
                             unlink_func=os.unlink)
138
 
 
139
63
    def test_fancy_rename(self):
140
64
        # This should work everywhere
141
 
        self.create_file('a', 'something in a\n')
142
 
        self._fancy_rename('a', 'b')
 
65
        def rename(a, b):
 
66
            osutils.fancy_rename(a, b,
 
67
                    rename_func=os.rename,
 
68
                    unlink_func=os.unlink)
 
69
 
 
70
        open('a', 'wb').write('something in a\n')
 
71
        rename('a', 'b')
143
72
        self.failIfExists('a')
144
73
        self.failUnlessExists('b')
145
74
        self.check_file_contents('b', 'something in a\n')
146
75
 
147
 
        self.create_file('a', 'new something in a\n')
148
 
        self._fancy_rename('b', 'a')
 
76
        open('a', 'wb').write('new something in a\n')
 
77
        rename('b', 'a')
149
78
 
150
79
        self.check_file_contents('a', 'something in a\n')
151
80
 
152
 
    def test_fancy_rename_fails_source_missing(self):
153
 
        # An exception should be raised, and the target should be left in place
154
 
        self.create_file('target', 'data in target\n')
155
 
        self.assertRaises((IOError, OSError), self._fancy_rename,
156
 
                          'missingsource', 'target')
157
 
        self.failUnlessExists('target')
158
 
        self.check_file_contents('target', 'data in target\n')
159
 
 
160
 
    def test_fancy_rename_fails_if_source_and_target_missing(self):
161
 
        self.assertRaises((IOError, OSError), self._fancy_rename,
162
 
                          'missingsource', 'missingtarget')
163
 
 
164
81
    def test_rename(self):
165
82
        # Rename should be semi-atomic on all platforms
166
 
        self.create_file('a', 'something in a\n')
 
83
        open('a', 'wb').write('something in a\n')
167
84
        osutils.rename('a', 'b')
168
85
        self.failIfExists('a')
169
86
        self.failUnlessExists('b')
170
87
        self.check_file_contents('b', 'something in a\n')
171
88
 
172
 
        self.create_file('a', 'new something in a\n')
 
89
        open('a', 'wb').write('new something in a\n')
173
90
        osutils.rename('b', 'a')
174
91
 
175
92
        self.check_file_contents('a', 'something in a\n')
186
103
        shape = sorted(os.listdir('.'))
187
104
        self.assertEquals(['A', 'B'], shape)
188
105
 
189
 
 
190
 
class TestRandChars(tests.TestCase):
191
 
 
192
106
    def test_01_rand_chars_empty(self):
193
107
        result = osutils.rand_chars(0)
194
108
        self.assertEqual(result, '')
199
113
        self.assertEqual(type(result), str)
200
114
        self.assertContainsRe(result, r'^[a-z0-9]{100}$')
201
115
 
202
 
 
203
 
class TestIsInside(tests.TestCase):
204
 
 
205
116
    def test_is_inside(self):
206
117
        is_inside = osutils.is_inside
207
118
        self.assertTrue(is_inside('src', 'src/foo.c'))
212
123
        self.assertTrue(is_inside('', 'foo.c'))
213
124
 
214
125
    def test_is_inside_any(self):
215
 
        SRC_FOO_C = osutils.pathjoin('src', 'foo.c')
 
126
        SRC_FOO_C = pathjoin('src', 'foo.c')
216
127
        for dirs, fn in [(['src', 'doc'], SRC_FOO_C),
217
128
                         (['src'], SRC_FOO_C),
218
129
                         (['src'], 'src'),
219
130
                         ]:
220
 
            self.assert_(osutils.is_inside_any(dirs, fn))
 
131
            self.assert_(is_inside_any(dirs, fn))
221
132
        for dirs, fn in [(['src'], 'srccontrol'),
222
133
                         (['src'], 'srccontrol/foo')]:
223
 
            self.assertFalse(osutils.is_inside_any(dirs, fn))
 
134
            self.assertFalse(is_inside_any(dirs, fn))
224
135
 
225
136
    def test_is_inside_or_parent_of_any(self):
226
137
        for dirs, fn in [(['src', 'doc'], 'src/foo.c'),
229
140
                         (['src/bar.c', 'bla/foo.c'], 'src'),
230
141
                         (['src'], 'src'),
231
142
                         ]:
232
 
            self.assert_(osutils.is_inside_or_parent_of_any(dirs, fn))
233
 
 
 
143
            self.assert_(is_inside_or_parent_of_any(dirs, fn))
 
144
            
234
145
        for dirs, fn in [(['src'], 'srccontrol'),
235
146
                         (['srccontrol/foo.c'], 'src'),
236
147
                         (['src'], 'srccontrol/foo')]:
237
 
            self.assertFalse(osutils.is_inside_or_parent_of_any(dirs, fn))
238
 
 
239
 
 
240
 
class TestRmTree(tests.TestCaseInTempDir):
 
148
            self.assertFalse(is_inside_or_parent_of_any(dirs, fn))
241
149
 
242
150
    def test_rmtree(self):
243
151
        # Check to remove tree with read-only files/dirs
257
165
        self.failIfExists('dir/file')
258
166
        self.failIfExists('dir')
259
167
 
260
 
 
261
 
class TestDeleteAny(tests.TestCaseInTempDir):
262
 
 
263
 
    def test_delete_any_readonly(self):
264
 
        # from <https://bugs.launchpad.net/bzr/+bug/218206>
265
 
        self.build_tree(['d/', 'f'])
266
 
        osutils.make_readonly('d')
267
 
        osutils.make_readonly('f')
268
 
 
269
 
        osutils.delete_any('f')
270
 
        osutils.delete_any('d')
271
 
 
272
 
 
273
 
class TestKind(tests.TestCaseInTempDir):
274
 
 
275
168
    def test_file_kind(self):
276
169
        self.build_tree(['file', 'dir/'])
277
170
        self.assertEquals('file', osutils.file_kind('file'))
279
172
        if osutils.has_symlinks():
280
173
            os.symlink('symlink', 'symlink')
281
174
            self.assertEquals('symlink', osutils.file_kind('symlink'))
282
 
 
 
175
        
283
176
        # TODO: jam 20060529 Test a block device
284
177
        try:
285
178
            os.lstat('/dev/null')
307
200
                os.remove('socket')
308
201
 
309
202
    def test_kind_marker(self):
310
 
        self.assertEqual("", osutils.kind_marker("file"))
311
 
        self.assertEqual("/", osutils.kind_marker('directory'))
312
 
        self.assertEqual("/", osutils.kind_marker(osutils._directory_kind))
313
 
        self.assertEqual("@", osutils.kind_marker("symlink"))
314
 
        self.assertEqual("+", osutils.kind_marker("tree-reference"))
315
 
        self.assertEqual("", osutils.kind_marker("fifo"))
316
 
        self.assertEqual("", osutils.kind_marker("socket"))
317
 
        self.assertEqual("", osutils.kind_marker("unknown"))
318
 
 
319
 
 
320
 
class TestUmask(tests.TestCaseInTempDir):
 
203
        self.assertEqual(osutils.kind_marker('file'), '')
 
204
        self.assertEqual(osutils.kind_marker('directory'), '/')
 
205
        self.assertEqual(osutils.kind_marker('symlink'), '@')
 
206
        self.assertEqual(osutils.kind_marker('tree-reference'), '+')
321
207
 
322
208
    def test_get_umask(self):
323
209
        if sys.platform == 'win32':
326
212
            return
327
213
 
328
214
        orig_umask = osutils.get_umask()
329
 
        self.addCleanup(os.umask, orig_umask)
330
 
        os.umask(0222)
331
 
        self.assertEqual(0222, osutils.get_umask())
332
 
        os.umask(0022)
333
 
        self.assertEqual(0022, osutils.get_umask())
334
 
        os.umask(0002)
335
 
        self.assertEqual(0002, osutils.get_umask())
336
 
        os.umask(0027)
337
 
        self.assertEqual(0027, osutils.get_umask())
338
 
 
339
 
 
340
 
class TestDateTime(tests.TestCase):
 
215
        try:
 
216
            os.umask(0222)
 
217
            self.assertEqual(0222, osutils.get_umask())
 
218
            os.umask(0022)
 
219
            self.assertEqual(0022, osutils.get_umask())
 
220
            os.umask(0002)
 
221
            self.assertEqual(0002, osutils.get_umask())
 
222
            os.umask(0027)
 
223
            self.assertEqual(0027, osutils.get_umask())
 
224
        finally:
 
225
            os.umask(orig_umask)
341
226
 
342
227
    def assertFormatedDelta(self, expected, seconds):
343
228
        """Assert osutils.format_delta formats as expected"""
378
263
    def test_format_date(self):
379
264
        self.assertRaises(errors.UnsupportedTimezoneFormat,
380
265
            osutils.format_date, 0, timezone='foo')
381
 
        self.assertIsInstance(osutils.format_date(0), str)
382
 
        self.assertIsInstance(osutils.format_local_date(0), unicode)
383
 
        # Testing for the actual value of the local weekday without
384
 
        # duplicating the code from format_date is difficult.
385
 
        # Instead blackbox.test_locale should check for localized
386
 
        # dates once they do occur in output strings.
387
 
 
388
 
    def test_format_date_with_offset_in_original_timezone(self):
389
 
        self.assertEqual("Thu 1970-01-01 00:00:00 +0000",
390
 
            osutils.format_date_with_offset_in_original_timezone(0))
391
 
        self.assertEqual("Fri 1970-01-02 03:46:40 +0000",
392
 
            osutils.format_date_with_offset_in_original_timezone(100000))
393
 
        self.assertEqual("Fri 1970-01-02 05:46:40 +0200",
394
 
            osutils.format_date_with_offset_in_original_timezone(100000, 7200))
395
 
 
396
 
    def test_local_time_offset(self):
397
 
        """Test that local_time_offset() returns a sane value."""
398
 
        offset = osutils.local_time_offset()
399
 
        self.assertTrue(isinstance(offset, int))
400
 
        # Test that the offset is no more than a eighteen hours in
401
 
        # either direction.
402
 
        # Time zone handling is system specific, so it is difficult to
403
 
        # do more specific tests, but a value outside of this range is
404
 
        # probably wrong.
405
 
        eighteen_hours = 18 * 3600
406
 
        self.assertTrue(-eighteen_hours < offset < eighteen_hours)
407
 
 
408
 
    def test_local_time_offset_with_timestamp(self):
409
 
        """Test that local_time_offset() works with a timestamp."""
410
 
        offset = osutils.local_time_offset(1000000000.1234567)
411
 
        self.assertTrue(isinstance(offset, int))
412
 
        eighteen_hours = 18 * 3600
413
 
        self.assertTrue(-eighteen_hours < offset < eighteen_hours)
414
 
 
415
 
 
416
 
class TestLinks(tests.TestCaseInTempDir):
417
266
 
418
267
    def test_dereference_path(self):
419
 
        self.requireFeature(tests.SymlinkFeature)
 
268
        self.requireFeature(SymlinkFeature)
420
269
        cwd = osutils.realpath('.')
421
270
        os.mkdir('bar')
422
271
        bar_path = osutils.pathjoin(cwd, 'bar')
425
274
        self.assertEqual(bar_path, osutils.realpath('./bar'))
426
275
        os.symlink('bar', 'foo')
427
276
        self.assertEqual(bar_path, osutils.realpath('./foo'))
428
 
 
 
277
        
429
278
        # Does not dereference terminal symlinks
430
279
        foo_path = osutils.pathjoin(cwd, 'foo')
431
280
        self.assertEqual(foo_path, osutils.dereference_path('./foo'))
463
312
            osutils.make_readonly('dangling')
464
313
            osutils.make_writable('dangling')
465
314
 
466
 
    def test_host_os_dereferences_symlinks(self):
467
 
        osutils.host_os_dereferences_symlinks()
468
 
 
469
 
 
470
 
class TestCanonicalRelPath(tests.TestCaseInTempDir):
471
 
 
472
 
    _test_needs_features = [tests.CaseInsCasePresFilenameFeature]
473
 
 
474
 
    def test_canonical_relpath_simple(self):
475
 
        f = file('MixedCaseName', 'w')
476
 
        f.close()
477
 
        actual = osutils.canonical_relpath(self.test_base_dir, 'mixedcasename')
478
 
        self.failUnlessEqual('work/MixedCaseName', actual)
479
 
 
480
 
    def test_canonical_relpath_missing_tail(self):
481
 
        os.mkdir('MixedCaseParent')
482
 
        actual = osutils.canonical_relpath(self.test_base_dir,
483
 
                                           'mixedcaseparent/nochild')
484
 
        self.failUnlessEqual('work/MixedCaseParent/nochild', actual)
485
 
 
486
 
 
487
 
class Test_CICPCanonicalRelpath(tests.TestCaseWithTransport):
488
 
 
489
 
    def assertRelpath(self, expected, base, path):
490
 
        actual = osutils._cicp_canonical_relpath(base, path)
491
 
        self.assertEqual(expected, actual)
492
 
 
493
 
    def test_simple(self):
494
 
        self.build_tree(['MixedCaseName'])
495
 
        base = osutils.realpath(self.get_transport('.').local_abspath('.'))
496
 
        self.assertRelpath('MixedCaseName', base, 'mixedcAsename')
497
 
 
498
 
    def test_subdir_missing_tail(self):
499
 
        self.build_tree(['MixedCaseParent/', 'MixedCaseParent/a_child'])
500
 
        base = osutils.realpath(self.get_transport('.').local_abspath('.'))
501
 
        self.assertRelpath('MixedCaseParent/a_child', base,
502
 
                           'MixedCaseParent/a_child')
503
 
        self.assertRelpath('MixedCaseParent/a_child', base,
504
 
                           'MixedCaseParent/A_Child')
505
 
        self.assertRelpath('MixedCaseParent/not_child', base,
506
 
                           'MixedCaseParent/not_child')
507
 
 
508
 
    def test_at_root_slash(self):
509
 
        # We can't test this on Windows, because it has a 'MIN_ABS_PATHLENGTH'
510
 
        # check...
511
 
        if osutils.MIN_ABS_PATHLENGTH > 1:
512
 
            raise tests.TestSkipped('relpath requires %d chars'
513
 
                                    % osutils.MIN_ABS_PATHLENGTH)
514
 
        self.assertRelpath('foo', '/', '/foo')
515
 
 
516
 
    def test_at_root_drive(self):
517
 
        if sys.platform != 'win32':
518
 
            raise tests.TestNotApplicable('we can only test drive-letter relative'
519
 
                                          ' paths on Windows where we have drive'
520
 
                                          ' letters.')
521
 
        # see bug #322807
522
 
        # The specific issue is that when at the root of a drive, 'abspath'
523
 
        # returns "C:/" or just "/". However, the code assumes that abspath
524
 
        # always returns something like "C:/foo" or "/foo" (no trailing slash).
525
 
        self.assertRelpath('foo', 'C:/', 'C:/foo')
526
 
        self.assertRelpath('foo', 'X:/', 'X:/foo')
527
 
        self.assertRelpath('foo', 'X:/', 'X://foo')
528
 
 
529
 
 
530
 
class TestPumpFile(tests.TestCase):
531
 
    """Test pumpfile method."""
532
 
 
533
 
    def setUp(self):
534
 
        tests.TestCase.setUp(self)
535
 
        # create a test datablock
536
 
        self.block_size = 512
537
 
        pattern = '0123456789ABCDEF'
538
 
        self.test_data = pattern * (3 * self.block_size / len(pattern))
539
 
        self.test_data_len = len(self.test_data)
540
 
 
541
 
    def test_bracket_block_size(self):
542
 
        """Read data in blocks with the requested read size bracketing the
543
 
        block size."""
544
 
        # make sure test data is larger than max read size
545
 
        self.assertTrue(self.test_data_len > self.block_size)
546
 
 
547
 
        from_file = file_utils.FakeReadFile(self.test_data)
548
 
        to_file = StringIO()
549
 
 
550
 
        # read (max / 2) bytes and verify read size wasn't affected
551
 
        num_bytes_to_read = self.block_size / 2
552
 
        osutils.pumpfile(from_file, to_file, num_bytes_to_read, self.block_size)
553
 
        self.assertEqual(from_file.get_max_read_size(), num_bytes_to_read)
554
 
        self.assertEqual(from_file.get_read_count(), 1)
555
 
 
556
 
        # read (max) bytes and verify read size wasn't affected
557
 
        num_bytes_to_read = self.block_size
558
 
        from_file.reset_read_count()
559
 
        osutils.pumpfile(from_file, to_file, num_bytes_to_read, self.block_size)
560
 
        self.assertEqual(from_file.get_max_read_size(), num_bytes_to_read)
561
 
        self.assertEqual(from_file.get_read_count(), 1)
562
 
 
563
 
        # read (max + 1) bytes and verify read size was limited
564
 
        num_bytes_to_read = self.block_size + 1
565
 
        from_file.reset_read_count()
566
 
        osutils.pumpfile(from_file, to_file, num_bytes_to_read, self.block_size)
567
 
        self.assertEqual(from_file.get_max_read_size(), self.block_size)
568
 
        self.assertEqual(from_file.get_read_count(), 2)
569
 
 
570
 
        # finish reading the rest of the data
571
 
        num_bytes_to_read = self.test_data_len - to_file.tell()
572
 
        osutils.pumpfile(from_file, to_file, num_bytes_to_read, self.block_size)
573
 
 
574
 
        # report error if the data wasn't equal (we only report the size due
575
 
        # to the length of the data)
576
 
        response_data = to_file.getvalue()
577
 
        if response_data != self.test_data:
578
 
            message = "Data not equal.  Expected %d bytes, received %d."
579
 
            self.fail(message % (len(response_data), self.test_data_len))
580
 
 
581
 
    def test_specified_size(self):
582
 
        """Request a transfer larger than the maximum block size and verify
583
 
        that the maximum read doesn't exceed the block_size."""
584
 
        # make sure test data is larger than max read size
585
 
        self.assertTrue(self.test_data_len > self.block_size)
586
 
 
587
 
        # retrieve data in blocks
588
 
        from_file = file_utils.FakeReadFile(self.test_data)
589
 
        to_file = StringIO()
590
 
        osutils.pumpfile(from_file, to_file, self.test_data_len,
591
 
                         self.block_size)
592
 
 
593
 
        # verify read size was equal to the maximum read size
594
 
        self.assertTrue(from_file.get_max_read_size() > 0)
595
 
        self.assertEqual(from_file.get_max_read_size(), self.block_size)
596
 
        self.assertEqual(from_file.get_read_count(), 3)
597
 
 
598
 
        # report error if the data wasn't equal (we only report the size due
599
 
        # to the length of the data)
600
 
        response_data = to_file.getvalue()
601
 
        if response_data != self.test_data:
602
 
            message = "Data not equal.  Expected %d bytes, received %d."
603
 
            self.fail(message % (len(response_data), self.test_data_len))
604
 
 
605
 
    def test_to_eof(self):
606
 
        """Read to end-of-file and verify that the reads are not larger than
607
 
        the maximum read size."""
608
 
        # make sure test data is larger than max read size
609
 
        self.assertTrue(self.test_data_len > self.block_size)
610
 
 
611
 
        # retrieve data to EOF
612
 
        from_file = file_utils.FakeReadFile(self.test_data)
613
 
        to_file = StringIO()
614
 
        osutils.pumpfile(from_file, to_file, -1, self.block_size)
615
 
 
616
 
        # verify read size was equal to the maximum read size
617
 
        self.assertEqual(from_file.get_max_read_size(), self.block_size)
618
 
        self.assertEqual(from_file.get_read_count(), 4)
619
 
 
620
 
        # report error if the data wasn't equal (we only report the size due
621
 
        # to the length of the data)
622
 
        response_data = to_file.getvalue()
623
 
        if response_data != self.test_data:
624
 
            message = "Data not equal.  Expected %d bytes, received %d."
625
 
            self.fail(message % (len(response_data), self.test_data_len))
626
 
 
627
 
    def test_defaults(self):
628
 
        """Verifies that the default arguments will read to EOF -- this
629
 
        test verifies that any existing usages of pumpfile will not be broken
630
 
        with this new version."""
631
 
        # retrieve data using default (old) pumpfile method
632
 
        from_file = file_utils.FakeReadFile(self.test_data)
633
 
        to_file = StringIO()
634
 
        osutils.pumpfile(from_file, to_file)
635
 
 
636
 
        # report error if the data wasn't equal (we only report the size due
637
 
        # to the length of the data)
638
 
        response_data = to_file.getvalue()
639
 
        if response_data != self.test_data:
640
 
            message = "Data not equal.  Expected %d bytes, received %d."
641
 
            self.fail(message % (len(response_data), self.test_data_len))
642
 
 
643
 
    def test_report_activity(self):
644
 
        activity = []
645
 
        def log_activity(length, direction):
646
 
            activity.append((length, direction))
647
 
        from_file = StringIO(self.test_data)
648
 
        to_file = StringIO()
649
 
        osutils.pumpfile(from_file, to_file, buff_size=500,
650
 
                         report_activity=log_activity, direction='read')
651
 
        self.assertEqual([(500, 'read'), (500, 'read'), (500, 'read'),
652
 
                          (36, 'read')], activity)
653
 
 
654
 
        from_file = StringIO(self.test_data)
655
 
        to_file = StringIO()
656
 
        del activity[:]
657
 
        osutils.pumpfile(from_file, to_file, buff_size=500,
658
 
                         report_activity=log_activity, direction='write')
659
 
        self.assertEqual([(500, 'write'), (500, 'write'), (500, 'write'),
660
 
                          (36, 'write')], activity)
661
 
 
662
 
        # And with a limited amount of data
663
 
        from_file = StringIO(self.test_data)
664
 
        to_file = StringIO()
665
 
        del activity[:]
666
 
        osutils.pumpfile(from_file, to_file, buff_size=500, read_length=1028,
667
 
                         report_activity=log_activity, direction='read')
668
 
        self.assertEqual([(500, 'read'), (500, 'read'), (28, 'read')], activity)
669
 
 
670
 
 
671
 
 
672
 
class TestPumpStringFile(tests.TestCase):
673
 
 
674
 
    def test_empty(self):
675
 
        output = StringIO()
676
 
        osutils.pump_string_file("", output)
677
 
        self.assertEqual("", output.getvalue())
678
 
 
679
 
    def test_more_than_segment_size(self):
680
 
        output = StringIO()
681
 
        osutils.pump_string_file("123456789", output, 2)
682
 
        self.assertEqual("123456789", output.getvalue())
683
 
 
684
 
    def test_segment_size(self):
685
 
        output = StringIO()
686
 
        osutils.pump_string_file("12", output, 2)
687
 
        self.assertEqual("12", output.getvalue())
688
 
 
689
 
    def test_segment_size_multiple(self):
690
 
        output = StringIO()
691
 
        osutils.pump_string_file("1234", output, 2)
692
 
        self.assertEqual("1234", output.getvalue())
693
 
 
694
 
 
695
 
class TestRelpath(tests.TestCase):
696
 
 
697
 
    def test_simple_relpath(self):
698
 
        cwd = osutils.getcwd()
699
 
        subdir = cwd + '/subdir'
700
 
        self.assertEqual('subdir', osutils.relpath(cwd, subdir))
701
 
 
702
 
    def test_deep_relpath(self):
703
 
        cwd = osutils.getcwd()
704
 
        subdir = cwd + '/sub/subsubdir'
705
 
        self.assertEqual('sub/subsubdir', osutils.relpath(cwd, subdir))
706
 
 
707
 
    def test_not_relative(self):
708
 
        self.assertRaises(errors.PathNotChild,
709
 
                          osutils.relpath, 'C:/path', 'H:/path')
710
 
        self.assertRaises(errors.PathNotChild,
711
 
                          osutils.relpath, 'C:/', 'H:/path')
712
 
 
713
 
 
714
 
class TestSafeUnicode(tests.TestCase):
 
315
    def test_kind_marker(self):
 
316
        self.assertEqual("", osutils.kind_marker("file"))
 
317
        self.assertEqual("/", osutils.kind_marker(osutils._directory_kind))
 
318
        self.assertEqual("@", osutils.kind_marker("symlink"))
 
319
        self.assertRaises(errors.BzrError, osutils.kind_marker, "unknown")
 
320
 
 
321
 
 
322
class TestSafeUnicode(TestCase):
715
323
 
716
324
    def test_from_ascii_string(self):
717
325
        self.assertEqual(u'foobar', osutils.safe_unicode('foobar'))
726
334
        self.assertEqual(u'foo\xae', osutils.safe_unicode('foo\xc2\xae'))
727
335
 
728
336
    def test_bad_utf8_string(self):
729
 
        self.assertRaises(errors.BzrBadParameterNotUnicode,
 
337
        self.assertRaises(BzrBadParameterNotUnicode,
730
338
                          osutils.safe_unicode,
731
339
                          '\xbb\xbb')
732
340
 
733
341
 
734
 
class TestSafeUtf8(tests.TestCase):
 
342
class TestSafeUtf8(TestCase):
735
343
 
736
344
    def test_from_ascii_string(self):
737
345
        f = 'foobar'
747
355
        self.assertEqual('foo\xc2\xae', osutils.safe_utf8('foo\xc2\xae'))
748
356
 
749
357
    def test_bad_utf8_string(self):
750
 
        self.assertRaises(errors.BzrBadParameterNotUnicode,
 
358
        self.assertRaises(BzrBadParameterNotUnicode,
751
359
                          osutils.safe_utf8, '\xbb\xbb')
752
360
 
753
361
 
754
 
class TestSafeRevisionId(tests.TestCase):
 
362
class TestSafeRevisionId(TestCase):
755
363
 
756
364
    def test_from_ascii_string(self):
757
365
        # this shouldn't give a warning because it's getting an ascii string
779
387
        self.assertEqual(None, osutils.safe_revision_id(None))
780
388
 
781
389
 
782
 
class TestSafeFileId(tests.TestCase):
 
390
class TestSafeFileId(TestCase):
783
391
 
784
392
    def test_from_ascii_string(self):
785
393
        self.assertEqual('foobar', osutils.safe_file_id('foobar'))
805
413
        self.assertEqual(None, osutils.safe_file_id(None))
806
414
 
807
415
 
808
 
class TestWin32Funcs(tests.TestCase):
809
 
    """Test that _win32 versions of os utilities return appropriate paths."""
 
416
class TestWin32Funcs(TestCase):
 
417
    """Test that the _win32 versions of os utilities return appropriate paths."""
810
418
 
811
419
    def test_abspath(self):
812
420
        self.assertEqual('C:/foo', osutils._win32_abspath('C:\\foo'))
819
427
        self.assertEqual('C:/foo', osutils._win32_realpath('C:/foo'))
820
428
 
821
429
    def test_pathjoin(self):
822
 
        self.assertEqual('path/to/foo',
823
 
                         osutils._win32_pathjoin('path', 'to', 'foo'))
824
 
        self.assertEqual('C:/foo',
825
 
                         osutils._win32_pathjoin('path\\to', 'C:\\foo'))
826
 
        self.assertEqual('C:/foo',
827
 
                         osutils._win32_pathjoin('path/to', 'C:/foo'))
828
 
        self.assertEqual('path/to/foo',
829
 
                         osutils._win32_pathjoin('path/to/', 'foo'))
830
 
        self.assertEqual('/foo',
831
 
                         osutils._win32_pathjoin('C:/path/to/', '/foo'))
832
 
        self.assertEqual('/foo',
833
 
                         osutils._win32_pathjoin('C:\\path\\to\\', '\\foo'))
 
430
        self.assertEqual('path/to/foo', osutils._win32_pathjoin('path', 'to', 'foo'))
 
431
        self.assertEqual('C:/foo', osutils._win32_pathjoin('path\\to', 'C:\\foo'))
 
432
        self.assertEqual('C:/foo', osutils._win32_pathjoin('path/to', 'C:/foo'))
 
433
        self.assertEqual('path/to/foo', osutils._win32_pathjoin('path/to/', 'foo'))
 
434
        self.assertEqual('/foo', osutils._win32_pathjoin('C:/path/to/', '/foo'))
 
435
        self.assertEqual('/foo', osutils._win32_pathjoin('C:\\path\\to\\', '\\foo'))
834
436
 
835
437
    def test_normpath(self):
836
 
        self.assertEqual('path/to/foo',
837
 
                         osutils._win32_normpath(r'path\\from\..\to\.\foo'))
838
 
        self.assertEqual('path/to/foo',
839
 
                         osutils._win32_normpath('path//from/../to/./foo'))
 
438
        self.assertEqual('path/to/foo', osutils._win32_normpath(r'path\\from\..\to\.\foo'))
 
439
        self.assertEqual('path/to/foo', osutils._win32_normpath('path//from/../to/./foo'))
840
440
 
841
441
    def test_getcwd(self):
842
442
        cwd = osutils._win32_getcwd()
863
463
        self.assertEqual('//HOST/path', osutils._win98_abspath('//HOST/path'))
864
464
        # relative path
865
465
        cwd = osutils.getcwd().rstrip('/')
866
 
        drive = osutils.ntpath.splitdrive(cwd)[0]
 
466
        drive = osutils._nt_splitdrive(cwd)[0]
867
467
        self.assertEqual(cwd+'/path', osutils._win98_abspath('path'))
868
468
        self.assertEqual(drive+'/path', osutils._win98_abspath('/path'))
869
469
        # unicode path
871
471
        self.assertEqual(cwd+'/'+u, osutils._win98_abspath(u))
872
472
 
873
473
 
874
 
class TestWin32FuncsDirs(tests.TestCaseInTempDir):
 
474
class TestWin32FuncsDirs(TestCaseInTempDir):
875
475
    """Test win32 functions that create files."""
 
476
    
 
477
    def test_getcwd(self):
 
478
        if win32utils.winver == 'Windows 98':
 
479
            raise TestSkipped('Windows 98 cannot handle unicode filenames')
 
480
        # Make sure getcwd can handle unicode filenames
 
481
        try:
 
482
            os.mkdir(u'mu-\xb5')
 
483
        except UnicodeError:
 
484
            raise TestSkipped("Unable to create Unicode filename")
876
485
 
877
 
    def test_getcwd(self):
878
 
        self.requireFeature(tests.UnicodeFilenameFeature)
879
 
        os.mkdir(u'mu-\xb5')
880
486
        os.chdir(u'mu-\xb5')
881
487
        # TODO: jam 20060427 This will probably fail on Mac OSX because
882
488
        #       it will change the normalization of B\xe5gfors
887
493
    def test_minimum_path_selection(self):
888
494
        self.assertEqual(set(),
889
495
            osutils.minimum_path_selection([]))
890
 
        self.assertEqual(set(['a']),
891
 
            osutils.minimum_path_selection(['a']))
892
496
        self.assertEqual(set(['a', 'b']),
893
497
            osutils.minimum_path_selection(['a', 'b']))
894
498
        self.assertEqual(set(['a/', 'b']),
895
499
            osutils.minimum_path_selection(['a/', 'b']))
896
500
        self.assertEqual(set(['a/', 'b']),
897
501
            osutils.minimum_path_selection(['a/c', 'a/', 'b']))
898
 
        self.assertEqual(set(['a-b', 'a', 'a0b']),
899
 
            osutils.minimum_path_selection(['a-b', 'a/b', 'a0b', 'a']))
900
502
 
901
503
    def test_mkdtemp(self):
902
504
        tmpdir = osutils._win32_mkdtemp(dir='.')
958
560
        self.assertRaises(errors.BzrError, osutils.splitpath, 'a/../b')
959
561
 
960
562
 
961
 
class TestParentDirectories(tests.TestCaseInTempDir):
962
 
    """Test osutils.parent_directories()"""
963
 
 
964
 
    def test_parent_directories(self):
965
 
        self.assertEqual([], osutils.parent_directories('a'))
966
 
        self.assertEqual(['a'], osutils.parent_directories('a/b'))
967
 
        self.assertEqual(['a/b', 'a'], osutils.parent_directories('a/b/c'))
968
 
 
969
 
 
970
 
class TestMacFuncsDirs(tests.TestCaseInTempDir):
 
563
class TestMacFuncsDirs(TestCaseInTempDir):
971
564
    """Test mac special functions that require directories."""
972
565
 
973
566
    def test_getcwd(self):
974
 
        self.requireFeature(tests.UnicodeFilenameFeature)
975
 
        os.mkdir(u'B\xe5gfors')
 
567
        # On Mac, this will actually create Ba\u030agfors
 
568
        # but chdir will still work, because it accepts both paths
 
569
        try:
 
570
            os.mkdir(u'B\xe5gfors')
 
571
        except UnicodeError:
 
572
            raise TestSkipped("Unable to create Unicode filename")
 
573
 
976
574
        os.chdir(u'B\xe5gfors')
977
575
        self.assertEndsWith(osutils._mac_getcwd(), u'B\xe5gfors')
978
576
 
979
577
    def test_getcwd_nonnorm(self):
980
 
        self.requireFeature(tests.UnicodeFilenameFeature)
981
578
        # Test that _mac_getcwd() will normalize this path
982
 
        os.mkdir(u'Ba\u030agfors')
 
579
        try:
 
580
            os.mkdir(u'Ba\u030agfors')
 
581
        except UnicodeError:
 
582
            raise TestSkipped("Unable to create Unicode filename")
 
583
 
983
584
        os.chdir(u'Ba\u030agfors')
984
585
        self.assertEndsWith(osutils._mac_getcwd(), u'B\xe5gfors')
985
586
 
986
587
 
987
 
class TestChunksToLines(tests.TestCase):
988
 
 
989
 
    def test_smoketest(self):
990
 
        self.assertEqual(['foo\n', 'bar\n', 'baz\n'],
991
 
                         osutils.chunks_to_lines(['foo\nbar', '\nbaz\n']))
992
 
        self.assertEqual(['foo\n', 'bar\n', 'baz\n'],
993
 
                         osutils.chunks_to_lines(['foo\n', 'bar\n', 'baz\n']))
994
 
 
995
 
    def test_osutils_binding(self):
996
 
        from bzrlib.tests import test__chunks_to_lines
997
 
        if test__chunks_to_lines.compiled_chunkstolines_feature.available():
998
 
            from bzrlib._chunks_to_lines_pyx import chunks_to_lines
999
 
        else:
1000
 
            from bzrlib._chunks_to_lines_py import chunks_to_lines
1001
 
        self.assertIs(chunks_to_lines, osutils.chunks_to_lines)
1002
 
 
1003
 
 
1004
 
class TestSplitLines(tests.TestCase):
 
588
class TestSplitLines(TestCase):
1005
589
 
1006
590
    def test_split_unicode(self):
1007
591
        self.assertEqual([u'foo\n', u'bar\xae'],
1014
598
                         osutils.split_lines('foo\rbar\n'))
1015
599
 
1016
600
 
1017
 
class TestWalkDirs(tests.TestCaseInTempDir):
1018
 
 
1019
 
    def assertExpectedBlocks(self, expected, result):
1020
 
        self.assertEqual(expected,
1021
 
                         [(dirinfo, [line[0:3] for line in block])
1022
 
                          for dirinfo, block in result])
 
601
class TestWalkDirs(TestCaseInTempDir):
1023
602
 
1024
603
    def test_walkdirs(self):
1025
604
        tree = [
1058
637
            result.append((dirdetail, dirblock))
1059
638
 
1060
639
        self.assertTrue(found_bzrdir)
1061
 
        self.assertExpectedBlocks(expected_dirblocks, result)
 
640
        self.assertEqual(expected_dirblocks,
 
641
            [(dirinfo, [line[0:3] for line in block]) for dirinfo, block in result])
1062
642
        # you can search a subdir only, with a supplied prefix.
1063
643
        result = []
1064
644
        for dirblock in osutils.walkdirs('./1dir', '1dir'):
1065
645
            result.append(dirblock)
1066
 
        self.assertExpectedBlocks(expected_dirblocks[1:], result)
1067
 
 
1068
 
    def test_walkdirs_os_error(self):
1069
 
        # <https://bugs.launchpad.net/bzr/+bug/338653>
1070
 
        # Pyrex readdir didn't raise useful messages if it had an error
1071
 
        # reading the directory
1072
 
        if sys.platform == 'win32':
1073
 
            raise tests.TestNotApplicable(
1074
 
                "readdir IOError not tested on win32")
1075
 
        os.mkdir("test-unreadable")
1076
 
        os.chmod("test-unreadable", 0000)
1077
 
        # must chmod it back so that it can be removed
1078
 
        self.addCleanup(os.chmod, "test-unreadable", 0700)
1079
 
        # The error is not raised until the generator is actually evaluated.
1080
 
        # (It would be ok if it happened earlier but at the moment it
1081
 
        # doesn't.)
1082
 
        e = self.assertRaises(OSError, list, osutils._walkdirs_utf8("."))
1083
 
        self.assertEquals('./test-unreadable', e.filename)
1084
 
        self.assertEquals(errno.EACCES, e.errno)
1085
 
        # Ensure the message contains the file name
1086
 
        self.assertContainsRe(str(e), "\./test-unreadable")
1087
 
 
1088
 
 
1089
 
    def test_walkdirs_encoding_error(self):
1090
 
        # <https://bugs.launchpad.net/bzr/+bug/488519>
1091
 
        # walkdirs didn't raise a useful message when the filenames
1092
 
        # are not using the filesystem's encoding
1093
 
 
1094
 
        # require a bytestring based filesystem
1095
 
        self.requireFeature(tests.ByteStringNamedFilesystem)
1096
 
 
1097
 
        tree = [
1098
 
            '.bzr',
1099
 
            '0file',
1100
 
            '1dir/',
1101
 
            '1dir/0file',
1102
 
            '1dir/1dir/',
1103
 
            '1file'
1104
 
            ]
1105
 
 
1106
 
        self.build_tree(tree)
1107
 
 
1108
 
        # rename the 1file to a latin-1 filename
1109
 
        os.rename("./1file", "\xe8file")
1110
 
 
1111
 
        self._save_platform_info()
1112
 
        win32utils.winver = None # Avoid the win32 detection code
1113
 
        osutils._fs_enc = 'UTF-8'
1114
 
 
1115
 
        # this should raise on error
1116
 
        def attempt():
1117
 
            for dirdetail, dirblock in osutils.walkdirs('.'):
1118
 
                pass
1119
 
 
1120
 
        self.assertRaises(errors.BadFilenameEncoding, attempt)
 
646
        self.assertEqual(expected_dirblocks[1:],
 
647
            [(dirinfo, [line[0:3] for line in block]) for dirinfo, block in result])
1121
648
 
1122
649
    def test__walkdirs_utf8(self):
1123
650
        tree = [
1156
683
            result.append((dirdetail, dirblock))
1157
684
 
1158
685
        self.assertTrue(found_bzrdir)
1159
 
        self.assertExpectedBlocks(expected_dirblocks, result)
1160
 
 
 
686
        self.assertEqual(expected_dirblocks,
 
687
            [(dirinfo, [line[0:3] for line in block]) for dirinfo, block in result])
1161
688
        # you can search a subdir only, with a supplied prefix.
1162
689
        result = []
1163
690
        for dirblock in osutils.walkdirs('./1dir', '1dir'):
1164
691
            result.append(dirblock)
1165
 
        self.assertExpectedBlocks(expected_dirblocks[1:], result)
 
692
        self.assertEqual(expected_dirblocks[1:],
 
693
            [(dirinfo, [line[0:3] for line in block]) for dirinfo, block in result])
1166
694
 
1167
695
    def _filter_out_stat(self, result):
1168
696
        """Filter out the stat value from the walkdirs result"""
1173
701
                new_dirblock.append((info[0], info[1], info[2], info[4]))
1174
702
            dirblock[:] = new_dirblock
1175
703
 
1176
 
    def _save_platform_info(self):
1177
 
        self.overrideAttr(win32utils, 'winver')
1178
 
        self.overrideAttr(osutils, '_fs_enc')
1179
 
        self.overrideAttr(osutils, '_selected_dir_reader')
1180
 
 
1181
 
    def assertDirReaderIs(self, expected):
1182
 
        """Assert the right implementation for _walkdirs_utf8 is chosen."""
1183
 
        # Force it to redetect
1184
 
        osutils._selected_dir_reader = None
1185
 
        # Nothing to list, but should still trigger the selection logic
1186
 
        self.assertEqual([(('', '.'), [])], list(osutils._walkdirs_utf8('.')))
1187
 
        self.assertIsInstance(osutils._selected_dir_reader, expected)
1188
 
 
1189
 
    def test_force_walkdirs_utf8_fs_utf8(self):
1190
 
        self.requireFeature(UTF8DirReaderFeature)
1191
 
        self._save_platform_info()
1192
 
        win32utils.winver = None # Avoid the win32 detection code
1193
 
        osutils._fs_enc = 'UTF-8'
1194
 
        self.assertDirReaderIs(UTF8DirReaderFeature.reader)
1195
 
 
1196
 
    def test_force_walkdirs_utf8_fs_ascii(self):
1197
 
        self.requireFeature(UTF8DirReaderFeature)
1198
 
        self._save_platform_info()
1199
 
        win32utils.winver = None # Avoid the win32 detection code
1200
 
        osutils._fs_enc = 'US-ASCII'
1201
 
        self.assertDirReaderIs(UTF8DirReaderFeature.reader)
1202
 
 
1203
 
    def test_force_walkdirs_utf8_fs_ANSI(self):
1204
 
        self.requireFeature(UTF8DirReaderFeature)
1205
 
        self._save_platform_info()
1206
 
        win32utils.winver = None # Avoid the win32 detection code
1207
 
        osutils._fs_enc = 'ANSI_X3.4-1968'
1208
 
        self.assertDirReaderIs(UTF8DirReaderFeature.reader)
1209
 
 
1210
 
    def test_force_walkdirs_utf8_fs_latin1(self):
1211
 
        self._save_platform_info()
1212
 
        win32utils.winver = None # Avoid the win32 detection code
1213
 
        osutils._fs_enc = 'latin1'
1214
 
        self.assertDirReaderIs(osutils.UnicodeDirReader)
1215
 
 
1216
 
    def test_force_walkdirs_utf8_nt(self):
1217
 
        # Disabled because the thunk of the whole walkdirs api is disabled.
1218
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1219
 
        self._save_platform_info()
1220
 
        win32utils.winver = 'Windows NT'
1221
 
        from bzrlib._walkdirs_win32 import Win32ReadDir
1222
 
        self.assertDirReaderIs(Win32ReadDir)
1223
 
 
1224
 
    def test_force_walkdirs_utf8_98(self):
1225
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1226
 
        self._save_platform_info()
1227
 
        win32utils.winver = 'Windows 98'
1228
 
        self.assertDirReaderIs(osutils.UnicodeDirReader)
1229
 
 
1230
704
    def test_unicode_walkdirs(self):
1231
705
        """Walkdirs should always return unicode paths."""
1232
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1233
706
        name0 = u'0file-\xb6'
1234
707
        name1 = u'1dir-\u062c\u0648'
1235
708
        name2 = u'2file-\u0633'
1240
713
            name1 + '/' + name1 + '/',
1241
714
            name2,
1242
715
            ]
1243
 
        self.build_tree(tree)
 
716
        try:
 
717
            self.build_tree(tree)
 
718
        except UnicodeError:
 
719
            raise TestSkipped('Could not represent Unicode chars'
 
720
                              ' in current encoding.')
1244
721
        expected_dirblocks = [
1245
722
                ((u'', u'.'),
1246
723
                 [(name0, name0, 'file', './' + name0),
1272
749
 
1273
750
        The abspath portion might be in unicode or utf-8
1274
751
        """
1275
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1276
752
        name0 = u'0file-\xb6'
1277
753
        name1 = u'1dir-\u062c\u0648'
1278
754
        name2 = u'2file-\u0633'
1283
759
            name1 + '/' + name1 + '/',
1284
760
            name2,
1285
761
            ]
1286
 
        self.build_tree(tree)
 
762
        try:
 
763
            self.build_tree(tree)
 
764
        except UnicodeError:
 
765
            raise TestSkipped('Could not represent Unicode chars'
 
766
                              ' in current encoding.')
1287
767
        name0 = name0.encode('utf8')
1288
768
        name1 = name1.encode('utf8')
1289
769
        name2 = name2.encode('utf8')
1328
808
            result.append((dirdetail, new_dirblock))
1329
809
        self.assertEqual(expected_dirblocks, result)
1330
810
 
1331
 
    def test__walkdirs_utf8_with_unicode_fs(self):
1332
 
        """UnicodeDirReader should be a safe fallback everywhere
 
811
    def test_unicode__walkdirs_unicode_to_utf8(self):
 
812
        """walkdirs_unicode_to_utf8 should be a safe fallback everywhere
1333
813
 
1334
814
        The abspath portion should be in unicode
1335
815
        """
1336
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1337
 
        # Use the unicode reader. TODO: split into driver-and-driven unit
1338
 
        # tests.
1339
 
        self._save_platform_info()
1340
 
        osutils._selected_dir_reader = osutils.UnicodeDirReader()
1341
 
        name0u = u'0file-\xb6'
1342
 
        name1u = u'1dir-\u062c\u0648'
1343
 
        name2u = u'2file-\u0633'
1344
 
        tree = [
1345
 
            name0u,
1346
 
            name1u + '/',
1347
 
            name1u + '/' + name0u,
1348
 
            name1u + '/' + name1u + '/',
1349
 
            name2u,
1350
 
            ]
1351
 
        self.build_tree(tree)
1352
 
        name0 = name0u.encode('utf8')
1353
 
        name1 = name1u.encode('utf8')
1354
 
        name2 = name2u.encode('utf8')
1355
 
 
1356
 
        # All of the abspaths should be in unicode, all of the relative paths
1357
 
        # should be in utf8
1358
 
        expected_dirblocks = [
1359
 
                (('', '.'),
1360
 
                 [(name0, name0, 'file', './' + name0u),
1361
 
                  (name1, name1, 'directory', './' + name1u),
1362
 
                  (name2, name2, 'file', './' + name2u),
1363
 
                 ]
1364
 
                ),
1365
 
                ((name1, './' + name1u),
1366
 
                 [(name1 + '/' + name0, name0, 'file', './' + name1u
1367
 
                                                        + '/' + name0u),
1368
 
                  (name1 + '/' + name1, name1, 'directory', './' + name1u
1369
 
                                                            + '/' + name1u),
1370
 
                 ]
1371
 
                ),
1372
 
                ((name1 + '/' + name1, './' + name1u + '/' + name1u),
1373
 
                 [
1374
 
                 ]
1375
 
                ),
1376
 
            ]
1377
 
        result = list(osutils._walkdirs_utf8('.'))
1378
 
        self._filter_out_stat(result)
1379
 
        self.assertEqual(expected_dirblocks, result)
1380
 
 
1381
 
    def test__walkdirs_utf8_win32readdir(self):
1382
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1383
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1384
 
        from bzrlib._walkdirs_win32 import Win32ReadDir
1385
 
        self._save_platform_info()
1386
 
        osutils._selected_dir_reader = Win32ReadDir()
1387
 
        name0u = u'0file-\xb6'
1388
 
        name1u = u'1dir-\u062c\u0648'
1389
 
        name2u = u'2file-\u0633'
1390
 
        tree = [
1391
 
            name0u,
1392
 
            name1u + '/',
1393
 
            name1u + '/' + name0u,
1394
 
            name1u + '/' + name1u + '/',
1395
 
            name2u,
1396
 
            ]
1397
 
        self.build_tree(tree)
1398
 
        name0 = name0u.encode('utf8')
1399
 
        name1 = name1u.encode('utf8')
1400
 
        name2 = name2u.encode('utf8')
1401
 
 
1402
 
        # All of the abspaths should be in unicode, all of the relative paths
1403
 
        # should be in utf8
1404
 
        expected_dirblocks = [
1405
 
                (('', '.'),
1406
 
                 [(name0, name0, 'file', './' + name0u),
1407
 
                  (name1, name1, 'directory', './' + name1u),
1408
 
                  (name2, name2, 'file', './' + name2u),
1409
 
                 ]
1410
 
                ),
1411
 
                ((name1, './' + name1u),
1412
 
                 [(name1 + '/' + name0, name0, 'file', './' + name1u
1413
 
                                                        + '/' + name0u),
1414
 
                  (name1 + '/' + name1, name1, 'directory', './' + name1u
1415
 
                                                            + '/' + name1u),
1416
 
                 ]
1417
 
                ),
1418
 
                ((name1 + '/' + name1, './' + name1u + '/' + name1u),
1419
 
                 [
1420
 
                 ]
1421
 
                ),
1422
 
            ]
1423
 
        result = list(osutils._walkdirs_utf8(u'.'))
1424
 
        self._filter_out_stat(result)
1425
 
        self.assertEqual(expected_dirblocks, result)
1426
 
 
1427
 
    def assertStatIsCorrect(self, path, win32stat):
1428
 
        os_stat = os.stat(path)
1429
 
        self.assertEqual(os_stat.st_size, win32stat.st_size)
1430
 
        self.assertAlmostEqual(os_stat.st_mtime, win32stat.st_mtime, places=4)
1431
 
        self.assertAlmostEqual(os_stat.st_ctime, win32stat.st_ctime, places=4)
1432
 
        self.assertAlmostEqual(os_stat.st_atime, win32stat.st_atime, places=4)
1433
 
        self.assertEqual(os_stat.st_dev, win32stat.st_dev)
1434
 
        self.assertEqual(os_stat.st_ino, win32stat.st_ino)
1435
 
        self.assertEqual(os_stat.st_mode, win32stat.st_mode)
1436
 
 
1437
 
    def test__walkdirs_utf_win32_find_file_stat_file(self):
1438
 
        """make sure our Stat values are valid"""
1439
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1440
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1441
 
        from bzrlib._walkdirs_win32 import Win32ReadDir
1442
 
        name0u = u'0file-\xb6'
1443
 
        name0 = name0u.encode('utf8')
1444
 
        self.build_tree([name0u])
1445
 
        # I hate to sleep() here, but I'm trying to make the ctime different
1446
 
        # from the mtime
1447
 
        time.sleep(2)
1448
 
        f = open(name0u, 'ab')
 
816
        name0u = u'0file-\xb6'
 
817
        name1u = u'1dir-\u062c\u0648'
 
818
        name2u = u'2file-\u0633'
 
819
        tree = [
 
820
            name0u,
 
821
            name1u + '/',
 
822
            name1u + '/' + name0u,
 
823
            name1u + '/' + name1u + '/',
 
824
            name2u,
 
825
            ]
1449
826
        try:
1450
 
            f.write('just a small update')
1451
 
        finally:
1452
 
            f.close()
1453
 
 
1454
 
        result = Win32ReadDir().read_dir('', u'.')
1455
 
        entry = result[0]
1456
 
        self.assertEqual((name0, name0, 'file'), entry[:3])
1457
 
        self.assertEqual(u'./' + name0u, entry[4])
1458
 
        self.assertStatIsCorrect(entry[4], entry[3])
1459
 
        self.assertNotEqual(entry[3].st_mtime, entry[3].st_ctime)
1460
 
 
1461
 
    def test__walkdirs_utf_win32_find_file_stat_directory(self):
1462
 
        """make sure our Stat values are valid"""
1463
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1464
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1465
 
        from bzrlib._walkdirs_win32 import Win32ReadDir
1466
 
        name0u = u'0dir-\u062c\u0648'
 
827
            self.build_tree(tree)
 
828
        except UnicodeError:
 
829
            raise TestSkipped('Could not represent Unicode chars'
 
830
                              ' in current encoding.')
1467
831
        name0 = name0u.encode('utf8')
1468
 
        self.build_tree([name0u + '/'])
 
832
        name1 = name1u.encode('utf8')
 
833
        name2 = name2u.encode('utf8')
1469
834
 
1470
 
        result = Win32ReadDir().read_dir('', u'.')
1471
 
        entry = result[0]
1472
 
        self.assertEqual((name0, name0, 'directory'), entry[:3])
1473
 
        self.assertEqual(u'./' + name0u, entry[4])
1474
 
        self.assertStatIsCorrect(entry[4], entry[3])
 
835
        # All of the abspaths should be in unicode, all of the relative paths
 
836
        # should be in utf8
 
837
        expected_dirblocks = [
 
838
                (('', '.'),
 
839
                 [(name0, name0, 'file', './' + name0u),
 
840
                  (name1, name1, 'directory', './' + name1u),
 
841
                  (name2, name2, 'file', './' + name2u),
 
842
                 ]
 
843
                ),
 
844
                ((name1, './' + name1u),
 
845
                 [(name1 + '/' + name0, name0, 'file', './' + name1u
 
846
                                                        + '/' + name0u),
 
847
                  (name1 + '/' + name1, name1, 'directory', './' + name1u
 
848
                                                            + '/' + name1u),
 
849
                 ]
 
850
                ),
 
851
                ((name1 + '/' + name1, './' + name1u + '/' + name1u),
 
852
                 [
 
853
                 ]
 
854
                ),
 
855
            ]
 
856
        result = list(osutils._walkdirs_unicode_to_utf8('.'))
 
857
        self._filter_out_stat(result)
 
858
        self.assertEqual(expected_dirblocks, result)
1475
859
 
1476
860
    def assertPathCompare(self, path_less, path_greater):
1477
861
        """check that path_less and path_greater compare correctly."""
1551
935
            sorted(original_paths, cmp=osutils.compare_paths_prefix_order))
1552
936
 
1553
937
 
1554
 
class TestCopyTree(tests.TestCaseInTempDir):
1555
 
 
 
938
class TestCopyTree(TestCaseInTempDir):
 
939
    
1556
940
    def test_copy_basic_tree(self):
1557
941
        self.build_tree(['source/', 'source/a', 'source/b/', 'source/b/c'])
1558
942
        osutils.copy_tree('source', 'target')
1567
951
        self.assertEqual(['c'], os.listdir('target/b'))
1568
952
 
1569
953
    def test_copy_tree_symlinks(self):
1570
 
        self.requireFeature(tests.SymlinkFeature)
 
954
        self.requireFeature(SymlinkFeature)
1571
955
        self.build_tree(['source/'])
1572
956
        os.symlink('a/generic/path', 'source/lnk')
1573
957
        osutils.copy_tree('source', 'target')
1603
987
            self.assertEqual([('source/lnk', 'target/lnk')], processed_links)
1604
988
 
1605
989
 
1606
 
class TestSetUnsetEnv(tests.TestCase):
 
990
#class TestTerminalEncoding has been moved to test_osutils_encodings.py
 
991
# [bialix] 2006/12/26
 
992
 
 
993
 
 
994
class TestSetUnsetEnv(TestCase):
1607
995
    """Test updating the environment"""
1608
996
 
1609
997
    def setUp(self):
1615
1003
        def cleanup():
1616
1004
            if 'BZR_TEST_ENV_VAR' in os.environ:
1617
1005
                del os.environ['BZR_TEST_ENV_VAR']
 
1006
 
1618
1007
        self.addCleanup(cleanup)
1619
1008
 
1620
1009
    def test_set(self):
1632
1021
 
1633
1022
    def test_unicode(self):
1634
1023
        """Environment can only contain plain strings
1635
 
 
 
1024
        
1636
1025
        So Unicode strings must be encoded.
1637
1026
        """
1638
 
        uni_val, env_val = tests.probe_unicode_in_user_encoding()
 
1027
        uni_val, env_val = probe_unicode_in_user_encoding()
1639
1028
        if uni_val is None:
1640
 
            raise tests.TestSkipped(
1641
 
                'Cannot find a unicode character that works in encoding %s'
1642
 
                % (osutils.get_user_encoding(),))
 
1029
            raise TestSkipped('Cannot find a unicode character that works in'
 
1030
                              ' encoding %s' % (bzrlib.user_encoding,))
1643
1031
 
1644
1032
        old = osutils.set_or_unset_env('BZR_TEST_ENV_VAR', uni_val)
1645
1033
        self.assertEqual(env_val, os.environ.get('BZR_TEST_ENV_VAR'))
1653
1041
        self.failIf('BZR_TEST_ENV_VAR' in os.environ)
1654
1042
 
1655
1043
 
1656
 
class TestSizeShaFile(tests.TestCaseInTempDir):
1657
 
 
1658
 
    def test_sha_empty(self):
1659
 
        self.build_tree_contents([('foo', '')])
1660
 
        expected_sha = osutils.sha_string('')
1661
 
        f = open('foo')
1662
 
        self.addCleanup(f.close)
1663
 
        size, sha = osutils.size_sha_file(f)
1664
 
        self.assertEqual(0, size)
1665
 
        self.assertEqual(expected_sha, sha)
1666
 
 
1667
 
    def test_sha_mixed_endings(self):
1668
 
        text = 'test\r\nwith\nall\rpossible line endings\r\n'
1669
 
        self.build_tree_contents([('foo', text)])
1670
 
        expected_sha = osutils.sha_string(text)
1671
 
        f = open('foo', 'rb')
1672
 
        self.addCleanup(f.close)
1673
 
        size, sha = osutils.size_sha_file(f)
1674
 
        self.assertEqual(38, size)
1675
 
        self.assertEqual(expected_sha, sha)
1676
 
 
1677
 
 
1678
 
class TestShaFileByName(tests.TestCaseInTempDir):
1679
 
 
1680
 
    def test_sha_empty(self):
1681
 
        self.build_tree_contents([('foo', '')])
1682
 
        expected_sha = osutils.sha_string('')
1683
 
        self.assertEqual(expected_sha, osutils.sha_file_by_name('foo'))
1684
 
 
1685
 
    def test_sha_mixed_endings(self):
1686
 
        text = 'test\r\nwith\nall\rpossible line endings\r\n'
1687
 
        self.build_tree_contents([('foo', text)])
1688
 
        expected_sha = osutils.sha_string(text)
1689
 
        self.assertEqual(expected_sha, osutils.sha_file_by_name('foo'))
1690
 
 
1691
 
 
1692
 
class TestResourceLoading(tests.TestCaseInTempDir):
 
1044
class TestLocalTimeOffset(TestCase):
 
1045
 
 
1046
    def test_local_time_offset(self):
 
1047
        """Test that local_time_offset() returns a sane value."""
 
1048
        offset = osutils.local_time_offset()
 
1049
        self.assertTrue(isinstance(offset, int))
 
1050
        # Test that the offset is no more than a eighteen hours in
 
1051
        # either direction.
 
1052
        # Time zone handling is system specific, so it is difficult to
 
1053
        # do more specific tests, but a value outside of this range is
 
1054
        # probably wrong.
 
1055
        eighteen_hours = 18 * 3600
 
1056
        self.assertTrue(-eighteen_hours < offset < eighteen_hours)
 
1057
 
 
1058
    def test_local_time_offset_with_timestamp(self):
 
1059
        """Test that local_time_offset() works with a timestamp."""
 
1060
        offset = osutils.local_time_offset(1000000000.1234567)
 
1061
        self.assertTrue(isinstance(offset, int))
 
1062
        eighteen_hours = 18 * 3600
 
1063
        self.assertTrue(-eighteen_hours < offset < eighteen_hours)
 
1064
 
 
1065
 
 
1066
class TestShaFileByName(TestCaseInTempDir):
 
1067
 
 
1068
    def test_sha_empty(self):
 
1069
        self.build_tree_contents([('foo', '')])
 
1070
        expected_sha = osutils.sha_string('')
 
1071
        self.assertEqual(expected_sha, osutils.sha_file_by_name('foo'))
 
1072
 
 
1073
    def test_sha_mixed_endings(self):
 
1074
        text = 'test\r\nwith\nall\rpossible line endings\r\n'
 
1075
        self.build_tree_contents([('foo', text)])
 
1076
        expected_sha = osutils.sha_string(text)
 
1077
        self.assertEqual(expected_sha, osutils.sha_file_by_name('foo'))
 
1078
 
 
1079
 
 
1080
_debug_text = \
 
1081
r'''# Copyright (C) 2005, 2006 Canonical Ltd
 
1082
#
 
1083
# This program is free software; you can redistribute it and/or modify
 
1084
# it under the terms of the GNU General Public License as published by
 
1085
# the Free Software Foundation; either version 2 of the License, or
 
1086
# (at your option) any later version.
 
1087
#
 
1088
# This program is distributed in the hope that it will be useful,
 
1089
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
1090
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
1091
# GNU General Public License for more details.
 
1092
#
 
1093
# You should have received a copy of the GNU General Public License
 
1094
# along with this program; if not, write to the Free Software
 
1095
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
1096
 
 
1097
 
 
1098
# NOTE: If update these, please also update the help for global-options in
 
1099
#       bzrlib/help_topics/__init__.py
 
1100
 
 
1101
debug_flags = set()
 
1102
"""Set of flags that enable different debug behaviour.
 
1103
 
 
1104
These are set with eg ``-Dlock`` on the bzr command line.
 
1105
 
 
1106
Options include:
 
1107
 
 
1108
 * auth - show authentication sections used
 
1109
 * error - show stack traces for all top level exceptions
 
1110
 * evil - capture call sites that do expensive or badly-scaling operations.
 
1111
 * fetch - trace history copying between repositories
 
1112
 * hashcache - log every time a working file is read to determine its hash
 
1113
 * hooks - trace hook execution
 
1114
 * hpss - trace smart protocol requests and responses
 
1115
 * http - trace http connections, requests and responses
 
1116
 * index - trace major index operations
 
1117
 * knit - trace knit operations
 
1118
 * lock - trace when lockdir locks are taken or released
 
1119
 * merge - emit information for debugging merges
 
1120
 * pack - emit information about pack operations
 
1121
 * selftest_debug - do not disable all debug flags when running selftest
 
1122
 
 
1123
"""
 
1124
'''
 
1125
 
 
1126
 
 
1127
class TestResourceLoading(TestCaseInTempDir):
1693
1128
 
1694
1129
    def test_resource_string(self):
1695
1130
        # test resource in bzrlib
1696
1131
        text = osutils.resource_string('bzrlib', 'debug.py')
1697
 
        self.assertContainsRe(text, "debug_flags = set()")
 
1132
        self.assertEquals(_debug_text, text)
1698
1133
        # test resource under bzrlib
1699
1134
        text = osutils.resource_string('bzrlib.ui', 'text.py')
1700
1135
        self.assertContainsRe(text, "class TextUIFactory")
1703
1138
            'yyy.xx')
1704
1139
        # test unknown resource
1705
1140
        self.assertRaises(IOError, osutils.resource_string, 'bzrlib', 'yyy.xx')
1706
 
 
1707
 
 
1708
 
class TestReCompile(tests.TestCase):
1709
 
 
1710
 
    def _deprecated_re_compile_checked(self, *args, **kwargs):
1711
 
        return self.applyDeprecated(symbol_versioning.deprecated_in((2, 2, 0)),
1712
 
            osutils.re_compile_checked, *args, **kwargs)
1713
 
 
1714
 
    def test_re_compile_checked(self):
1715
 
        r = self._deprecated_re_compile_checked(r'A*', re.IGNORECASE)
1716
 
        self.assertTrue(r.match('aaaa'))
1717
 
        self.assertTrue(r.match('aAaA'))
1718
 
 
1719
 
    def test_re_compile_checked_error(self):
1720
 
        # like https://bugs.launchpad.net/bzr/+bug/251352
1721
 
 
1722
 
        # Due to possible test isolation error, re.compile is not lazy at
1723
 
        # this point. We re-install lazy compile.
1724
 
        lazy_regex.install_lazy_compile()
1725
 
        err = self.assertRaises(
1726
 
            errors.BzrCommandError,
1727
 
            self._deprecated_re_compile_checked, '*', re.IGNORECASE, 'test case')
1728
 
        self.assertEqual(
1729
 
            'Invalid regular expression in test case: '
1730
 
            '"*" nothing to repeat',
1731
 
            str(err))
1732
 
 
1733
 
 
1734
 
class TestDirReader(tests.TestCaseInTempDir):
1735
 
 
1736
 
    # Set by load_tests
1737
 
    _dir_reader_class = None
1738
 
    _native_to_unicode = None
1739
 
 
1740
 
    def setUp(self):
1741
 
        tests.TestCaseInTempDir.setUp(self)
1742
 
        self.overrideAttr(osutils,
1743
 
                          '_selected_dir_reader', self._dir_reader_class())
1744
 
 
1745
 
    def _get_ascii_tree(self):
1746
 
        tree = [
1747
 
            '0file',
1748
 
            '1dir/',
1749
 
            '1dir/0file',
1750
 
            '1dir/1dir/',
1751
 
            '2file'
1752
 
            ]
1753
 
        expected_dirblocks = [
1754
 
                (('', '.'),
1755
 
                 [('0file', '0file', 'file'),
1756
 
                  ('1dir', '1dir', 'directory'),
1757
 
                  ('2file', '2file', 'file'),
1758
 
                 ]
1759
 
                ),
1760
 
                (('1dir', './1dir'),
1761
 
                 [('1dir/0file', '0file', 'file'),
1762
 
                  ('1dir/1dir', '1dir', 'directory'),
1763
 
                 ]
1764
 
                ),
1765
 
                (('1dir/1dir', './1dir/1dir'),
1766
 
                 [
1767
 
                 ]
1768
 
                ),
1769
 
            ]
1770
 
        return tree, expected_dirblocks
1771
 
 
1772
 
    def test_walk_cur_dir(self):
1773
 
        tree, expected_dirblocks = self._get_ascii_tree()
1774
 
        self.build_tree(tree)
1775
 
        result = list(osutils._walkdirs_utf8('.'))
1776
 
        # Filter out stat and abspath
1777
 
        self.assertEqual(expected_dirblocks,
1778
 
                         [(dirinfo, [line[0:3] for line in block])
1779
 
                          for dirinfo, block in result])
1780
 
 
1781
 
    def test_walk_sub_dir(self):
1782
 
        tree, expected_dirblocks = self._get_ascii_tree()
1783
 
        self.build_tree(tree)
1784
 
        # you can search a subdir only, with a supplied prefix.
1785
 
        result = list(osutils._walkdirs_utf8('./1dir', '1dir'))
1786
 
        # Filter out stat and abspath
1787
 
        self.assertEqual(expected_dirblocks[1:],
1788
 
                         [(dirinfo, [line[0:3] for line in block])
1789
 
                          for dirinfo, block in result])
1790
 
 
1791
 
    def _get_unicode_tree(self):
1792
 
        name0u = u'0file-\xb6'
1793
 
        name1u = u'1dir-\u062c\u0648'
1794
 
        name2u = u'2file-\u0633'
1795
 
        tree = [
1796
 
            name0u,
1797
 
            name1u + '/',
1798
 
            name1u + '/' + name0u,
1799
 
            name1u + '/' + name1u + '/',
1800
 
            name2u,
1801
 
            ]
1802
 
        name0 = name0u.encode('UTF-8')
1803
 
        name1 = name1u.encode('UTF-8')
1804
 
        name2 = name2u.encode('UTF-8')
1805
 
        expected_dirblocks = [
1806
 
                (('', '.'),
1807
 
                 [(name0, name0, 'file', './' + name0u),
1808
 
                  (name1, name1, 'directory', './' + name1u),
1809
 
                  (name2, name2, 'file', './' + name2u),
1810
 
                 ]
1811
 
                ),
1812
 
                ((name1, './' + name1u),
1813
 
                 [(name1 + '/' + name0, name0, 'file', './' + name1u
1814
 
                                                        + '/' + name0u),
1815
 
                  (name1 + '/' + name1, name1, 'directory', './' + name1u
1816
 
                                                            + '/' + name1u),
1817
 
                 ]
1818
 
                ),
1819
 
                ((name1 + '/' + name1, './' + name1u + '/' + name1u),
1820
 
                 [
1821
 
                 ]
1822
 
                ),
1823
 
            ]
1824
 
        return tree, expected_dirblocks
1825
 
 
1826
 
    def _filter_out(self, raw_dirblocks):
1827
 
        """Filter out a walkdirs_utf8 result.
1828
 
 
1829
 
        stat field is removed, all native paths are converted to unicode
1830
 
        """
1831
 
        filtered_dirblocks = []
1832
 
        for dirinfo, block in raw_dirblocks:
1833
 
            dirinfo = (dirinfo[0], self._native_to_unicode(dirinfo[1]))
1834
 
            details = []
1835
 
            for line in block:
1836
 
                details.append(line[0:3] + (self._native_to_unicode(line[4]), ))
1837
 
            filtered_dirblocks.append((dirinfo, details))
1838
 
        return filtered_dirblocks
1839
 
 
1840
 
    def test_walk_unicode_tree(self):
1841
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1842
 
        tree, expected_dirblocks = self._get_unicode_tree()
1843
 
        self.build_tree(tree)
1844
 
        result = list(osutils._walkdirs_utf8('.'))
1845
 
        self.assertEqual(expected_dirblocks, self._filter_out(result))
1846
 
 
1847
 
    def test_symlink(self):
1848
 
        self.requireFeature(tests.SymlinkFeature)
1849
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1850
 
        target = u'target\N{Euro Sign}'
1851
 
        link_name = u'l\N{Euro Sign}nk'
1852
 
        os.symlink(target, link_name)
1853
 
        target_utf8 = target.encode('UTF-8')
1854
 
        link_name_utf8 = link_name.encode('UTF-8')
1855
 
        expected_dirblocks = [
1856
 
                (('', '.'),
1857
 
                 [(link_name_utf8, link_name_utf8,
1858
 
                   'symlink', './' + link_name),],
1859
 
                 )]
1860
 
        result = list(osutils._walkdirs_utf8('.'))
1861
 
        self.assertEqual(expected_dirblocks, self._filter_out(result))
1862
 
 
1863
 
 
1864
 
class TestReadLink(tests.TestCaseInTempDir):
1865
 
    """Exposes os.readlink() problems and the osutils solution.
1866
 
 
1867
 
    The only guarantee offered by os.readlink(), starting with 2.6, is that a
1868
 
    unicode string will be returned if a unicode string is passed.
1869
 
 
1870
 
    But prior python versions failed to properly encode the passed unicode
1871
 
    string.
1872
 
    """
1873
 
    _test_needs_features = [tests.SymlinkFeature, tests.UnicodeFilenameFeature]
1874
 
 
1875
 
    def setUp(self):
1876
 
        super(tests.TestCaseInTempDir, self).setUp()
1877
 
        self.link = u'l\N{Euro Sign}ink'
1878
 
        self.target = u'targe\N{Euro Sign}t'
1879
 
        os.symlink(self.target, self.link)
1880
 
 
1881
 
    def test_os_readlink_link_encoding(self):
1882
 
        if sys.version_info < (2, 6):
1883
 
            self.assertRaises(UnicodeEncodeError, os.readlink, self.link)
1884
 
        else:
1885
 
            self.assertEquals(self.target,  os.readlink(self.link))
1886
 
 
1887
 
    def test_os_readlink_link_decoding(self):
1888
 
        self.assertEquals(self.target.encode(osutils._fs_enc),
1889
 
                          os.readlink(self.link.encode(osutils._fs_enc)))
1890
 
 
1891
 
 
1892
 
class TestConcurrency(tests.TestCase):
1893
 
 
1894
 
    def setUp(self):
1895
 
        super(TestConcurrency, self).setUp()
1896
 
        self.overrideAttr(osutils, '_cached_local_concurrency')
1897
 
 
1898
 
    def test_local_concurrency(self):
1899
 
        concurrency = osutils.local_concurrency()
1900
 
        self.assertIsInstance(concurrency, int)
1901
 
 
1902
 
    def test_local_concurrency_environment_variable(self):
1903
 
        os.environ['BZR_CONCURRENCY'] = '2'
1904
 
        self.assertEqual(2, osutils.local_concurrency(use_cache=False))
1905
 
        os.environ['BZR_CONCURRENCY'] = '3'
1906
 
        self.assertEqual(3, osutils.local_concurrency(use_cache=False))
1907
 
        os.environ['BZR_CONCURRENCY'] = 'foo'
1908
 
        self.assertEqual(1, osutils.local_concurrency(use_cache=False))
1909
 
 
1910
 
    def test_option_concurrency(self):
1911
 
        os.environ['BZR_CONCURRENCY'] = '1'
1912
 
        self.run_bzr('rocks --concurrency 42')
1913
 
        # Command line overrides envrionment variable
1914
 
        self.assertEquals('42', os.environ['BZR_CONCURRENCY'])
1915
 
        self.assertEquals(42, osutils.local_concurrency(use_cache=False))
1916
 
 
1917
 
 
1918
 
class TestFailedToLoadExtension(tests.TestCase):
1919
 
 
1920
 
    def _try_loading(self):
1921
 
        try:
1922
 
            import bzrlib._fictional_extension_py
1923
 
        except ImportError, e:
1924
 
            osutils.failed_to_load_extension(e)
1925
 
            return True
1926
 
 
1927
 
    def setUp(self):
1928
 
        super(TestFailedToLoadExtension, self).setUp()
1929
 
        self.overrideAttr(osutils, '_extension_load_failures', [])
1930
 
 
1931
 
    def test_failure_to_load(self):
1932
 
        self._try_loading()
1933
 
        self.assertLength(1, osutils._extension_load_failures)
1934
 
        self.assertEquals(osutils._extension_load_failures[0],
1935
 
            "No module named _fictional_extension_py")
1936
 
 
1937
 
    def test_report_extension_load_failures_no_warning(self):
1938
 
        self.assertTrue(self._try_loading())
1939
 
        warnings, result = self.callCatchWarnings(osutils.report_extension_load_failures)
1940
 
        # it used to give a Python warning; it no longer does
1941
 
        self.assertLength(0, warnings)
1942
 
 
1943
 
    def test_report_extension_load_failures_message(self):
1944
 
        log = StringIO()
1945
 
        trace.push_log_file(log)
1946
 
        self.assertTrue(self._try_loading())
1947
 
        osutils.report_extension_load_failures()
1948
 
        self.assertContainsRe(
1949
 
            log.getvalue(),
1950
 
            r"bzr: warning: some compiled extensions could not be loaded; "
1951
 
            "see <https://answers\.launchpad\.net/bzr/\+faq/703>\n"
1952
 
            )
1953
 
 
1954
 
 
1955
 
class TestTerminalWidth(tests.TestCase):
1956
 
 
1957
 
    def setUp(self):
1958
 
        tests.TestCase.setUp(self)
1959
 
        self._orig_terminal_size_state = osutils._terminal_size_state
1960
 
        self._orig_first_terminal_size = osutils._first_terminal_size
1961
 
        self.addCleanup(self.restore_osutils_globals)
1962
 
        osutils._terminal_size_state = 'no_data'
1963
 
        osutils._first_terminal_size = None
1964
 
 
1965
 
    def restore_osutils_globals(self):
1966
 
        osutils._terminal_size_state = self._orig_terminal_size_state
1967
 
        osutils._first_terminal_size = self._orig_first_terminal_size
1968
 
 
1969
 
    def replace_stdout(self, new):
1970
 
        self.overrideAttr(sys, 'stdout', new)
1971
 
 
1972
 
    def replace__terminal_size(self, new):
1973
 
        self.overrideAttr(osutils, '_terminal_size', new)
1974
 
 
1975
 
    def set_fake_tty(self):
1976
 
 
1977
 
        class I_am_a_tty(object):
1978
 
            def isatty(self):
1979
 
                return True
1980
 
 
1981
 
        self.replace_stdout(I_am_a_tty())
1982
 
 
1983
 
    def test_default_values(self):
1984
 
        self.assertEqual(80, osutils.default_terminal_width)
1985
 
 
1986
 
    def test_defaults_to_BZR_COLUMNS(self):
1987
 
        # BZR_COLUMNS is set by the test framework
1988
 
        self.assertNotEqual('12', os.environ['BZR_COLUMNS'])
1989
 
        os.environ['BZR_COLUMNS'] = '12'
1990
 
        self.assertEqual(12, osutils.terminal_width())
1991
 
 
1992
 
    def test_falls_back_to_COLUMNS(self):
1993
 
        del os.environ['BZR_COLUMNS']
1994
 
        self.assertNotEqual('42', os.environ['COLUMNS'])
1995
 
        self.set_fake_tty()
1996
 
        os.environ['COLUMNS'] = '42'
1997
 
        self.assertEqual(42, osutils.terminal_width())
1998
 
 
1999
 
    def test_tty_default_without_columns(self):
2000
 
        del os.environ['BZR_COLUMNS']
2001
 
        del os.environ['COLUMNS']
2002
 
 
2003
 
        def terminal_size(w, h):
2004
 
            return 42, 42
2005
 
 
2006
 
        self.set_fake_tty()
2007
 
        # We need to override the osutils definition as it depends on the
2008
 
        # running environment that we can't control (PQM running without a
2009
 
        # controlling terminal is one example).
2010
 
        self.replace__terminal_size(terminal_size)
2011
 
        self.assertEqual(42, osutils.terminal_width())
2012
 
 
2013
 
    def test_non_tty_default_without_columns(self):
2014
 
        del os.environ['BZR_COLUMNS']
2015
 
        del os.environ['COLUMNS']
2016
 
        self.replace_stdout(None)
2017
 
        self.assertEqual(None, osutils.terminal_width())
2018
 
 
2019
 
    def test_no_TIOCGWINSZ(self):
2020
 
        self.requireFeature(term_ios_feature)
2021
 
        termios = term_ios_feature.module
2022
 
        # bug 63539 is about a termios without TIOCGWINSZ attribute
2023
 
        try:
2024
 
            orig = termios.TIOCGWINSZ
2025
 
        except AttributeError:
2026
 
            # We won't remove TIOCGWINSZ, because it doesn't exist anyway :)
2027
 
            pass
2028
 
        else:
2029
 
            self.overrideAttr(termios, 'TIOCGWINSZ')
2030
 
            del termios.TIOCGWINSZ
2031
 
        del os.environ['BZR_COLUMNS']
2032
 
        del os.environ['COLUMNS']
2033
 
        # Whatever the result is, if we don't raise an exception, it's ok.
2034
 
        osutils.terminal_width()
2035
 
 
2036
 
class TestCreationOps(tests.TestCaseInTempDir):
2037
 
    _test_needs_features = [features.chown_feature]
2038
 
 
2039
 
    def setUp(self):
2040
 
        tests.TestCaseInTempDir.setUp(self)
2041
 
        self.overrideAttr(os, 'chown', self._dummy_chown)
2042
 
 
2043
 
        # params set by call to _dummy_chown
2044
 
        self.path = self.uid = self.gid = None
2045
 
 
2046
 
    def _dummy_chown(self, path, uid, gid):
2047
 
        self.path, self.uid, self.gid = path, uid, gid
2048
 
 
2049
 
    def test_copy_ownership_from_path(self):
2050
 
        """copy_ownership_from_path test with specified src."""
2051
 
        ownsrc = '/'
2052
 
        f = open('test_file', 'wt')
2053
 
        osutils.copy_ownership_from_path('test_file', ownsrc)
2054
 
 
2055
 
        s = os.stat(ownsrc)
2056
 
        self.assertEquals(self.path, 'test_file')
2057
 
        self.assertEquals(self.uid, s.st_uid)
2058
 
        self.assertEquals(self.gid, s.st_gid)
2059
 
 
2060
 
    def test_copy_ownership_nonesrc(self):
2061
 
        """copy_ownership_from_path test with src=None."""
2062
 
        f = open('test_file', 'wt')
2063
 
        # should use parent dir for permissions
2064
 
        osutils.copy_ownership_from_path('test_file')
2065
 
 
2066
 
        s = os.stat('..')
2067
 
        self.assertEquals(self.path, 'test_file')
2068
 
        self.assertEquals(self.uid, s.st_uid)
2069
 
        self.assertEquals(self.gid, s.st_gid)
2070
 
 
2071
 
class TestGetuserUnicode(tests.TestCase):
2072
 
 
2073
 
    def test_ascii_user(self):
2074
 
        osutils.set_or_unset_env('LOGNAME', 'jrandom')
2075
 
        self.assertEqual(u'jrandom', osutils.getuser_unicode())
2076
 
 
2077
 
    def test_unicode_user(self):
2078
 
        ue = osutils.get_user_encoding()
2079
 
        osutils.set_or_unset_env('LOGNAME', u'jrandom\xb6'.encode(ue))
2080
 
        self.assertEqual(u'jrandom\xb6', osutils.getuser_unicode())