~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/selftest/testtransport.py

  • Committer: Robert Collins
  • Date: 2005-10-30 01:40:16 UTC
  • Revision ID: robertc@robertcollins.net-20051030014016-98a4fba7d6a4176c
Support decoration of commands.

Commands.register_command now takes an optional flag to signal that the
registrant is planning to decorate an existing command. When given
multiple plugins registering a command is not an error, and the original
command class (whether built in or a plugin based one) is returned to the
caller. There is a new error 'MustUseDecorated' for signalling when a
wrapping command should switch to the original version. (Robert Collins)

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2004, 2005, 2006 Canonical Ltd
2
 
#
 
1
# Copyright (C) 2004, 2005 by Canonical Ltd
 
2
 
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
5
5
# the Free Software Foundation; either version 2 of the License, or
6
6
# (at your option) any later version.
7
 
#
 
7
 
8
8
# This program is distributed in the hope that it will be useful,
9
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
10
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11
11
# GNU General Public License for more details.
12
 
#
 
12
 
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
 
18
18
import os
19
 
import sys
20
 
import stat
21
19
from cStringIO import StringIO
22
20
 
23
 
import bzrlib
24
 
from bzrlib import urlutils
25
 
from bzrlib.errors import (NoSuchFile, FileExists,
26
 
                           TransportNotPossible,
27
 
                           ConnectionError,
28
 
                           DependencyNotPresent,
29
 
                           UnsupportedProtocol,
30
 
                           PathNotChild,
31
 
                           )
32
 
from bzrlib.tests import TestCase, TestCaseInTempDir
33
 
from bzrlib.transport import (_CoalescedOffset,
34
 
                              _get_protocol_handlers,
35
 
                              _get_transport_modules,
36
 
                              get_transport,
37
 
                              register_lazy_transport,
38
 
                              _set_protocol_handlers,
39
 
                              Transport,
40
 
                              )
41
 
from bzrlib.transport.memory import MemoryTransport
42
 
from bzrlib.transport.local import (LocalTransport,
43
 
                                    EmulatedWin32LocalTransport)
44
 
 
45
 
 
46
 
# TODO: Should possibly split transport-specific tests into their own files.
47
 
 
 
21
from bzrlib.errors import NoSuchFile, FileExists, TransportNotPossible
 
22
from bzrlib.selftest import TestCase, TestCaseInTempDir
 
23
from bzrlib.selftest.HTTPTestUtil import TestCaseWithWebserver
 
24
from bzrlib.transport import memory, urlescape
 
25
 
 
26
 
 
27
def _append(fn, txt):
 
28
    """Append the given text (file-like object) to the supplied filename."""
 
29
    f = open(fn, 'ab')
 
30
    f.write(txt)
 
31
    f.flush()
 
32
    f.close()
 
33
    del f
48
34
 
49
35
class TestTransport(TestCase):
50
36
    """Test the non transport-concrete class functionality."""
51
37
 
52
 
    def test__get_set_protocol_handlers(self):
53
 
        handlers = _get_protocol_handlers()
54
 
        self.assertNotEqual({}, handlers)
55
 
        try:
56
 
            _set_protocol_handlers({})
57
 
            self.assertEqual({}, _get_protocol_handlers())
58
 
        finally:
59
 
            _set_protocol_handlers(handlers)
60
 
 
61
 
    def test_get_transport_modules(self):
62
 
        handlers = _get_protocol_handlers()
63
 
        class SampleHandler(object):
64
 
            """I exist, isnt that enough?"""
65
 
        try:
66
 
            my_handlers = {}
67
 
            _set_protocol_handlers(my_handlers)
68
 
            register_lazy_transport('foo', 'bzrlib.tests.test_transport', 'TestTransport.SampleHandler')
69
 
            register_lazy_transport('bar', 'bzrlib.tests.test_transport', 'TestTransport.SampleHandler')
70
 
            self.assertEqual([SampleHandler.__module__],
71
 
                             _get_transport_modules())
72
 
        finally:
73
 
            _set_protocol_handlers(handlers)
74
 
 
75
 
    def test_transport_dependency(self):
76
 
        """Transport with missing dependency causes no error"""
77
 
        saved_handlers = _get_protocol_handlers()
78
 
        try:
79
 
            register_lazy_transport('foo', 'bzrlib.tests.test_transport',
80
 
                    'BadTransportHandler')
81
 
            try:
82
 
                get_transport('foo://fooserver/foo')
83
 
            except UnsupportedProtocol, e:
84
 
                e_str = str(e)
85
 
                self.assertEquals('Unsupported protocol'
86
 
                                  ' for url "foo://fooserver/foo":'
87
 
                                  ' Unable to import library "some_lib":'
88
 
                                  ' testing missing dependency', str(e))
89
 
            else:
90
 
                self.fail('Did not raise UnsupportedProtocol')
91
 
        finally:
92
 
            # restore original values
93
 
            _set_protocol_handlers(saved_handlers)
94
 
            
95
 
    def test_transport_fallback(self):
96
 
        """Transport with missing dependency causes no error"""
97
 
        saved_handlers = _get_protocol_handlers()
98
 
        try:
99
 
            _set_protocol_handlers({})
100
 
            register_lazy_transport('foo', 'bzrlib.tests.test_transport',
101
 
                    'BackupTransportHandler')
102
 
            register_lazy_transport('foo', 'bzrlib.tests.test_transport',
103
 
                    'BadTransportHandler')
104
 
            t = get_transport('foo://fooserver/foo')
105
 
            self.assertTrue(isinstance(t, BackupTransportHandler))
106
 
        finally:
107
 
            _set_protocol_handlers(saved_handlers)
108
 
 
109
 
    def test__combine_paths(self):
110
 
        t = Transport('/')
111
 
        self.assertEqual('/home/sarah/project/foo',
112
 
                         t._combine_paths('/home/sarah', 'project/foo'))
113
 
        self.assertEqual('/etc',
114
 
                         t._combine_paths('/home/sarah', '../../etc'))
115
 
        self.assertEqual('/etc',
116
 
                         t._combine_paths('/home/sarah', '../../../etc'))
117
 
        self.assertEqual('/etc',
118
 
                         t._combine_paths('/home/sarah', '/etc'))
119
 
 
120
 
 
121
 
class TestCoalesceOffsets(TestCase):
122
 
    
123
 
    def check(self, expected, offsets, limit=0, fudge=0):
124
 
        coalesce = Transport._coalesce_offsets
125
 
        exp = [_CoalescedOffset(*x) for x in expected]
126
 
        out = list(coalesce(offsets, limit=limit, fudge_factor=fudge))
127
 
        self.assertEqual(exp, out)
128
 
 
129
 
    def test_coalesce_empty(self):
130
 
        self.check([], [])
131
 
 
132
 
    def test_coalesce_simple(self):
133
 
        self.check([(0, 10, [(0, 10)])], [(0, 10)])
134
 
 
135
 
    def test_coalesce_unrelated(self):
136
 
        self.check([(0, 10, [(0, 10)]),
137
 
                    (20, 10, [(0, 10)]),
138
 
                   ], [(0, 10), (20, 10)])
139
 
            
140
 
    def test_coalesce_unsorted(self):
141
 
        self.check([(20, 10, [(0, 10)]),
142
 
                    (0, 10, [(0, 10)]),
143
 
                   ], [(20, 10), (0, 10)])
144
 
 
145
 
    def test_coalesce_nearby(self):
146
 
        self.check([(0, 20, [(0, 10), (10, 10)])],
147
 
                   [(0, 10), (10, 10)])
148
 
 
149
 
    def test_coalesce_overlapped(self):
150
 
        self.check([(0, 15, [(0, 10), (5, 10)])],
151
 
                   [(0, 10), (5, 10)])
152
 
 
153
 
    def test_coalesce_limit(self):
154
 
        self.check([(10, 50, [(0, 10), (10, 10), (20, 10),
155
 
                              (30, 10), (40, 10)]),
156
 
                    (60, 50, [(0, 10), (10, 10), (20, 10),
157
 
                              (30, 10), (40, 10)]),
158
 
                   ], [(10, 10), (20, 10), (30, 10), (40, 10),
159
 
                       (50, 10), (60, 10), (70, 10), (80, 10),
160
 
                       (90, 10), (100, 10)],
161
 
                    limit=5)
162
 
 
163
 
    def test_coalesce_no_limit(self):
164
 
        self.check([(10, 100, [(0, 10), (10, 10), (20, 10),
165
 
                               (30, 10), (40, 10), (50, 10),
166
 
                               (60, 10), (70, 10), (80, 10),
167
 
                               (90, 10)]),
168
 
                   ], [(10, 10), (20, 10), (30, 10), (40, 10),
169
 
                       (50, 10), (60, 10), (70, 10), (80, 10),
170
 
                       (90, 10), (100, 10)])
171
 
 
172
 
    def test_coalesce_fudge(self):
173
 
        self.check([(10, 30, [(0, 10), (20, 10)]),
174
 
                    (100, 10, [(0, 10),]),
175
 
                   ], [(10, 10), (30, 10), (100, 10)],
176
 
                   fudge=10
177
 
                  )
 
38
    def test_urlescape(self):
 
39
        self.assertEqual('%25', urlescape('%'))
 
40
 
 
41
 
 
42
class TestTransportMixIn(object):
 
43
    """Subclass this, and it will provide a series of tests for a Transport.
 
44
    It assumes that the Transport object is connected to the 
 
45
    current working directory.  So that whatever is done 
 
46
    through the transport, should show up in the working 
 
47
    directory, and vice-versa.
 
48
 
 
49
    This also tests to make sure that the functions work with both
 
50
    generators and lists (assuming iter(list) is effectively a generator)
 
51
    """
 
52
    readonly = False
 
53
    def get_transport(self):
 
54
        """Children should override this to return the Transport object.
 
55
        """
 
56
        raise NotImplementedError
 
57
 
 
58
    def test_has(self):
 
59
        t = self.get_transport()
 
60
 
 
61
        files = ['a', 'b', 'e', 'g', '%']
 
62
        self.build_tree(files)
 
63
        self.assertEqual(t.has('a'), True)
 
64
        self.assertEqual(t.has('c'), False)
 
65
        self.assertEqual(t.has(urlescape('%')), True)
 
66
        self.assertEqual(list(t.has_multi(['a', 'b', 'c', 'd', 'e', 'f', 'g', 'h'])),
 
67
                [True, True, False, False, True, False, True, False])
 
68
        self.assertEqual(list(t.has_multi(iter(['a', 'b', 'c', 'd', 'e', 'f', 'g', 'h']))),
 
69
                [True, True, False, False, True, False, True, False])
 
70
 
 
71
    def test_get(self):
 
72
        t = self.get_transport()
 
73
 
 
74
        files = ['a', 'b', 'e', 'g']
 
75
        self.build_tree(files)
 
76
        self.assertEqual(t.get('a').read(), open('a').read())
 
77
        content_f = t.get_multi(files)
 
78
        for path,f in zip(files, content_f):
 
79
            self.assertEqual(open(path).read(), f.read())
 
80
 
 
81
        content_f = t.get_multi(iter(files))
 
82
        for path,f in zip(files, content_f):
 
83
            self.assertEqual(open(path).read(), f.read())
 
84
 
 
85
        self.assertRaises(NoSuchFile, t.get, 'c')
 
86
        try:
 
87
            files = list(t.get_multi(['a', 'b', 'c']))
 
88
        except NoSuchFile:
 
89
            pass
 
90
        else:
 
91
            self.fail('Failed to raise NoSuchFile for missing file in get_multi')
 
92
        try:
 
93
            files = list(t.get_multi(iter(['a', 'b', 'c', 'e'])))
 
94
        except NoSuchFile:
 
95
            pass
 
96
        else:
 
97
            self.fail('Failed to raise NoSuchFile for missing file in get_multi')
 
98
 
 
99
    def test_put(self):
 
100
        t = self.get_transport()
 
101
 
 
102
        if self.readonly:
 
103
            self.assertRaises(TransportNotPossible,
 
104
                    t.put, 'a', 'some text for a\n')
 
105
            open('a', 'wb').write('some text for a\n')
 
106
        else:
 
107
            t.put('a', 'some text for a\n')
 
108
        self.assert_(os.path.exists('a'))
 
109
        self.check_file_contents('a', 'some text for a\n')
 
110
        self.assertEqual(t.get('a').read(), 'some text for a\n')
 
111
        # Make sure 'has' is updated
 
112
        self.assertEqual(list(t.has_multi(['a', 'b', 'c', 'd', 'e'])),
 
113
                [True, False, False, False, False])
 
114
        if self.readonly:
 
115
            self.assertRaises(TransportNotPossible,
 
116
                    t.put_multi,
 
117
                    [('a', 'new\ncontents for\na\n'),
 
118
                        ('d', 'contents\nfor d\n')])
 
119
            open('a', 'wb').write('new\ncontents for\na\n')
 
120
            open('d', 'wb').write('contents\nfor d\n')
 
121
        else:
 
122
            # Put also replaces contents
 
123
            self.assertEqual(t.put_multi([('a', 'new\ncontents for\na\n'),
 
124
                                          ('d', 'contents\nfor d\n')]),
 
125
                             2)
 
126
        self.assertEqual(list(t.has_multi(['a', 'b', 'c', 'd', 'e'])),
 
127
                [True, False, False, True, False])
 
128
        self.check_file_contents('a', 'new\ncontents for\na\n')
 
129
        self.check_file_contents('d', 'contents\nfor d\n')
 
130
 
 
131
        if self.readonly:
 
132
            self.assertRaises(TransportNotPossible,
 
133
                t.put_multi, iter([('a', 'diff\ncontents for\na\n'),
 
134
                                  ('d', 'another contents\nfor d\n')]))
 
135
            open('a', 'wb').write('diff\ncontents for\na\n')
 
136
            open('d', 'wb').write('another contents\nfor d\n')
 
137
        else:
 
138
            self.assertEqual(
 
139
                t.put_multi(iter([('a', 'diff\ncontents for\na\n'),
 
140
                                  ('d', 'another contents\nfor d\n')]))
 
141
                             , 2)
 
142
        self.check_file_contents('a', 'diff\ncontents for\na\n')
 
143
        self.check_file_contents('d', 'another contents\nfor d\n')
 
144
 
 
145
        if self.readonly:
 
146
            self.assertRaises(TransportNotPossible,
 
147
                    t.put, 'path/doesnt/exist/c', 'contents')
 
148
        else:
 
149
            self.assertRaises(NoSuchFile,
 
150
                    t.put, 'path/doesnt/exist/c', 'contents')
 
151
 
 
152
    def test_put_file(self):
 
153
        t = self.get_transport()
 
154
 
 
155
        # Test that StringIO can be used as a file-like object with put
 
156
        f1 = StringIO('this is a string\nand some more stuff\n')
 
157
        if self.readonly:
 
158
            open('f1', 'wb').write(f1.read())
 
159
        else:
 
160
            t.put('f1', f1)
 
161
 
 
162
        del f1
 
163
 
 
164
        self.check_file_contents('f1', 
 
165
                'this is a string\nand some more stuff\n')
 
166
 
 
167
        f2 = StringIO('here is some text\nand a bit more\n')
 
168
        f3 = StringIO('some text for the\nthird file created\n')
 
169
 
 
170
        if self.readonly:
 
171
            open('f2', 'wb').write(f2.read())
 
172
            open('f3', 'wb').write(f3.read())
 
173
        else:
 
174
            t.put_multi([('f2', f2), ('f3', f3)])
 
175
 
 
176
        del f2, f3
 
177
 
 
178
        self.check_file_contents('f2', 'here is some text\nand a bit more\n')
 
179
        self.check_file_contents('f3', 'some text for the\nthird file created\n')
 
180
 
 
181
        # Test that an actual file object can be used with put
 
182
        f4 = open('f1', 'rb')
 
183
        if self.readonly:
 
184
            open('f4', 'wb').write(f4.read())
 
185
        else:
 
186
            t.put('f4', f4)
 
187
 
 
188
        del f4
 
189
 
 
190
        self.check_file_contents('f4', 
 
191
                'this is a string\nand some more stuff\n')
 
192
 
 
193
        f5 = open('f2', 'rb')
 
194
        f6 = open('f3', 'rb')
 
195
        if self.readonly:
 
196
            open('f5', 'wb').write(f5.read())
 
197
            open('f6', 'wb').write(f6.read())
 
198
        else:
 
199
            t.put_multi([('f5', f5), ('f6', f6)])
 
200
 
 
201
        del f5, f6
 
202
 
 
203
        self.check_file_contents('f5', 'here is some text\nand a bit more\n')
 
204
        self.check_file_contents('f6', 'some text for the\nthird file created\n')
 
205
 
 
206
 
 
207
 
 
208
    def test_mkdir(self):
 
209
        t = self.get_transport()
 
210
 
 
211
        # Test mkdir
 
212
        os.mkdir('dir_a')
 
213
        self.assertEqual(t.has('dir_a'), True)
 
214
        self.assertEqual(t.has('dir_b'), False)
 
215
 
 
216
        if self.readonly:
 
217
            self.assertRaises(TransportNotPossible,
 
218
                    t.mkdir, 'dir_b')
 
219
            os.mkdir('dir_b')
 
220
        else:
 
221
            t.mkdir('dir_b')
 
222
        self.assertEqual(t.has('dir_b'), True)
 
223
        self.assert_(os.path.isdir('dir_b'))
 
224
 
 
225
        if self.readonly:
 
226
            self.assertRaises(TransportNotPossible,
 
227
                    t.mkdir_multi, ['dir_c', 'dir_d'])
 
228
            os.mkdir('dir_c')
 
229
            os.mkdir('dir_d')
 
230
        else:
 
231
            t.mkdir_multi(['dir_c', 'dir_d'])
 
232
 
 
233
        if self.readonly:
 
234
            self.assertRaises(TransportNotPossible,
 
235
                    t.mkdir_multi, iter(['dir_e', 'dir_f']))
 
236
            os.mkdir('dir_e')
 
237
            os.mkdir('dir_f')
 
238
        else:
 
239
            t.mkdir_multi(iter(['dir_e', 'dir_f']))
 
240
        self.assertEqual(list(t.has_multi(
 
241
            ['dir_a', 'dir_b', 'dir_c', 'dir_q',
 
242
             'dir_d', 'dir_e', 'dir_f', 'dir_b'])),
 
243
            [True, True, True, False,
 
244
             True, True, True, True])
 
245
        for d in ['dir_a', 'dir_b', 'dir_c', 'dir_d', 'dir_e', 'dir_f']:
 
246
            self.assert_(os.path.isdir(d))
 
247
 
 
248
        if not self.readonly:
 
249
            self.assertRaises(NoSuchFile, t.mkdir, 'path/doesnt/exist')
 
250
            self.assertRaises(FileExists, t.mkdir, 'dir_a') # Creating a directory again should fail
 
251
 
 
252
        # Make sure the transport recognizes when a
 
253
        # directory is created by other means
 
254
        # Caching Transports will fail, because dir_e was already seen not
 
255
        # to exist. So instead, we will search for a new directory
 
256
        #os.mkdir('dir_e')
 
257
        #if not self.readonly:
 
258
        #    self.assertRaises(FileExists, t.mkdir, 'dir_e')
 
259
 
 
260
        os.mkdir('dir_g')
 
261
        if not self.readonly:
 
262
            self.assertRaises(FileExists, t.mkdir, 'dir_g')
 
263
 
 
264
        # Test get/put in sub-directories
 
265
        if self.readonly:
 
266
            open('dir_a/a', 'wb').write('contents of dir_a/a')
 
267
            open('dir_b/b', 'wb').write('contents of dir_b/b')
 
268
        else:
 
269
            self.assertEqual(
 
270
                t.put_multi([('dir_a/a', 'contents of dir_a/a'),
 
271
                             ('dir_b/b', 'contents of dir_b/b')])
 
272
                          , 2)
 
273
        for f in ('dir_a/a', 'dir_b/b'):
 
274
            self.assertEqual(t.get(f).read(), open(f).read())
 
275
 
 
276
    def test_copy_to(self):
 
277
        import tempfile
 
278
        from bzrlib.transport.local import LocalTransport
 
279
 
 
280
        t = self.get_transport()
 
281
 
 
282
        files = ['a', 'b', 'c', 'd']
 
283
        self.build_tree(files)
 
284
 
 
285
        dtmp = tempfile.mkdtemp(dir='.', prefix='test-transport-')
 
286
        dtmp_base = os.path.basename(dtmp)
 
287
        local_t = LocalTransport(dtmp)
 
288
 
 
289
        t.copy_to(files, local_t)
 
290
        for f in files:
 
291
            self.assertEquals(open(f).read(),
 
292
                    open(os.path.join(dtmp_base, f)).read())
 
293
 
 
294
        del dtmp, dtmp_base, local_t
 
295
 
 
296
        dtmp = tempfile.mkdtemp(dir='.', prefix='test-transport-')
 
297
        dtmp_base = os.path.basename(dtmp)
 
298
        local_t = LocalTransport(dtmp)
 
299
 
 
300
        files = ['a', 'b', 'c', 'd']
 
301
        t.copy_to(iter(files), local_t)
 
302
        for f in files:
 
303
            self.assertEquals(open(f).read(),
 
304
                    open(os.path.join(dtmp_base, f)).read())
 
305
 
 
306
        del dtmp, dtmp_base, local_t
 
307
 
 
308
    def test_append(self):
 
309
        t = self.get_transport()
 
310
 
 
311
        if self.readonly:
 
312
            open('a', 'wb').write('diff\ncontents for\na\n')
 
313
            open('b', 'wb').write('contents\nfor b\n')
 
314
        else:
 
315
            t.put_multi([
 
316
                    ('a', 'diff\ncontents for\na\n'),
 
317
                    ('b', 'contents\nfor b\n')
 
318
                    ])
 
319
 
 
320
        if self.readonly:
 
321
            self.assertRaises(TransportNotPossible,
 
322
                    t.append, 'a', 'add\nsome\nmore\ncontents\n')
 
323
            _append('a', 'add\nsome\nmore\ncontents\n')
 
324
        else:
 
325
            t.append('a', 'add\nsome\nmore\ncontents\n')
 
326
 
 
327
        self.check_file_contents('a', 
 
328
            'diff\ncontents for\na\nadd\nsome\nmore\ncontents\n')
 
329
 
 
330
        if self.readonly:
 
331
            self.assertRaises(TransportNotPossible,
 
332
                    t.append_multi,
 
333
                        [('a', 'and\nthen\nsome\nmore\n'),
 
334
                         ('b', 'some\nmore\nfor\nb\n')])
 
335
            _append('a', 'and\nthen\nsome\nmore\n')
 
336
            _append('b', 'some\nmore\nfor\nb\n')
 
337
        else:
 
338
            t.append_multi([('a', 'and\nthen\nsome\nmore\n'),
 
339
                    ('b', 'some\nmore\nfor\nb\n')])
 
340
        self.check_file_contents('a', 
 
341
            'diff\ncontents for\na\n'
 
342
            'add\nsome\nmore\ncontents\n'
 
343
            'and\nthen\nsome\nmore\n')
 
344
        self.check_file_contents('b', 
 
345
                'contents\nfor b\n'
 
346
                'some\nmore\nfor\nb\n')
 
347
 
 
348
        if self.readonly:
 
349
            _append('a', 'a little bit more\n')
 
350
            _append('b', 'from an iterator\n')
 
351
        else:
 
352
            t.append_multi(iter([('a', 'a little bit more\n'),
 
353
                    ('b', 'from an iterator\n')]))
 
354
        self.check_file_contents('a', 
 
355
            'diff\ncontents for\na\n'
 
356
            'add\nsome\nmore\ncontents\n'
 
357
            'and\nthen\nsome\nmore\n'
 
358
            'a little bit more\n')
 
359
        self.check_file_contents('b', 
 
360
                'contents\nfor b\n'
 
361
                'some\nmore\nfor\nb\n'
 
362
                'from an iterator\n')
 
363
 
 
364
    def test_append_file(self):
 
365
        t = self.get_transport()
 
366
 
 
367
        contents = [
 
368
            ('f1', 'this is a string\nand some more stuff\n'),
 
369
            ('f2', 'here is some text\nand a bit more\n'),
 
370
            ('f3', 'some text for the\nthird file created\n'),
 
371
            ('f4', 'this is a string\nand some more stuff\n'),
 
372
            ('f5', 'here is some text\nand a bit more\n'),
 
373
            ('f6', 'some text for the\nthird file created\n')
 
374
        ]
 
375
        
 
376
        if self.readonly:
 
377
            for f, val in contents:
 
378
                open(f, 'wb').write(val)
 
379
        else:
 
380
            t.put_multi(contents)
 
381
 
 
382
        a1 = StringIO('appending to\none\n')
 
383
        if self.readonly:
 
384
            _append('f1', a1.read())
 
385
        else:
 
386
            t.append('f1', a1)
 
387
 
 
388
        del a1
 
389
 
 
390
        self.check_file_contents('f1', 
 
391
                'this is a string\nand some more stuff\n'
 
392
                'appending to\none\n')
 
393
 
 
394
        a2 = StringIO('adding more\ntext to two\n')
 
395
        a3 = StringIO('some garbage\nto put in three\n')
 
396
 
 
397
        if self.readonly:
 
398
            _append('f2', a2.read())
 
399
            _append('f3', a3.read())
 
400
        else:
 
401
            t.append_multi([('f2', a2), ('f3', a3)])
 
402
 
 
403
        del a2, a3
 
404
 
 
405
        self.check_file_contents('f2',
 
406
                'here is some text\nand a bit more\n'
 
407
                'adding more\ntext to two\n')
 
408
        self.check_file_contents('f3', 
 
409
                'some text for the\nthird file created\n'
 
410
                'some garbage\nto put in three\n')
 
411
 
 
412
        # Test that an actual file object can be used with put
 
413
        a4 = open('f1', 'rb')
 
414
        if self.readonly:
 
415
            _append('f4', a4.read())
 
416
        else:
 
417
            t.append('f4', a4)
 
418
 
 
419
        del a4
 
420
 
 
421
        self.check_file_contents('f4', 
 
422
                'this is a string\nand some more stuff\n'
 
423
                'this is a string\nand some more stuff\n'
 
424
                'appending to\none\n')
 
425
 
 
426
        a5 = open('f2', 'rb')
 
427
        a6 = open('f3', 'rb')
 
428
        if self.readonly:
 
429
            _append('f5', a5.read())
 
430
            _append('f6', a6.read())
 
431
        else:
 
432
            t.append_multi([('f5', a5), ('f6', a6)])
 
433
 
 
434
        del a5, a6
 
435
 
 
436
        self.check_file_contents('f5',
 
437
                'here is some text\nand a bit more\n'
 
438
                'here is some text\nand a bit more\n'
 
439
                'adding more\ntext to two\n')
 
440
        self.check_file_contents('f6',
 
441
                'some text for the\nthird file created\n'
 
442
                'some text for the\nthird file created\n'
 
443
                'some garbage\nto put in three\n')
 
444
 
 
445
    def test_delete(self):
 
446
        # TODO: Test Transport.delete
 
447
        pass
 
448
 
 
449
    def test_move(self):
 
450
        # TODO: Test Transport.move
 
451
        pass
 
452
 
 
453
 
 
454
class LocalTransportTest(TestCaseInTempDir, TestTransportMixIn):
 
455
    def get_transport(self):
 
456
        from bzrlib.transport.local import LocalTransport
 
457
        return LocalTransport('.')
 
458
 
 
459
 
 
460
class HttpTransportTest(TestCaseWithWebserver, TestTransportMixIn):
 
461
 
 
462
    readonly = True
 
463
 
 
464
    def get_transport(self):
 
465
        from bzrlib.transport.http import HttpTransport
 
466
        url = self.get_remote_url('.')
 
467
        return HttpTransport(url)
178
468
 
179
469
 
180
470
class TestMemoryTransport(TestCase):
181
471
 
182
472
    def test_get_transport(self):
183
 
        MemoryTransport()
 
473
        memory.MemoryTransport()
184
474
 
185
475
    def test_clone(self):
186
 
        transport = MemoryTransport()
187
 
        self.assertTrue(isinstance(transport, MemoryTransport))
188
 
        self.assertEqual("memory:///", transport.clone("/").base)
 
476
        transport = memory.MemoryTransport()
 
477
        self.failUnless(transport.clone() is transport)
189
478
 
190
479
    def test_abspath(self):
191
 
        transport = MemoryTransport()
192
 
        self.assertEqual("memory:///relpath", transport.abspath('relpath'))
193
 
 
194
 
    def test_abspath_of_root(self):
195
 
        transport = MemoryTransport()
196
 
        self.assertEqual("memory:///", transport.base)
197
 
        self.assertEqual("memory:///", transport.abspath('/'))
198
 
 
199
 
    def test_abspath_of_relpath_starting_at_root(self):
200
 
        transport = MemoryTransport()
201
 
        self.assertEqual("memory:///foo", transport.abspath('/foo'))
 
480
        transport = memory.MemoryTransport()
 
481
        self.assertEqual("in-memory:relpath", transport.abspath('relpath'))
 
482
 
 
483
    def test_relpath(self):
 
484
        transport = memory.MemoryTransport()
202
485
 
203
486
    def test_append_and_get(self):
204
 
        transport = MemoryTransport()
205
 
        transport.append_bytes('path', 'content')
 
487
        transport = memory.MemoryTransport()
 
488
        transport.append('path', StringIO('content'))
206
489
        self.assertEqual(transport.get('path').read(), 'content')
207
 
        transport.append_file('path', StringIO('content'))
 
490
        transport.append('path', StringIO('content'))
208
491
        self.assertEqual(transport.get('path').read(), 'contentcontent')
209
492
 
210
493
    def test_put_and_get(self):
211
 
        transport = MemoryTransport()
212
 
        transport.put_file('path', StringIO('content'))
 
494
        transport = memory.MemoryTransport()
 
495
        transport.put('path', StringIO('content'))
213
496
        self.assertEqual(transport.get('path').read(), 'content')
214
 
        transport.put_bytes('path', 'content')
 
497
        transport.put('path', StringIO('content'))
215
498
        self.assertEqual(transport.get('path').read(), 'content')
216
499
 
217
500
    def test_append_without_dir_fails(self):
218
 
        transport = MemoryTransport()
 
501
        transport = memory.MemoryTransport()
219
502
        self.assertRaises(NoSuchFile,
220
 
                          transport.append_bytes, 'dir/path', 'content')
 
503
                          transport.append, 'dir/path', StringIO('content'))
221
504
 
222
505
    def test_put_without_dir_fails(self):
223
 
        transport = MemoryTransport()
 
506
        transport = memory.MemoryTransport()
224
507
        self.assertRaises(NoSuchFile,
225
 
                          transport.put_file, 'dir/path', StringIO('content'))
 
508
                          transport.put, 'dir/path', StringIO('content'))
226
509
 
227
510
    def test_get_missing(self):
228
 
        transport = MemoryTransport()
 
511
        transport = memory.MemoryTransport()
229
512
        self.assertRaises(NoSuchFile, transport.get, 'foo')
230
513
 
231
514
    def test_has_missing(self):
232
 
        transport = MemoryTransport()
 
515
        transport = memory.MemoryTransport()
233
516
        self.assertEquals(False, transport.has('foo'))
234
517
 
235
518
    def test_has_present(self):
236
 
        transport = MemoryTransport()
237
 
        transport.append_bytes('foo', 'content')
 
519
        transport = memory.MemoryTransport()
 
520
        transport.append('foo', StringIO('content'))
238
521
        self.assertEquals(True, transport.has('foo'))
239
522
 
240
 
    def test_list_dir(self):
241
 
        transport = MemoryTransport()
242
 
        transport.put_bytes('foo', 'content')
243
 
        transport.mkdir('dir')
244
 
        transport.put_bytes('dir/subfoo', 'content')
245
 
        transport.put_bytes('dirlike', 'content')
246
 
 
247
 
        self.assertEquals(['dir', 'dirlike', 'foo'], sorted(transport.list_dir('.')))
248
 
        self.assertEquals(['subfoo'], sorted(transport.list_dir('dir')))
249
 
 
250
523
    def test_mkdir(self):
251
 
        transport = MemoryTransport()
 
524
        transport = memory.MemoryTransport()
252
525
        transport.mkdir('dir')
253
 
        transport.append_bytes('dir/path', 'content')
 
526
        transport.append('dir/path', StringIO('content'))
254
527
        self.assertEqual(transport.get('dir/path').read(), 'content')
255
528
 
256
529
    def test_mkdir_missing_parent(self):
257
 
        transport = MemoryTransport()
 
530
        transport = memory.MemoryTransport()
258
531
        self.assertRaises(NoSuchFile,
259
532
                          transport.mkdir, 'dir/dir')
260
533
 
261
534
    def test_mkdir_twice(self):
262
 
        transport = MemoryTransport()
 
535
        transport = memory.MemoryTransport()
263
536
        transport.mkdir('dir')
264
537
        self.assertRaises(FileExists, transport.mkdir, 'dir')
265
538
 
266
539
    def test_parameters(self):
267
 
        transport = MemoryTransport()
 
540
        transport = memory.MemoryTransport()
268
541
        self.assertEqual(True, transport.listable())
269
542
        self.assertEqual(False, transport.should_cache())
270
 
        self.assertEqual(False, transport.is_readonly())
271
543
 
272
544
    def test_iter_files_recursive(self):
273
 
        transport = MemoryTransport()
 
545
        transport = memory.MemoryTransport()
274
546
        transport.mkdir('dir')
275
 
        transport.put_bytes('dir/foo', 'content')
276
 
        transport.put_bytes('dir/bar', 'content')
277
 
        transport.put_bytes('bar', 'content')
 
547
        transport.put('dir/foo', StringIO('content'))
 
548
        transport.put('dir/bar', StringIO('content'))
 
549
        transport.put('bar', StringIO('content'))
278
550
        paths = set(transport.iter_files_recursive())
279
551
        self.assertEqual(set(['dir/foo', 'dir/bar', 'bar']), paths)
280
552
 
281
553
    def test_stat(self):
282
 
        transport = MemoryTransport()
283
 
        transport.put_bytes('foo', 'content')
284
 
        transport.put_bytes('bar', 'phowar')
 
554
        transport = memory.MemoryTransport()
 
555
        transport.put('foo', StringIO('content'))
 
556
        transport.put('bar', StringIO('phowar'))
285
557
        self.assertEqual(7, transport.stat('foo').st_size)
286
558
        self.assertEqual(6, transport.stat('bar').st_size)
287
 
 
288
 
 
289
 
class ChrootDecoratorTransportTest(TestCase):
290
 
    """Chroot decoration specific tests."""
291
 
 
292
 
    def test_construct(self):
293
 
        from bzrlib.transport import chroot
294
 
        transport = chroot.ChrootTransportDecorator('chroot+memory:///pathA/')
295
 
        self.assertEqual('memory:///pathA/', transport.chroot_url)
296
 
 
297
 
        transport = chroot.ChrootTransportDecorator(
298
 
            'chroot+memory:///path/B', chroot='memory:///path/')
299
 
        self.assertEqual('memory:///path/', transport.chroot_url)
300
 
 
301
 
    def test_append_file(self):
302
 
        transport = get_transport('chroot+memory:///foo/bar')
303
 
        self.assertRaises(PathNotChild, transport.append_file, '/foo', None)
304
 
 
305
 
    def test_append_bytes(self):
306
 
        transport = get_transport('chroot+memory:///foo/bar')
307
 
        self.assertRaises(PathNotChild, transport.append_bytes, '/foo', 'bytes')
308
 
 
309
 
    def test_clone(self):
310
 
        transport = get_transport('chroot+memory:///foo/bar')
311
 
        self.assertRaises(PathNotChild, transport.clone, '/foo')
312
 
 
313
 
    def test_delete(self):
314
 
        transport = get_transport('chroot+memory:///foo/bar')
315
 
        self.assertRaises(PathNotChild, transport.delete, '/foo')
316
 
 
317
 
    def test_delete_tree(self):
318
 
        transport = get_transport('chroot+memory:///foo/bar')
319
 
        self.assertRaises(PathNotChild, transport.delete_tree, '/foo')
320
 
 
321
 
    def test_get(self):
322
 
        transport = get_transport('chroot+memory:///foo/bar')
323
 
        self.assertRaises(PathNotChild, transport.get, '/foo')
324
 
 
325
 
    def test_get_bytes(self):
326
 
        transport = get_transport('chroot+memory:///foo/bar')
327
 
        self.assertRaises(PathNotChild, transport.get_bytes, '/foo')
328
 
 
329
 
    def test_has(self):
330
 
        transport = get_transport('chroot+memory:///foo/bar')
331
 
        self.assertRaises(PathNotChild, transport.has, '/foo')
332
 
 
333
 
    def test_list_dir(self):
334
 
        transport = get_transport('chroot+memory:///foo/bar')
335
 
        self.assertRaises(PathNotChild, transport.list_dir, '/foo')
336
 
 
337
 
    def test_lock_read(self):
338
 
        transport = get_transport('chroot+memory:///foo/bar')
339
 
        self.assertRaises(PathNotChild, transport.lock_read, '/foo')
340
 
 
341
 
    def test_lock_write(self):
342
 
        transport = get_transport('chroot+memory:///foo/bar')
343
 
        self.assertRaises(PathNotChild, transport.lock_write, '/foo')
344
 
 
345
 
    def test_mkdir(self):
346
 
        transport = get_transport('chroot+memory:///foo/bar')
347
 
        self.assertRaises(PathNotChild, transport.mkdir, '/foo')
348
 
 
349
 
    def test_put_bytes(self):
350
 
        transport = get_transport('chroot+memory:///foo/bar')
351
 
        self.assertRaises(PathNotChild, transport.put_bytes, '/foo', 'bytes')
352
 
 
353
 
    def test_put_file(self):
354
 
        transport = get_transport('chroot+memory:///foo/bar')
355
 
        self.assertRaises(PathNotChild, transport.put_file, '/foo', None)
356
 
 
357
 
    def test_rename(self):
358
 
        transport = get_transport('chroot+memory:///foo/bar')
359
 
        self.assertRaises(PathNotChild, transport.rename, '/aaa', 'bbb')
360
 
        self.assertRaises(PathNotChild, transport.rename, 'ccc', '/d')
361
 
 
362
 
    def test_rmdir(self):
363
 
        transport = get_transport('chroot+memory:///foo/bar')
364
 
        self.assertRaises(PathNotChild, transport.rmdir, '/foo')
365
 
 
366
 
    def test_stat(self):
367
 
        transport = get_transport('chroot+memory:///foo/bar')
368
 
        self.assertRaises(PathNotChild, transport.stat, '/foo')
369
 
 
370
 
 
371
 
class ReadonlyDecoratorTransportTest(TestCase):
372
 
    """Readonly decoration specific tests."""
373
 
 
374
 
    def test_local_parameters(self):
375
 
        import bzrlib.transport.readonly as readonly
376
 
        # connect to . in readonly mode
377
 
        transport = readonly.ReadonlyTransportDecorator('readonly+.')
378
 
        self.assertEqual(True, transport.listable())
379
 
        self.assertEqual(False, transport.should_cache())
380
 
        self.assertEqual(True, transport.is_readonly())
381
 
 
382
 
    def test_http_parameters(self):
383
 
        from bzrlib.tests.HttpServer import HttpServer
384
 
        import bzrlib.transport.readonly as readonly
385
 
        # connect to . via http which is not listable
386
 
        server = HttpServer()
387
 
        server.setUp()
388
 
        try:
389
 
            transport = get_transport('readonly+' + server.get_url())
390
 
            self.failUnless(isinstance(transport,
391
 
                                       readonly.ReadonlyTransportDecorator))
392
 
            self.assertEqual(False, transport.listable())
393
 
            self.assertEqual(True, transport.should_cache())
394
 
            self.assertEqual(True, transport.is_readonly())
395
 
        finally:
396
 
            server.tearDown()
397
 
 
398
 
 
399
 
class FakeNFSDecoratorTests(TestCaseInTempDir):
400
 
    """NFS decorator specific tests."""
401
 
 
402
 
    def get_nfs_transport(self, url):
403
 
        import bzrlib.transport.fakenfs as fakenfs
404
 
        # connect to url with nfs decoration
405
 
        return fakenfs.FakeNFSTransportDecorator('fakenfs+' + url)
406
 
 
407
 
    def test_local_parameters(self):
408
 
        # the listable, should_cache and is_readonly parameters
409
 
        # are not changed by the fakenfs decorator
410
 
        transport = self.get_nfs_transport('.')
411
 
        self.assertEqual(True, transport.listable())
412
 
        self.assertEqual(False, transport.should_cache())
413
 
        self.assertEqual(False, transport.is_readonly())
414
 
 
415
 
    def test_http_parameters(self):
416
 
        # the listable, should_cache and is_readonly parameters
417
 
        # are not changed by the fakenfs decorator
418
 
        from bzrlib.tests.HttpServer import HttpServer
419
 
        # connect to . via http which is not listable
420
 
        server = HttpServer()
421
 
        server.setUp()
422
 
        try:
423
 
            transport = self.get_nfs_transport(server.get_url())
424
 
            self.assertIsInstance(
425
 
                transport, bzrlib.transport.fakenfs.FakeNFSTransportDecorator)
426
 
            self.assertEqual(False, transport.listable())
427
 
            self.assertEqual(True, transport.should_cache())
428
 
            self.assertEqual(True, transport.is_readonly())
429
 
        finally:
430
 
            server.tearDown()
431
 
 
432
 
    def test_fakenfs_server_default(self):
433
 
        # a FakeNFSServer() should bring up a local relpath server for itself
434
 
        import bzrlib.transport.fakenfs as fakenfs
435
 
        server = fakenfs.FakeNFSServer()
436
 
        server.setUp()
437
 
        try:
438
 
            # the url should be decorated appropriately
439
 
            self.assertStartsWith(server.get_url(), 'fakenfs+')
440
 
            # and we should be able to get a transport for it
441
 
            transport = get_transport(server.get_url())
442
 
            # which must be a FakeNFSTransportDecorator instance.
443
 
            self.assertIsInstance(
444
 
                transport, fakenfs.FakeNFSTransportDecorator)
445
 
        finally:
446
 
            server.tearDown()
447
 
 
448
 
    def test_fakenfs_rename_semantics(self):
449
 
        # a FakeNFS transport must mangle the way rename errors occur to
450
 
        # look like NFS problems.
451
 
        transport = self.get_nfs_transport('.')
452
 
        self.build_tree(['from/', 'from/foo', 'to/', 'to/bar'],
453
 
                        transport=transport)
454
 
        self.assertRaises(bzrlib.errors.ResourceBusy,
455
 
                          transport.rename, 'from', 'to')
456
 
 
457
 
 
458
 
class FakeVFATDecoratorTests(TestCaseInTempDir):
459
 
    """Tests for simulation of VFAT restrictions"""
460
 
 
461
 
    def get_vfat_transport(self, url):
462
 
        """Return vfat-backed transport for test directory"""
463
 
        from bzrlib.transport.fakevfat import FakeVFATTransportDecorator
464
 
        return FakeVFATTransportDecorator('vfat+' + url)
465
 
 
466
 
    def test_transport_creation(self):
467
 
        from bzrlib.transport.fakevfat import FakeVFATTransportDecorator
468
 
        transport = self.get_vfat_transport('.')
469
 
        self.assertIsInstance(transport, FakeVFATTransportDecorator)
470
 
 
471
 
    def test_transport_mkdir(self):
472
 
        transport = self.get_vfat_transport('.')
473
 
        transport.mkdir('HELLO')
474
 
        self.assertTrue(transport.has('hello'))
475
 
        self.assertTrue(transport.has('Hello'))
476
 
 
477
 
    def test_forbidden_chars(self):
478
 
        transport = self.get_vfat_transport('.')
479
 
        self.assertRaises(ValueError, transport.has, "<NU>")
480
 
 
481
 
 
482
 
class BadTransportHandler(Transport):
483
 
    def __init__(self, base_url):
484
 
        raise DependencyNotPresent('some_lib', 'testing missing dependency')
485
 
 
486
 
 
487
 
class BackupTransportHandler(Transport):
488
 
    """Test transport that works as a backup for the BadTransportHandler"""
489
 
    pass
490
 
 
491
 
 
492
 
class TestTransportImplementation(TestCaseInTempDir):
493
 
    """Implementation verification for transports.
494
 
    
495
 
    To verify a transport we need a server factory, which is a callable
496
 
    that accepts no parameters and returns an implementation of
497
 
    bzrlib.transport.Server.
498
 
    
499
 
    That Server is then used to construct transport instances and test
500
 
    the transport via loopback activity.
501
 
 
502
 
    Currently this assumes that the Transport object is connected to the 
503
 
    current working directory.  So that whatever is done 
504
 
    through the transport, should show up in the working 
505
 
    directory, and vice-versa. This is a bug, because its possible to have
506
 
    URL schemes which provide access to something that may not be 
507
 
    result in storage on the local disk, i.e. due to file system limits, or 
508
 
    due to it being a database or some other non-filesystem tool.
509
 
 
510
 
    This also tests to make sure that the functions work with both
511
 
    generators and lists (assuming iter(list) is effectively a generator)
512
 
    """
513
 
    
514
 
    def setUp(self):
515
 
        super(TestTransportImplementation, self).setUp()
516
 
        self._server = self.transport_server()
517
 
        self._server.setUp()
518
 
 
519
 
    def tearDown(self):
520
 
        super(TestTransportImplementation, self).tearDown()
521
 
        self._server.tearDown()
522
559
        
523
 
    def get_transport(self):
524
 
        """Return a connected transport to the local directory."""
525
 
        base_url = self._server.get_url()
526
 
        # try getting the transport via the regular interface:
527
 
        t = get_transport(base_url)
528
 
        if not isinstance(t, self.transport_class):
529
 
            # we did not get the correct transport class type. Override the
530
 
            # regular connection behaviour by direct construction.
531
 
            t = self.transport_class(base_url)
532
 
        return t
533
 
 
534
 
 
535
 
class TestLocalTransports(TestCase):
536
 
 
537
 
    def test_get_transport_from_abspath(self):
538
 
        here = os.path.abspath('.')
539
 
        t = get_transport(here)
540
 
        self.assertIsInstance(t, LocalTransport)
541
 
        self.assertEquals(t.base, urlutils.local_path_to_url(here) + '/')
542
 
 
543
 
    def test_get_transport_from_relpath(self):
544
 
        here = os.path.abspath('.')
545
 
        t = get_transport('.')
546
 
        self.assertIsInstance(t, LocalTransport)
547
 
        self.assertEquals(t.base, urlutils.local_path_to_url('.') + '/')
548
 
 
549
 
    def test_get_transport_from_local_url(self):
550
 
        here = os.path.abspath('.')
551
 
        here_url = urlutils.local_path_to_url(here) + '/'
552
 
        t = get_transport(here_url)
553
 
        self.assertIsInstance(t, LocalTransport)
554
 
        self.assertEquals(t.base, here_url)
555
 
 
556
 
 
557
 
class TestWin32LocalTransport(TestCase):
558
 
 
559
 
    def test_unc_clone_to_root(self):
560
 
        # Win32 UNC path like \\HOST\path
561
 
        # clone to root should stop at least at \\HOST part
562
 
        # not on \\
563
 
        t = EmulatedWin32LocalTransport('file://HOST/path/to/some/dir/')
564
 
        for i in xrange(4):
565
 
            t = t.clone('..')
566
 
        self.assertEquals(t.base, 'file://HOST/')
567
 
        # make sure we reach the root
568
 
        t = t.clone('..')
569
 
        self.assertEquals(t.base, 'file://HOST/')