~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/tests/test_transport.py

  • Committer: Martin Pool
  • Date: 2005-05-11 08:12:23 UTC
  • Revision ID: mbp@sourcefrog.net-20050511081223-7c935881e8145274
todo

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2004, 2005, 2006 by Canonical Ltd
2
 
#
3
 
# This program is free software; you can redistribute it and/or modify
4
 
# it under the terms of the GNU General Public License as published by
5
 
# the Free Software Foundation; either version 2 of the License, or
6
 
# (at your option) any later version.
7
 
#
8
 
# This program is distributed in the hope that it will be useful,
9
 
# but WITHOUT ANY WARRANTY; without even the implied warranty of
10
 
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11
 
# GNU General Public License for more details.
12
 
#
13
 
# You should have received a copy of the GNU General Public License
14
 
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
 
 
17
 
 
18
 
import os
19
 
import sys
20
 
import stat
21
 
from cStringIO import StringIO
22
 
 
23
 
import bzrlib
24
 
from bzrlib.errors import (NoSuchFile, FileExists,
25
 
                           TransportNotPossible,
26
 
                           ConnectionError,
27
 
                           DependencyNotPresent,
28
 
                           UnsupportedProtocol,
29
 
                           )
30
 
from bzrlib.tests import TestCase, TestCaseInTempDir
31
 
from bzrlib.transport import (_CoalescedOffset,
32
 
                              _get_protocol_handlers,
33
 
                              _get_transport_modules,
34
 
                              get_transport,
35
 
                              register_lazy_transport,
36
 
                              _set_protocol_handlers,
37
 
                              Transport,
38
 
                              )
39
 
from bzrlib.transport.memory import MemoryTransport
40
 
from bzrlib.transport.local import LocalTransport
41
 
 
42
 
 
43
 
class TestTransport(TestCase):
44
 
    """Test the non transport-concrete class functionality."""
45
 
 
46
 
    def test__get_set_protocol_handlers(self):
47
 
        handlers = _get_protocol_handlers()
48
 
        self.assertNotEqual({}, handlers)
49
 
        try:
50
 
            _set_protocol_handlers({})
51
 
            self.assertEqual({}, _get_protocol_handlers())
52
 
        finally:
53
 
            _set_protocol_handlers(handlers)
54
 
 
55
 
    def test_get_transport_modules(self):
56
 
        handlers = _get_protocol_handlers()
57
 
        class SampleHandler(object):
58
 
            """I exist, isnt that enough?"""
59
 
        try:
60
 
            my_handlers = {}
61
 
            _set_protocol_handlers(my_handlers)
62
 
            register_lazy_transport('foo', 'bzrlib.tests.test_transport', 'TestTransport.SampleHandler')
63
 
            register_lazy_transport('bar', 'bzrlib.tests.test_transport', 'TestTransport.SampleHandler')
64
 
            self.assertEqual([SampleHandler.__module__],
65
 
                             _get_transport_modules())
66
 
        finally:
67
 
            _set_protocol_handlers(handlers)
68
 
 
69
 
    def test_transport_dependency(self):
70
 
        """Transport with missing dependency causes no error"""
71
 
        saved_handlers = _get_protocol_handlers()
72
 
        try:
73
 
            register_lazy_transport('foo', 'bzrlib.tests.test_transport',
74
 
                    'BadTransportHandler')
75
 
            try:
76
 
                get_transport('foo://fooserver/foo')
77
 
            except UnsupportedProtocol, e:
78
 
                e_str = str(e)
79
 
                self.assertEquals('Unsupported protocol'
80
 
                                  ' for url "foo://fooserver/foo":'
81
 
                                  ' Unable to import library "some_lib":'
82
 
                                  ' testing missing dependency', str(e))
83
 
            else:
84
 
                self.fail('Did not raise UnsupportedProtocol')
85
 
        finally:
86
 
            # restore original values
87
 
            _set_protocol_handlers(saved_handlers)
88
 
            
89
 
    def test_transport_fallback(self):
90
 
        """Transport with missing dependency causes no error"""
91
 
        saved_handlers = _get_protocol_handlers()
92
 
        try:
93
 
            _set_protocol_handlers({})
94
 
            register_lazy_transport('foo', 'bzrlib.tests.test_transport',
95
 
                    'BackupTransportHandler')
96
 
            register_lazy_transport('foo', 'bzrlib.tests.test_transport',
97
 
                    'BadTransportHandler')
98
 
            t = get_transport('foo://fooserver/foo')
99
 
            self.assertTrue(isinstance(t, BackupTransportHandler))
100
 
        finally:
101
 
            _set_protocol_handlers(saved_handlers)
102
 
 
103
 
 
104
 
class TestCoalesceOffsets(TestCase):
105
 
    
106
 
    def check(self, expected, offsets, limit=0, fudge=0):
107
 
        coalesce = Transport._coalesce_offsets
108
 
        exp = [_CoalescedOffset(*x) for x in expected]
109
 
        out = list(coalesce(offsets, limit=limit, fudge_factor=fudge))
110
 
        self.assertEqual(exp, out)
111
 
 
112
 
    def test_coalesce_empty(self):
113
 
        self.check([], [])
114
 
 
115
 
    def test_coalesce_simple(self):
116
 
        self.check([(0, 10, [(0, 10)])], [(0, 10)])
117
 
 
118
 
    def test_coalesce_unrelated(self):
119
 
        self.check([(0, 10, [(0, 10)]),
120
 
                    (20, 10, [(0, 10)]),
121
 
                   ], [(0, 10), (20, 10)])
122
 
            
123
 
    def test_coalesce_unsorted(self):
124
 
        self.check([(20, 10, [(0, 10)]),
125
 
                    (0, 10, [(0, 10)]),
126
 
                   ], [(20, 10), (0, 10)])
127
 
 
128
 
    def test_coalesce_nearby(self):
129
 
        self.check([(0, 20, [(0, 10), (10, 10)])],
130
 
                   [(0, 10), (10, 10)])
131
 
 
132
 
    def test_coalesce_overlapped(self):
133
 
        self.check([(0, 15, [(0, 10), (5, 10)])],
134
 
                   [(0, 10), (5, 10)])
135
 
 
136
 
    def test_coalesce_limit(self):
137
 
        self.check([(10, 50, [(0, 10), (10, 10), (20, 10),
138
 
                              (30, 10), (40, 10)]),
139
 
                    (60, 50, [(0, 10), (10, 10), (20, 10),
140
 
                              (30, 10), (40, 10)]),
141
 
                   ], [(10, 10), (20, 10), (30, 10), (40, 10),
142
 
                       (50, 10), (60, 10), (70, 10), (80, 10),
143
 
                       (90, 10), (100, 10)],
144
 
                    limit=5)
145
 
 
146
 
    def test_coalesce_no_limit(self):
147
 
        self.check([(10, 100, [(0, 10), (10, 10), (20, 10),
148
 
                               (30, 10), (40, 10), (50, 10),
149
 
                               (60, 10), (70, 10), (80, 10),
150
 
                               (90, 10)]),
151
 
                   ], [(10, 10), (20, 10), (30, 10), (40, 10),
152
 
                       (50, 10), (60, 10), (70, 10), (80, 10),
153
 
                       (90, 10), (100, 10)])
154
 
 
155
 
    def test_coalesce_fudge(self):
156
 
        self.check([(10, 30, [(0, 10), (20, 10)]),
157
 
                    (100, 10, [(0, 10),]),
158
 
                   ], [(10, 10), (30, 10), (100, 10)],
159
 
                   fudge=10
160
 
                  )
161
 
 
162
 
 
163
 
class TestMemoryTransport(TestCase):
164
 
 
165
 
    def test_get_transport(self):
166
 
        MemoryTransport()
167
 
 
168
 
    def test_clone(self):
169
 
        transport = MemoryTransport()
170
 
        self.assertTrue(isinstance(transport, MemoryTransport))
171
 
        self.assertEqual("memory:///", transport.clone("/").base)
172
 
 
173
 
    def test_abspath(self):
174
 
        transport = MemoryTransport()
175
 
        self.assertEqual("memory:///relpath", transport.abspath('relpath'))
176
 
 
177
 
    def test_abspath_of_root(self):
178
 
        transport = MemoryTransport()
179
 
        self.assertEqual("memory:///", transport.base)
180
 
        self.assertEqual("memory:///", transport.abspath('/'))
181
 
 
182
 
    def test_relpath(self):
183
 
        transport = MemoryTransport()
184
 
 
185
 
    def test_append_and_get(self):
186
 
        transport = MemoryTransport()
187
 
        transport.append_bytes('path', 'content')
188
 
        self.assertEqual(transport.get('path').read(), 'content')
189
 
        transport.append_file('path', StringIO('content'))
190
 
        self.assertEqual(transport.get('path').read(), 'contentcontent')
191
 
 
192
 
    def test_put_and_get(self):
193
 
        transport = MemoryTransport()
194
 
        transport.put_file('path', StringIO('content'))
195
 
        self.assertEqual(transport.get('path').read(), 'content')
196
 
        transport.put_bytes('path', 'content')
197
 
        self.assertEqual(transport.get('path').read(), 'content')
198
 
 
199
 
    def test_append_without_dir_fails(self):
200
 
        transport = MemoryTransport()
201
 
        self.assertRaises(NoSuchFile,
202
 
                          transport.append_bytes, 'dir/path', 'content')
203
 
 
204
 
    def test_put_without_dir_fails(self):
205
 
        transport = MemoryTransport()
206
 
        self.assertRaises(NoSuchFile,
207
 
                          transport.put_file, 'dir/path', StringIO('content'))
208
 
 
209
 
    def test_get_missing(self):
210
 
        transport = MemoryTransport()
211
 
        self.assertRaises(NoSuchFile, transport.get, 'foo')
212
 
 
213
 
    def test_has_missing(self):
214
 
        transport = MemoryTransport()
215
 
        self.assertEquals(False, transport.has('foo'))
216
 
 
217
 
    def test_has_present(self):
218
 
        transport = MemoryTransport()
219
 
        transport.append_bytes('foo', 'content')
220
 
        self.assertEquals(True, transport.has('foo'))
221
 
 
222
 
    def test_mkdir(self):
223
 
        transport = MemoryTransport()
224
 
        transport.mkdir('dir')
225
 
        transport.append_bytes('dir/path', 'content')
226
 
        self.assertEqual(transport.get('dir/path').read(), 'content')
227
 
 
228
 
    def test_mkdir_missing_parent(self):
229
 
        transport = MemoryTransport()
230
 
        self.assertRaises(NoSuchFile,
231
 
                          transport.mkdir, 'dir/dir')
232
 
 
233
 
    def test_mkdir_twice(self):
234
 
        transport = MemoryTransport()
235
 
        transport.mkdir('dir')
236
 
        self.assertRaises(FileExists, transport.mkdir, 'dir')
237
 
 
238
 
    def test_parameters(self):
239
 
        transport = MemoryTransport()
240
 
        self.assertEqual(True, transport.listable())
241
 
        self.assertEqual(False, transport.should_cache())
242
 
        self.assertEqual(False, transport.is_readonly())
243
 
 
244
 
    def test_iter_files_recursive(self):
245
 
        transport = MemoryTransport()
246
 
        transport.mkdir('dir')
247
 
        transport.put_bytes('dir/foo', 'content')
248
 
        transport.put_bytes('dir/bar', 'content')
249
 
        transport.put_bytes('bar', 'content')
250
 
        paths = set(transport.iter_files_recursive())
251
 
        self.assertEqual(set(['dir/foo', 'dir/bar', 'bar']), paths)
252
 
 
253
 
    def test_stat(self):
254
 
        transport = MemoryTransport()
255
 
        transport.put_bytes('foo', 'content')
256
 
        transport.put_bytes('bar', 'phowar')
257
 
        self.assertEqual(7, transport.stat('foo').st_size)
258
 
        self.assertEqual(6, transport.stat('bar').st_size)
259
 
 
260
 
        
261
 
class ReadonlyDecoratorTransportTest(TestCase):
262
 
    """Readonly decoration specific tests."""
263
 
 
264
 
    def test_local_parameters(self):
265
 
        import bzrlib.transport.readonly as readonly
266
 
        # connect to . in readonly mode
267
 
        transport = readonly.ReadonlyTransportDecorator('readonly+.')
268
 
        self.assertEqual(True, transport.listable())
269
 
        self.assertEqual(False, transport.should_cache())
270
 
        self.assertEqual(True, transport.is_readonly())
271
 
 
272
 
    def test_http_parameters(self):
273
 
        import bzrlib.transport.readonly as readonly
274
 
        from bzrlib.transport.http import HttpServer
275
 
        # connect to . via http which is not listable
276
 
        server = HttpServer()
277
 
        server.setUp()
278
 
        try:
279
 
            transport = get_transport('readonly+' + server.get_url())
280
 
            self.failUnless(isinstance(transport,
281
 
                                       readonly.ReadonlyTransportDecorator))
282
 
            self.assertEqual(False, transport.listable())
283
 
            self.assertEqual(True, transport.should_cache())
284
 
            self.assertEqual(True, transport.is_readonly())
285
 
        finally:
286
 
            server.tearDown()
287
 
 
288
 
 
289
 
class FakeNFSDecoratorTests(TestCaseInTempDir):
290
 
    """NFS decorator specific tests."""
291
 
 
292
 
    def get_nfs_transport(self, url):
293
 
        import bzrlib.transport.fakenfs as fakenfs
294
 
        # connect to url with nfs decoration
295
 
        return fakenfs.FakeNFSTransportDecorator('fakenfs+' + url)
296
 
 
297
 
    def test_local_parameters(self):
298
 
        # the listable, should_cache and is_readonly parameters
299
 
        # are not changed by the fakenfs decorator
300
 
        transport = self.get_nfs_transport('.')
301
 
        self.assertEqual(True, transport.listable())
302
 
        self.assertEqual(False, transport.should_cache())
303
 
        self.assertEqual(False, transport.is_readonly())
304
 
 
305
 
    def test_http_parameters(self):
306
 
        # the listable, should_cache and is_readonly parameters
307
 
        # are not changed by the fakenfs decorator
308
 
        from bzrlib.transport.http import HttpServer
309
 
        # connect to . via http which is not listable
310
 
        server = HttpServer()
311
 
        server.setUp()
312
 
        try:
313
 
            transport = self.get_nfs_transport(server.get_url())
314
 
            self.assertIsInstance(
315
 
                transport, bzrlib.transport.fakenfs.FakeNFSTransportDecorator)
316
 
            self.assertEqual(False, transport.listable())
317
 
            self.assertEqual(True, transport.should_cache())
318
 
            self.assertEqual(True, transport.is_readonly())
319
 
        finally:
320
 
            server.tearDown()
321
 
 
322
 
    def test_fakenfs_server_default(self):
323
 
        # a FakeNFSServer() should bring up a local relpath server for itself
324
 
        import bzrlib.transport.fakenfs as fakenfs
325
 
        server = fakenfs.FakeNFSServer()
326
 
        server.setUp()
327
 
        try:
328
 
            # the server should be a relpath localhost server
329
 
            self.assertEqual(server.get_url(), 'fakenfs+.')
330
 
            # and we should be able to get a transport for it
331
 
            transport = get_transport(server.get_url())
332
 
            # which must be a FakeNFSTransportDecorator instance.
333
 
            self.assertIsInstance(
334
 
                transport, fakenfs.FakeNFSTransportDecorator)
335
 
        finally:
336
 
            server.tearDown()
337
 
 
338
 
    def test_fakenfs_rename_semantics(self):
339
 
        # a FakeNFS transport must mangle the way rename errors occur to
340
 
        # look like NFS problems.
341
 
        transport = self.get_nfs_transport('.')
342
 
        self.build_tree(['from/', 'from/foo', 'to/', 'to/bar'],
343
 
                        transport=transport)
344
 
        self.assertRaises(bzrlib.errors.ResourceBusy,
345
 
                          transport.rename, 'from', 'to')
346
 
 
347
 
 
348
 
class FakeVFATDecoratorTests(TestCaseInTempDir):
349
 
    """Tests for simulation of VFAT restrictions"""
350
 
 
351
 
    def get_vfat_transport(self, url):
352
 
        """Return vfat-backed transport for test directory"""
353
 
        from bzrlib.transport.fakevfat import FakeVFATTransportDecorator
354
 
        return FakeVFATTransportDecorator('vfat+' + url)
355
 
 
356
 
    def test_transport_creation(self):
357
 
        from bzrlib.transport.fakevfat import FakeVFATTransportDecorator
358
 
        transport = self.get_vfat_transport('.')
359
 
        self.assertIsInstance(transport, FakeVFATTransportDecorator)
360
 
 
361
 
    def test_transport_mkdir(self):
362
 
        transport = self.get_vfat_transport('.')
363
 
        transport.mkdir('HELLO')
364
 
        self.assertTrue(transport.has('hello'))
365
 
        self.assertTrue(transport.has('Hello'))
366
 
 
367
 
    def test_forbidden_chars(self):
368
 
        transport = self.get_vfat_transport('.')
369
 
        self.assertRaises(ValueError, transport.has, "<NU>")
370
 
 
371
 
 
372
 
class BadTransportHandler(Transport):
373
 
    def __init__(self, base_url):
374
 
        raise DependencyNotPresent('some_lib', 'testing missing dependency')
375
 
 
376
 
 
377
 
class BackupTransportHandler(Transport):
378
 
    """Test transport that works as a backup for the BadTransportHandler"""
379
 
    pass
380
 
 
381
 
 
382
 
class TestTransportImplementation(TestCaseInTempDir):
383
 
    """Implementation verification for transports.
384
 
    
385
 
    To verify a transport we need a server factory, which is a callable
386
 
    that accepts no parameters and returns an implementation of
387
 
    bzrlib.transport.Server.
388
 
    
389
 
    That Server is then used to construct transport instances and test
390
 
    the transport via loopback activity.
391
 
 
392
 
    Currently this assumes that the Transport object is connected to the 
393
 
    current working directory.  So that whatever is done 
394
 
    through the transport, should show up in the working 
395
 
    directory, and vice-versa. This is a bug, because its possible to have
396
 
    URL schemes which provide access to something that may not be 
397
 
    result in storage on the local disk, i.e. due to file system limits, or 
398
 
    due to it being a database or some other non-filesystem tool.
399
 
 
400
 
    This also tests to make sure that the functions work with both
401
 
    generators and lists (assuming iter(list) is effectively a generator)
402
 
    """
403
 
    
404
 
    def setUp(self):
405
 
        super(TestTransportImplementation, self).setUp()
406
 
        self._server = self.transport_server()
407
 
        self._server.setUp()
408
 
 
409
 
    def tearDown(self):
410
 
        super(TestTransportImplementation, self).tearDown()
411
 
        self._server.tearDown()
412
 
        
413
 
    def get_transport(self):
414
 
        """Return a connected transport to the local directory."""
415
 
        base_url = self._server.get_url()
416
 
        # try getting the transport via the regular interface:
417
 
        t = get_transport(base_url)
418
 
        if not isinstance(t, self.transport_class): 
419
 
            # we did not get the correct transport class type. Override the
420
 
            # regular connection behaviour by direct construction.
421
 
            t = self.transport_class(base_url)
422
 
        return t