← Back to branch summary

~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/tests/test_urlutils.py

Merge in iter_entries_by_dir().

Show diffs side-by-side

added added

removed removed

Lines of Context:
bzrlib/tests/test_urlutils.py
1
 
# Copyright (C) 2006-2010 Canonical Ltd
 
1
# Copyright (C) 2005 by Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
"""Tests for the urlutils wrapper."""
18
18
 
19
19
import os
20
20
import sys
21
21
 
22
 
from bzrlib import osutils, urlutils, win32utils
23
 
from bzrlib.errors import InvalidURL, InvalidURLJoin, InvalidRebaseURLs
 
22
import bzrlib
 
23
from bzrlib.errors import InvalidURL, InvalidURLJoin
 
24
import bzrlib.urlutils as urlutils
24
25
from bzrlib.tests import TestCaseInTempDir, TestCase, TestSkipped
25
26
 
26
27
 
27
28
class TestUrlToPath(TestCase):
28
 
 
 
29
    
29
30
    def test_basename(self):
30
31
        # bzrlib.urlutils.basename
31
32
        # Test bzrlib.urlutils.split()
80
81
 
81
82
        # Local paths are assumed to *not* be escaped at all
82
83
        try:
83
 
            u'uni/\xb5'.encode(osutils.get_user_encoding())
 
84
            u'uni/\xb5'.encode(bzrlib.user_encoding)
84
85
        except UnicodeError:
85
 
            # locale cannot handle unicode
 
86
            # locale cannot handle unicode 
86
87
            pass
87
88
        else:
88
89
            norm_file('uni/%C2%B5', u'uni/\xb5')
90
91
        norm_file('uni/%25C2%25B5', u'uni/%C2%B5')
91
92
        norm_file('uni/%20b', u'uni/ b')
92
93
        # All the crazy characters get escaped in local paths => file:/// urls
93
 
        # The ' ' character must not be at the end, because on win32
94
 
        # it gets stripped off by ntpath.abspath
95
 
        norm_file('%27%20%3B/%3F%3A%40%26%3D%2B%24%2C%23', "' ;/?:@&=+$,#")
 
94
        norm_file('%27%3B/%3F%3A%40%26%3D%2B%24%2C%23%20', "';/?:@&=+$,# ")
96
95
 
97
96
    def test_normalize_url_hybrid(self):
98
97
        # Anything with a scheme:// should be treated as a hybrid url
113
112
        eq('http://host/ab/%C2%B5/%C2%B5',
114
113
            normalize_url(u'http://host/ab/%C2%B5/\xb5'))
115
114
 
116
 
        # Unescape characters that don't need to be escaped
117
 
        eq('http://host/~bob%2525-._',
118
 
                normalize_url('http://host/%7Ebob%2525%2D%2E%5F'))
119
 
        eq('http://host/~bob%2525-._',
120
 
                normalize_url(u'http://host/%7Ebob%2525%2D%2E%5F'))
121
 
 
122
115
        # Normalize verifies URLs when they are not unicode
123
116
        # (indicating they did not come from the user)
124
117
        self.assertRaises(InvalidURL, normalize_url, 'http://host/\xb5')
201
194
            joined = urlutils.join(*args)
202
195
            self.assertEqual(expected, joined)
203
196
 
 
197
        # Test a single element
 
198
        test('foo', 'foo')
 
199
 
204
200
        # Test relative path joining
205
 
        test('foo', 'foo') # relative fragment with nothing is preserved.
206
201
        test('foo/bar', 'foo', 'bar')
207
202
        test('http://foo/bar', 'http://foo', 'bar')
208
203
        test('http://foo/bar', 'http://foo', '.', 'bar')
209
204
        test('http://foo/baz', 'http://foo', 'bar', '../baz')
210
205
        test('http://foo/bar/baz', 'http://foo', 'bar/baz')
211
206
        test('http://foo/baz', 'http://foo', 'bar/../baz')
212
 
        test('http://foo/baz', 'http://foo/bar/', '../baz')
213
207
 
214
208
        # Absolute paths
215
 
        test('http://foo', 'http://foo') # abs url with nothing is preserved.
216
209
        test('http://bar', 'http://foo', 'http://bar')
217
210
        test('sftp://bzr/foo', 'http://foo', 'bar', 'sftp://bzr/foo')
218
211
        test('file:///bar', 'foo', 'file:///bar')
219
 
        test('http://bar/', 'http://foo', 'http://bar/')
220
 
        test('http://bar/a', 'http://foo', 'http://bar/a')
221
 
        test('http://bar/a/', 'http://foo', 'http://bar/a/')
222
 
 
223
 
        # From a base path
224
 
        test('file:///foo', 'file:///', 'foo')
225
 
        test('file:///bar/foo', 'file:///bar/', 'foo')
226
 
        test('http://host/foo', 'http://host/', 'foo')
227
 
        test('http://host/', 'http://host', '')
228
 
 
 
212
        
229
213
        # Invalid joinings
230
214
        # Cannot go above root
231
 
        # Implicitly at root:
232
215
        self.assertRaises(InvalidURLJoin, urlutils.join,
233
216
                'http://foo', '../baz')
234
 
        self.assertRaises(InvalidURLJoin, urlutils.join,
235
 
                'http://foo', '/..')
236
 
        # Joining from a path explicitly under the root.
237
 
        self.assertRaises(InvalidURLJoin, urlutils.join,
238
 
                'http://foo/a', '../../b')
239
 
 
240
 
    def test_joinpath(self):
241
 
        def test(expected, *args):
242
 
            joined = urlutils.joinpath(*args)
243
 
            self.assertEqual(expected, joined)
244
 
 
245
 
        # Test a single element
246
 
        test('foo', 'foo')
247
 
 
248
 
        # Test relative path joining
249
 
        test('foo/bar', 'foo', 'bar')
250
 
        test('foo/bar', 'foo', '.', 'bar')
251
 
        test('foo/baz', 'foo', 'bar', '../baz')
252
 
        test('foo/bar/baz', 'foo', 'bar/baz')
253
 
        test('foo/baz', 'foo', 'bar/../baz')
254
 
 
255
 
        # Test joining to an absolute path
256
 
        test('/foo', '/foo')
257
 
        test('/foo', '/foo', '.')
258
 
        test('/foo/bar', '/foo', 'bar')
259
 
        test('/', '/foo', '..')
260
 
 
261
 
        # Test joining with an absolute path
262
 
        test('/bar', 'foo', '/bar')
263
 
 
264
 
        # Test joining to a path with a trailing slash
265
 
        test('foo/bar', 'foo/', 'bar')
266
 
 
267
 
        # Invalid joinings
268
 
        # Cannot go above root
269
 
        self.assertRaises(InvalidURLJoin, urlutils.joinpath, '/', '../baz')
270
 
        self.assertRaises(InvalidURLJoin, urlutils.joinpath, '/', '..')
271
 
        self.assertRaises(InvalidURLJoin, urlutils.joinpath, '/', '/..')
272
217
 
273
218
    def test_function_type(self):
274
219
        if sys.platform == 'win32':
289
234
            raise TestSkipped("local encoding cannot handle unicode")
290
235
 
291
236
        self.assertEqual('file:///path/to/r%C3%A4ksm%C3%B6rg%C3%A5s', result)
292
 
        self.assertFalse(isinstance(result, unicode))
293
237
 
294
238
    def test_posix_local_path_from_url(self):
295
239
        from_url = urlutils._posix_local_path_from_url
299
243
            from_url('file:///path/to/r%C3%A4ksm%C3%B6rg%C3%A5s'))
300
244
        self.assertEqual(u'/path/to/r\xe4ksm\xf6rg\xe5s',
301
245
            from_url('file:///path/to/r%c3%a4ksm%c3%b6rg%c3%a5s'))
302
 
        self.assertEqual(u'/path/to/r\xe4ksm\xf6rg\xe5s',
303
 
            from_url('file://localhost/path/to/r%c3%a4ksm%c3%b6rg%c3%a5s'))
304
246
 
305
247
        self.assertRaises(InvalidURL, from_url, '/path/to/foo')
306
 
        self.assertRaises(
307
 
            InvalidURL, from_url,
308
 
            'file://remotehost/path/to/r%c3%a4ksm%c3%b6rg%c3%a5s')
309
248
 
310
249
    def test_win32_local_path_to_url(self):
311
250
        to_url = urlutils._win32_local_path_to_url
312
251
        self.assertEqual('file:///C:/path/to/foo',
313
252
            to_url('C:/path/to/foo'))
314
 
        # BOGUS: on win32, ntpath.abspath will strip trailing
315
 
        #       whitespace, so this will always fail
316
 
        #       Though under linux, it fakes abspath support
317
 
        #       and thus will succeed
318
 
        # self.assertEqual('file:///C:/path/to/foo%20',
319
 
        #     to_url('C:/path/to/foo '))
320
 
        self.assertEqual('file:///C:/path/to/f%20oo',
321
 
            to_url('C:/path/to/f oo'))
322
 
 
323
 
        self.assertEqual('file:///', to_url('/'))
324
253
 
325
254
        try:
326
255
            result = to_url(u'd:/path/to/r\xe4ksm\xf6rg\xe5s')
328
257
            raise TestSkipped("local encoding cannot handle unicode")
329
258
 
330
259
        self.assertEqual('file:///D:/path/to/r%C3%A4ksm%C3%B6rg%C3%A5s', result)
331
 
        self.assertFalse(isinstance(result, unicode))
332
 
 
333
 
    def test_win32_unc_path_to_url(self):
334
 
        to_url = urlutils._win32_local_path_to_url
335
 
        self.assertEqual('file://HOST/path',
336
 
            to_url(r'\\HOST\path'))
337
 
        self.assertEqual('file://HOST/path',
338
 
            to_url('//HOST/path'))
339
 
 
340
 
        try:
341
 
            result = to_url(u'//HOST/path/to/r\xe4ksm\xf6rg\xe5s')
342
 
        except UnicodeError:
343
 
            raise TestSkipped("local encoding cannot handle unicode")
344
 
 
345
 
        self.assertEqual('file://HOST/path/to/r%C3%A4ksm%C3%B6rg%C3%A5s', result)
346
 
        self.assertFalse(isinstance(result, unicode))
347
260
 
348
261
    def test_win32_local_path_from_url(self):
349
262
        from_url = urlutils._win32_local_path_from_url
353
266
            from_url('file:///d|/path/to/r%C3%A4ksm%C3%B6rg%C3%A5s'))
354
267
        self.assertEqual(u'D:/path/to/r\xe4ksm\xf6rg\xe5s',
355
268
            from_url('file:///d:/path/to/r%c3%a4ksm%c3%b6rg%c3%a5s'))
356
 
        self.assertEqual('/', from_url('file:///'))
357
269
 
358
270
        self.assertRaises(InvalidURL, from_url, '/path/to/foo')
359
271
        # Not a valid _win32 url, no drive letter
360
272
        self.assertRaises(InvalidURL, from_url, 'file:///path/to/foo')
361
273
 
362
 
    def test_win32_unc_path_from_url(self):
363
 
        from_url = urlutils._win32_local_path_from_url
364
 
        self.assertEqual('//HOST/path', from_url('file://HOST/path'))
365
 
        # despite IE allows 2, 4, 5 and 6 slashes in URL to another machine
366
 
        # we want to use only 2 slashes
367
 
        # Firefox understand only 5 slashes in URL, but it's ugly
368
 
        self.assertRaises(InvalidURL, from_url, 'file:////HOST/path')
369
 
        self.assertRaises(InvalidURL, from_url, 'file://///HOST/path')
370
 
        self.assertRaises(InvalidURL, from_url, 'file://////HOST/path')
371
 
        # check for file://C:/ instead of file:///C:/
372
 
        self.assertRaises(InvalidURL, from_url, 'file://C:/path')
373
 
 
374
 
    def test_win32_extract_drive_letter(self):
375
 
        extract = urlutils._win32_extract_drive_letter
376
 
        self.assertEqual(('file:///C:', '/foo'), extract('file://', '/C:/foo'))
377
 
        self.assertEqual(('file:///d|', '/path'), extract('file://', '/d|/path'))
378
 
        self.assertRaises(InvalidURL, extract, 'file://', '/path')
379
 
 
380
274
    def test_split(self):
381
275
        # Test bzrlib.urlutils.split()
382
276
        split = urlutils.split
412
306
        self.assertEqual(('path/..', 'foo'), split('path/../foo'))
413
307
        self.assertEqual(('../path', 'foo'), split('../path/foo'))
414
308
 
415
 
    def test_win32_strip_local_trailing_slash(self):
416
 
        strip = urlutils._win32_strip_local_trailing_slash
417
 
        self.assertEqual('file://', strip('file://'))
418
 
        self.assertEqual('file:///', strip('file:///'))
419
 
        self.assertEqual('file:///C', strip('file:///C'))
420
 
        self.assertEqual('file:///C:', strip('file:///C:'))
421
 
        self.assertEqual('file:///d|', strip('file:///d|'))
422
 
        self.assertEqual('file:///C:/', strip('file:///C:/'))
423
 
        self.assertEqual('file:///C:/a', strip('file:///C:/a/'))
424
 
 
425
309
    def test_strip_trailing_slash(self):
426
310
        sts = urlutils.strip_trailing_slash
427
311
        if sys.platform == 'win32':
499
383
    def test_escape(self):
500
384
        self.assertEqual('%25', urlutils.escape('%'))
501
385
        self.assertEqual('%C3%A5', urlutils.escape(u'\xe5'))
502
 
        self.assertFalse(isinstance(urlutils.escape(u'\xe5'), unicode))
503
 
 
504
 
    def test_escape_tildes(self):
505
 
        self.assertEqual('~foo', urlutils.escape('~foo'))
506
386
 
507
387
    def test_unescape(self):
508
388
        self.assertEqual('%', urlutils.unescape('%25'))
520
400
        def test(expected, base, other):
521
401
            result = urlutils.relative_url(base, other)
522
402
            self.assertEqual(expected, result)
523
 
 
 
403
            
524
404
        test('a', 'http://host/', 'http://host/a')
525
405
        test('http://entirely/different', 'sftp://host/branch',
526
406
                    'http://entirely/different')
535
415
                    'sftp://host/home/jelmer/branch/2b')
536
416
        test('../../branch/feature/%2b', 'http://host/home/jelmer/bar/%2b',
537
417
                    'http://host/home/jelmer/branch/feature/%2b')
538
 
        test('../../branch/feature/2b', 'http://host/home/jelmer/bar/2b/',
 
418
        test('../../branch/feature/2b', 'http://host/home/jelmer/bar/2b/', 
539
419
                    'http://host/home/jelmer/branch/feature/2b')
540
420
        # relative_url should preserve a trailing slash
541
421
        test('../../branch/feature/2b/', 'http://host/home/jelmer/bar/2b/',
552
432
        test('http://host/', 'http://host', 'http://host/')
553
433
        #test('.', 'http://host/', 'http://host')
554
434
        test('http://host', 'http://host/', 'http://host')
555
 
 
556
 
        # On Windows file:///C:/path/to and file:///D:/other/path
557
 
        # should not use relative url over the non-existent '/' directory.
558
 
        if sys.platform == 'win32':
559
 
            # on the same drive
560
 
            test('../../other/path',
561
 
                'file:///C:/path/to', 'file:///C:/other/path')
562
 
            #~next two tests is failed, i.e. urlutils.relative_url expects
563
 
            #~to see normalized file URLs?
564
 
            #~test('../../other/path',
565
 
            #~    'file:///C:/path/to', 'file:///c:/other/path')
566
 
            #~test('../../other/path',
567
 
            #~    'file:///C:/path/to', 'file:///C|/other/path')
568
 
 
569
 
            # check UNC paths too
570
 
            test('../../other/path',
571
 
                'file://HOST/base/path/to', 'file://HOST/base/other/path')
572
 
            # on different drives
573
 
            test('file:///D:/other/path',
574
 
                'file:///C:/path/to', 'file:///D:/other/path')
575
 
            # TODO: strictly saying in UNC path //HOST/base is full analog
576
 
            # of drive letter for hard disk, and this situation is also
577
 
            # should be exception from rules. [bialix 20071221]
578
 
 
579
 
 
580
 
class TestCwdToURL(TestCaseInTempDir):
581
 
    """Test that local_path_to_url works base on the cwd"""
582
 
 
583
 
    def test_dot(self):
584
 
        # This test will fail if getcwd is not ascii
585
 
        os.mkdir('mytest')
586
 
        os.chdir('mytest')
587
 
 
588
 
        url = urlutils.local_path_to_url('.')
589
 
        self.assertEndsWith(url, '/mytest')
590
 
 
591
 
    def test_non_ascii(self):
592
 
        if win32utils.winver == 'Windows 98':
593
 
            raise TestSkipped('Windows 98 cannot handle unicode filenames')
594
 
 
595
 
        try:
596
 
            os.mkdir(u'dod\xe9')
597
 
        except UnicodeError:
598
 
            raise TestSkipped('cannot create unicode directory')
599
 
 
600
 
        os.chdir(u'dod\xe9')
601
 
 
602
 
        # On Mac OSX this directory is actually:
603
 
        #   u'/dode\u0301' => '/dode\xcc\x81
604
 
        # but we should normalize it back to
605
 
        #   u'/dod\xe9' => '/dod\xc3\xa9'
606
 
        url = urlutils.local_path_to_url('.')
607
 
        self.assertEndsWith(url, '/dod%C3%A9')
608
 
 
609
 
 
610
 
class TestDeriveToLocation(TestCase):
611
 
    """Test that the mapping of FROM_LOCATION to TO_LOCATION works."""
612
 
 
613
 
    def test_to_locations_derived_from_paths(self):
614
 
        derive = urlutils.derive_to_location
615
 
        self.assertEqual("bar", derive("bar"))
616
 
        self.assertEqual("bar", derive("../bar"))
617
 
        self.assertEqual("bar", derive("/foo/bar"))
618
 
        self.assertEqual("bar", derive("c:/foo/bar"))
619
 
        self.assertEqual("bar", derive("c:bar"))
620
 
 
621
 
    def test_to_locations_derived_from_urls(self):
622
 
        derive = urlutils.derive_to_location
623
 
        self.assertEqual("bar", derive("http://foo/bar"))
624
 
        self.assertEqual("bar", derive("bzr+ssh://foo/bar"))
625
 
        self.assertEqual("foo-bar", derive("lp:foo-bar"))
626
 
 
627
 
 
628
 
class TestRebaseURL(TestCase):
629
 
    """Test the behavior of rebase_url."""
630
 
 
631
 
    def test_non_relative(self):
632
 
        result = urlutils.rebase_url('file://foo', 'file://foo',
633
 
                                     'file://foo/bar')
634
 
        self.assertEqual('file://foo', result)
635
 
        result = urlutils.rebase_url('/foo', 'file://foo',
636
 
                                     'file://foo/bar')
637
 
        self.assertEqual('/foo', result)
638
 
 
639
 
    def test_different_ports(self):
640
 
        e = self.assertRaises(InvalidRebaseURLs, urlutils.rebase_url,
641
 
                              'foo', 'http://bar:80', 'http://bar:81')
642
 
        self.assertEqual(str(e), "URLs differ by more than path:"
643
 
                         " 'http://bar:80' and 'http://bar:81'")
644
 
 
645
 
    def test_different_hosts(self):
646
 
        e = self.assertRaises(InvalidRebaseURLs, urlutils.rebase_url,
647
 
                              'foo', 'http://bar', 'http://baz')
648
 
        self.assertEqual(str(e), "URLs differ by more than path: 'http://bar'"
649
 
                         " and 'http://baz'")
650
 
 
651
 
    def test_different_protocol(self):
652
 
        e = self.assertRaises(InvalidRebaseURLs, urlutils.rebase_url,
653
 
                              'foo', 'http://bar', 'ftp://bar')
654
 
        self.assertEqual(str(e), "URLs differ by more than path: 'http://bar'"
655
 
                         " and 'ftp://bar'")
656
 
 
657
 
    def test_rebase_success(self):
658
 
        self.assertEqual('../bar', urlutils.rebase_url('bar', 'http://baz/',
659
 
                         'http://baz/qux'))
660
 
        self.assertEqual('qux/bar', urlutils.rebase_url('bar',
661
 
                         'http://baz/qux', 'http://baz/'))
662
 
        self.assertEqual('.', urlutils.rebase_url('foo',
663
 
                         'http://bar/', 'http://bar/foo/'))
664
 
        self.assertEqual('qux/bar', urlutils.rebase_url('../bar',
665
 
                         'http://baz/qux/foo', 'http://baz/'))
666
 
 
667
 
    def test_determine_relative_path(self):
668
 
        self.assertEqual('../../baz/bar',
669
 
                         urlutils.determine_relative_path(
670
 
                         '/qux/quxx', '/baz/bar'))
671
 
        self.assertEqual('..',
672
 
                         urlutils.determine_relative_path(
673
 
                         '/bar/baz', '/bar'))
674
 
        self.assertEqual('baz',
675
 
                         urlutils.determine_relative_path(
676
 
                         '/bar', '/bar/baz'))
677
 
        self.assertEqual('.', urlutils.determine_relative_path(
678
 
                         '/bar', '/bar'))
679
 
 
680
 
 
681
 
class TestParseURL(TestCase):
682
 
 
683
 
    def test_parse_url(self):
684
 
        self.assertEqual(urlutils.parse_url('http://example.com:80/one'),
685
 
            ('http', None, None, 'example.com', 80, '/one'))
686
 
        self.assertEqual(urlutils.parse_url('http://[1:2:3::40]/one'),
687
 
                ('http', None, None, '1:2:3::40', None, '/one'))
688
 
        self.assertEqual(urlutils.parse_url('http://[1:2:3::40]:80/one'),
689
 
                ('http', None, None, '1:2:3::40', 80, '/one'))