~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/bzrdir.py

  • Committer: v.ladeuil+lp at free
  • Date: 2006-10-23 11:04:46 UTC
  • mto: (2145.1.1 keepalive)
  • mto: This revision was merged to the branch mainline in revision 2146.
  • Revision ID: v.ladeuil+lp@free.fr-20061023110446-1fddf0ae083c0c1d
Cosmetic fix for bug #57644.

* bzrlib/transport/http/_pycurl.py:
(PyCurlTransport._raise_curl_http_error): Mention url in aerror
message.

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005, 2006 Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
"""BzrDir logic. The BzrDir is the basic control directory used by bzr.
 
18
 
 
19
At format 7 this was split out into Branch, Repository and Checkout control
 
20
directories.
 
21
"""
 
22
 
 
23
# TODO: remove unittest dependency; put that stuff inside the test suite
 
24
 
 
25
# TODO: The Format probe_transport seems a bit redundant with just trying to
 
26
# open the bzrdir. -- mbp
 
27
#
 
28
# TODO: Can we move specific formats into separate modules to make this file
 
29
# smaller?
 
30
 
 
31
from cStringIO import StringIO
 
32
import os
 
33
 
 
34
from bzrlib.lazy_import import lazy_import
 
35
lazy_import(globals(), """
 
36
from copy import deepcopy
 
37
from stat import S_ISDIR
 
38
import unittest
 
39
 
 
40
import bzrlib
 
41
from bzrlib import (
 
42
    errors,
 
43
    lockable_files,
 
44
    lockdir,
 
45
    revision as _mod_revision,
 
46
    urlutils,
 
47
    xml4,
 
48
    xml5,
 
49
    )
 
50
from bzrlib.osutils import (
 
51
    safe_unicode,
 
52
    sha_strings,
 
53
    sha_string,
 
54
    )
 
55
from bzrlib.store.revision.text import TextRevisionStore
 
56
from bzrlib.store.text import TextStore
 
57
from bzrlib.store.versioned import WeaveStore
 
58
from bzrlib.transactions import WriteTransaction
 
59
from bzrlib.transport import get_transport
 
60
from bzrlib.weave import Weave
 
61
""")
 
62
 
 
63
from bzrlib.trace import mutter
 
64
from bzrlib.transport.local import LocalTransport
 
65
 
 
66
 
 
67
class BzrDir(object):
 
68
    """A .bzr control diretory.
 
69
    
 
70
    BzrDir instances let you create or open any of the things that can be
 
71
    found within .bzr - checkouts, branches and repositories.
 
72
    
 
73
    transport
 
74
        the transport which this bzr dir is rooted at (i.e. file:///.../.bzr/)
 
75
    root_transport
 
76
        a transport connected to the directory this bzr was opened from.
 
77
    """
 
78
 
 
79
    def break_lock(self):
 
80
        """Invoke break_lock on the first object in the bzrdir.
 
81
 
 
82
        If there is a tree, the tree is opened and break_lock() called.
 
83
        Otherwise, branch is tried, and finally repository.
 
84
        """
 
85
        try:
 
86
            thing_to_unlock = self.open_workingtree()
 
87
        except (errors.NotLocalUrl, errors.NoWorkingTree):
 
88
            try:
 
89
                thing_to_unlock = self.open_branch()
 
90
            except errors.NotBranchError:
 
91
                try:
 
92
                    thing_to_unlock = self.open_repository()
 
93
                except errors.NoRepositoryPresent:
 
94
                    return
 
95
        thing_to_unlock.break_lock()
 
96
 
 
97
    def can_convert_format(self):
 
98
        """Return true if this bzrdir is one whose format we can convert from."""
 
99
        return True
 
100
 
 
101
    def check_conversion_target(self, target_format):
 
102
        target_repo_format = target_format.repository_format
 
103
        source_repo_format = self._format.repository_format
 
104
        source_repo_format.check_conversion_target(target_repo_format)
 
105
 
 
106
    @staticmethod
 
107
    def _check_supported(format, allow_unsupported):
 
108
        """Check whether format is a supported format.
 
109
 
 
110
        If allow_unsupported is True, this is a no-op.
 
111
        """
 
112
        if not allow_unsupported and not format.is_supported():
 
113
            # see open_downlevel to open legacy branches.
 
114
            raise errors.UnsupportedFormatError(format=format)
 
115
 
 
116
    def clone(self, url, revision_id=None, basis=None, force_new_repo=False):
 
117
        """Clone this bzrdir and its contents to url verbatim.
 
118
 
 
119
        If urls last component does not exist, it will be created.
 
120
 
 
121
        if revision_id is not None, then the clone operation may tune
 
122
            itself to download less data.
 
123
        :param force_new_repo: Do not use a shared repository for the target 
 
124
                               even if one is available.
 
125
        """
 
126
        self._make_tail(url)
 
127
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
128
        result = self._format.initialize(url)
 
129
        try:
 
130
            local_repo = self.find_repository()
 
131
        except errors.NoRepositoryPresent:
 
132
            local_repo = None
 
133
        if local_repo:
 
134
            # may need to copy content in
 
135
            if force_new_repo:
 
136
                result_repo = local_repo.clone(
 
137
                    result,
 
138
                    revision_id=revision_id,
 
139
                    basis=basis_repo)
 
140
                result_repo.set_make_working_trees(local_repo.make_working_trees())
 
141
            else:
 
142
                try:
 
143
                    result_repo = result.find_repository()
 
144
                    # fetch content this dir needs.
 
145
                    if basis_repo:
 
146
                        # XXX FIXME RBC 20060214 need tests for this when the basis
 
147
                        # is incomplete
 
148
                        result_repo.fetch(basis_repo, revision_id=revision_id)
 
149
                    result_repo.fetch(local_repo, revision_id=revision_id)
 
150
                except errors.NoRepositoryPresent:
 
151
                    # needed to make one anyway.
 
152
                    result_repo = local_repo.clone(
 
153
                        result,
 
154
                        revision_id=revision_id,
 
155
                        basis=basis_repo)
 
156
                    result_repo.set_make_working_trees(local_repo.make_working_trees())
 
157
        # 1 if there is a branch present
 
158
        #   make sure its content is available in the target repository
 
159
        #   clone it.
 
160
        try:
 
161
            self.open_branch().clone(result, revision_id=revision_id)
 
162
        except errors.NotBranchError:
 
163
            pass
 
164
        try:
 
165
            self.open_workingtree().clone(result, basis=basis_tree)
 
166
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
167
            pass
 
168
        return result
 
169
 
 
170
    def _get_basis_components(self, basis):
 
171
        """Retrieve the basis components that are available at basis."""
 
172
        if basis is None:
 
173
            return None, None, None
 
174
        try:
 
175
            basis_tree = basis.open_workingtree()
 
176
            basis_branch = basis_tree.branch
 
177
            basis_repo = basis_branch.repository
 
178
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
179
            basis_tree = None
 
180
            try:
 
181
                basis_branch = basis.open_branch()
 
182
                basis_repo = basis_branch.repository
 
183
            except errors.NotBranchError:
 
184
                basis_branch = None
 
185
                try:
 
186
                    basis_repo = basis.open_repository()
 
187
                except errors.NoRepositoryPresent:
 
188
                    basis_repo = None
 
189
        return basis_repo, basis_branch, basis_tree
 
190
 
 
191
    # TODO: This should be given a Transport, and should chdir up; otherwise
 
192
    # this will open a new connection.
 
193
    def _make_tail(self, url):
 
194
        head, tail = urlutils.split(url)
 
195
        if tail and tail != '.':
 
196
            t = get_transport(head)
 
197
            try:
 
198
                t.mkdir(tail)
 
199
            except errors.FileExists:
 
200
                pass
 
201
 
 
202
    # TODO: Should take a Transport
 
203
    @classmethod
 
204
    def create(cls, base):
 
205
        """Create a new BzrDir at the url 'base'.
 
206
        
 
207
        This will call the current default formats initialize with base
 
208
        as the only parameter.
 
209
 
 
210
        If you need a specific format, consider creating an instance
 
211
        of that and calling initialize().
 
212
        """
 
213
        if cls is not BzrDir:
 
214
            raise AssertionError("BzrDir.create always creates the default format, "
 
215
                    "not one of %r" % cls)
 
216
        head, tail = urlutils.split(base)
 
217
        if tail and tail != '.':
 
218
            t = get_transport(head)
 
219
            try:
 
220
                t.mkdir(tail)
 
221
            except errors.FileExists:
 
222
                pass
 
223
        return BzrDirFormat.get_default_format().initialize(safe_unicode(base))
 
224
 
 
225
    def create_branch(self):
 
226
        """Create a branch in this BzrDir.
 
227
 
 
228
        The bzrdirs format will control what branch format is created.
 
229
        For more control see BranchFormatXX.create(a_bzrdir).
 
230
        """
 
231
        raise NotImplementedError(self.create_branch)
 
232
 
 
233
    @staticmethod
 
234
    def create_branch_and_repo(base, force_new_repo=False):
 
235
        """Create a new BzrDir, Branch and Repository at the url 'base'.
 
236
 
 
237
        This will use the current default BzrDirFormat, and use whatever 
 
238
        repository format that that uses via bzrdir.create_branch and
 
239
        create_repository. If a shared repository is available that is used
 
240
        preferentially.
 
241
 
 
242
        The created Branch object is returned.
 
243
 
 
244
        :param base: The URL to create the branch at.
 
245
        :param force_new_repo: If True a new repository is always created.
 
246
        """
 
247
        bzrdir = BzrDir.create(base)
 
248
        bzrdir._find_or_create_repository(force_new_repo)
 
249
        return bzrdir.create_branch()
 
250
 
 
251
    def _find_or_create_repository(self, force_new_repo):
 
252
        """Create a new repository if needed, returning the repository."""
 
253
        if force_new_repo:
 
254
            return self.create_repository()
 
255
        try:
 
256
            return self.find_repository()
 
257
        except errors.NoRepositoryPresent:
 
258
            return self.create_repository()
 
259
        
 
260
    @staticmethod
 
261
    def create_branch_convenience(base, force_new_repo=False,
 
262
                                  force_new_tree=None, format=None):
 
263
        """Create a new BzrDir, Branch and Repository at the url 'base'.
 
264
 
 
265
        This is a convenience function - it will use an existing repository
 
266
        if possible, can be told explicitly whether to create a working tree or
 
267
        not.
 
268
 
 
269
        This will use the current default BzrDirFormat, and use whatever 
 
270
        repository format that that uses via bzrdir.create_branch and
 
271
        create_repository. If a shared repository is available that is used
 
272
        preferentially. Whatever repository is used, its tree creation policy
 
273
        is followed.
 
274
 
 
275
        The created Branch object is returned.
 
276
        If a working tree cannot be made due to base not being a file:// url,
 
277
        no error is raised unless force_new_tree is True, in which case no 
 
278
        data is created on disk and NotLocalUrl is raised.
 
279
 
 
280
        :param base: The URL to create the branch at.
 
281
        :param force_new_repo: If True a new repository is always created.
 
282
        :param force_new_tree: If True or False force creation of a tree or 
 
283
                               prevent such creation respectively.
 
284
        :param format: Override for the for the bzrdir format to create
 
285
        """
 
286
        if force_new_tree:
 
287
            # check for non local urls
 
288
            t = get_transport(safe_unicode(base))
 
289
            if not isinstance(t, LocalTransport):
 
290
                raise errors.NotLocalUrl(base)
 
291
        if format is None:
 
292
            bzrdir = BzrDir.create(base)
 
293
        else:
 
294
            bzrdir = format.initialize(base)
 
295
        repo = bzrdir._find_or_create_repository(force_new_repo)
 
296
        result = bzrdir.create_branch()
 
297
        if force_new_tree or (repo.make_working_trees() and 
 
298
                              force_new_tree is None):
 
299
            try:
 
300
                bzrdir.create_workingtree()
 
301
            except errors.NotLocalUrl:
 
302
                pass
 
303
        return result
 
304
        
 
305
    @staticmethod
 
306
    def create_repository(base, shared=False):
 
307
        """Create a new BzrDir and Repository at the url 'base'.
 
308
 
 
309
        This will use the current default BzrDirFormat, and use whatever 
 
310
        repository format that that uses for bzrdirformat.create_repository.
 
311
 
 
312
        :param shared: Create a shared repository rather than a standalone
 
313
                       repository.
 
314
        The Repository object is returned.
 
315
 
 
316
        This must be overridden as an instance method in child classes, where
 
317
        it should take no parameters and construct whatever repository format
 
318
        that child class desires.
 
319
        """
 
320
        bzrdir = BzrDir.create(base)
 
321
        return bzrdir.create_repository(shared)
 
322
 
 
323
    @staticmethod
 
324
    def create_standalone_workingtree(base):
 
325
        """Create a new BzrDir, WorkingTree, Branch and Repository at 'base'.
 
326
 
 
327
        'base' must be a local path or a file:// url.
 
328
 
 
329
        This will use the current default BzrDirFormat, and use whatever 
 
330
        repository format that that uses for bzrdirformat.create_workingtree,
 
331
        create_branch and create_repository.
 
332
 
 
333
        :return: The WorkingTree object.
 
334
        """
 
335
        t = get_transport(safe_unicode(base))
 
336
        if not isinstance(t, LocalTransport):
 
337
            raise errors.NotLocalUrl(base)
 
338
        bzrdir = BzrDir.create_branch_and_repo(safe_unicode(base),
 
339
                                               force_new_repo=True).bzrdir
 
340
        return bzrdir.create_workingtree()
 
341
 
 
342
    def create_workingtree(self, revision_id=None):
 
343
        """Create a working tree at this BzrDir.
 
344
        
 
345
        revision_id: create it as of this revision id.
 
346
        """
 
347
        raise NotImplementedError(self.create_workingtree)
 
348
 
 
349
    def destroy_workingtree(self):
 
350
        """Destroy the working tree at this BzrDir.
 
351
 
 
352
        Formats that do not support this may raise UnsupportedOperation.
 
353
        """
 
354
        raise NotImplementedError(self.destroy_workingtree)
 
355
 
 
356
    def destroy_workingtree_metadata(self):
 
357
        """Destroy the control files for the working tree at this BzrDir.
 
358
 
 
359
        The contents of working tree files are not affected.
 
360
        Formats that do not support this may raise UnsupportedOperation.
 
361
        """
 
362
        raise NotImplementedError(self.destroy_workingtree_metadata)
 
363
 
 
364
    def find_repository(self):
 
365
        """Find the repository that should be used for a_bzrdir.
 
366
 
 
367
        This does not require a branch as we use it to find the repo for
 
368
        new branches as well as to hook existing branches up to their
 
369
        repository.
 
370
        """
 
371
        try:
 
372
            return self.open_repository()
 
373
        except errors.NoRepositoryPresent:
 
374
            pass
 
375
        next_transport = self.root_transport.clone('..')
 
376
        while True:
 
377
            # find the next containing bzrdir
 
378
            try:
 
379
                found_bzrdir = BzrDir.open_containing_from_transport(
 
380
                    next_transport)[0]
 
381
            except errors.NotBranchError:
 
382
                # none found
 
383
                raise errors.NoRepositoryPresent(self)
 
384
            # does it have a repository ?
 
385
            try:
 
386
                repository = found_bzrdir.open_repository()
 
387
            except errors.NoRepositoryPresent:
 
388
                next_transport = found_bzrdir.root_transport.clone('..')
 
389
                if (found_bzrdir.root_transport.base == next_transport.base):
 
390
                    # top of the file system
 
391
                    break
 
392
                else:
 
393
                    continue
 
394
            if ((found_bzrdir.root_transport.base == 
 
395
                 self.root_transport.base) or repository.is_shared()):
 
396
                return repository
 
397
            else:
 
398
                raise errors.NoRepositoryPresent(self)
 
399
        raise errors.NoRepositoryPresent(self)
 
400
 
 
401
    def get_branch_transport(self, branch_format):
 
402
        """Get the transport for use by branch format in this BzrDir.
 
403
 
 
404
        Note that bzr dirs that do not support format strings will raise
 
405
        IncompatibleFormat if the branch format they are given has
 
406
        a format string, and vice versa.
 
407
 
 
408
        If branch_format is None, the transport is returned with no 
 
409
        checking. if it is not None, then the returned transport is
 
410
        guaranteed to point to an existing directory ready for use.
 
411
        """
 
412
        raise NotImplementedError(self.get_branch_transport)
 
413
        
 
414
    def get_repository_transport(self, repository_format):
 
415
        """Get the transport for use by repository format in this BzrDir.
 
416
 
 
417
        Note that bzr dirs that do not support format strings will raise
 
418
        IncompatibleFormat if the repository format they are given has
 
419
        a format string, and vice versa.
 
420
 
 
421
        If repository_format is None, the transport is returned with no 
 
422
        checking. if it is not None, then the returned transport is
 
423
        guaranteed to point to an existing directory ready for use.
 
424
        """
 
425
        raise NotImplementedError(self.get_repository_transport)
 
426
        
 
427
    def get_workingtree_transport(self, tree_format):
 
428
        """Get the transport for use by workingtree format in this BzrDir.
 
429
 
 
430
        Note that bzr dirs that do not support format strings will raise
 
431
        IncompatibleFormat if the workingtree format they are given has
 
432
        a format string, and vice versa.
 
433
 
 
434
        If workingtree_format is None, the transport is returned with no 
 
435
        checking. if it is not None, then the returned transport is
 
436
        guaranteed to point to an existing directory ready for use.
 
437
        """
 
438
        raise NotImplementedError(self.get_workingtree_transport)
 
439
        
 
440
    def __init__(self, _transport, _format):
 
441
        """Initialize a Bzr control dir object.
 
442
        
 
443
        Only really common logic should reside here, concrete classes should be
 
444
        made with varying behaviours.
 
445
 
 
446
        :param _format: the format that is creating this BzrDir instance.
 
447
        :param _transport: the transport this dir is based at.
 
448
        """
 
449
        self._format = _format
 
450
        self.transport = _transport.clone('.bzr')
 
451
        self.root_transport = _transport
 
452
 
 
453
    def is_control_filename(self, filename):
 
454
        """True if filename is the name of a path which is reserved for bzrdir's.
 
455
        
 
456
        :param filename: A filename within the root transport of this bzrdir.
 
457
 
 
458
        This is true IF and ONLY IF the filename is part of the namespace reserved
 
459
        for bzr control dirs. Currently this is the '.bzr' directory in the root
 
460
        of the root_transport. it is expected that plugins will need to extend
 
461
        this in the future - for instance to make bzr talk with svn working
 
462
        trees.
 
463
        """
 
464
        # this might be better on the BzrDirFormat class because it refers to 
 
465
        # all the possible bzrdir disk formats. 
 
466
        # This method is tested via the workingtree is_control_filename tests- 
 
467
        # it was extracted from WorkingTree.is_control_filename. If the methods
 
468
        # contract is extended beyond the current trivial  implementation please
 
469
        # add new tests for it to the appropriate place.
 
470
        return filename == '.bzr' or filename.startswith('.bzr/')
 
471
 
 
472
    def needs_format_conversion(self, format=None):
 
473
        """Return true if this bzrdir needs convert_format run on it.
 
474
        
 
475
        For instance, if the repository format is out of date but the 
 
476
        branch and working tree are not, this should return True.
 
477
 
 
478
        :param format: Optional parameter indicating a specific desired
 
479
                       format we plan to arrive at.
 
480
        """
 
481
        raise NotImplementedError(self.needs_format_conversion)
 
482
 
 
483
    @staticmethod
 
484
    def open_unsupported(base):
 
485
        """Open a branch which is not supported."""
 
486
        return BzrDir.open(base, _unsupported=True)
 
487
        
 
488
    @staticmethod
 
489
    def open(base, _unsupported=False):
 
490
        """Open an existing bzrdir, rooted at 'base' (url)
 
491
        
 
492
        _unsupported is a private parameter to the BzrDir class.
 
493
        """
 
494
        t = get_transport(base)
 
495
        return BzrDir.open_from_transport(t, _unsupported=_unsupported)
 
496
 
 
497
    @staticmethod
 
498
    def open_from_transport(transport, _unsupported=False):
 
499
        """Open a bzrdir within a particular directory.
 
500
 
 
501
        :param transport: Transport containing the bzrdir.
 
502
        :param _unsupported: private.
 
503
        """
 
504
        format = BzrDirFormat.find_format(transport)
 
505
        BzrDir._check_supported(format, _unsupported)
 
506
        return format.open(transport, _found=True)
 
507
 
 
508
    def open_branch(self, unsupported=False):
 
509
        """Open the branch object at this BzrDir if one is present.
 
510
 
 
511
        If unsupported is True, then no longer supported branch formats can
 
512
        still be opened.
 
513
        
 
514
        TODO: static convenience version of this?
 
515
        """
 
516
        raise NotImplementedError(self.open_branch)
 
517
 
 
518
    @staticmethod
 
519
    def open_containing(url):
 
520
        """Open an existing branch which contains url.
 
521
        
 
522
        :param url: url to search from.
 
523
        See open_containing_from_transport for more detail.
 
524
        """
 
525
        return BzrDir.open_containing_from_transport(get_transport(url))
 
526
    
 
527
    @staticmethod
 
528
    def open_containing_from_transport(a_transport):
 
529
        """Open an existing branch which contains a_transport.base
 
530
 
 
531
        This probes for a branch at a_transport, and searches upwards from there.
 
532
 
 
533
        Basically we keep looking up until we find the control directory or
 
534
        run into the root.  If there isn't one, raises NotBranchError.
 
535
        If there is one and it is either an unrecognised format or an unsupported 
 
536
        format, UnknownFormatError or UnsupportedFormatError are raised.
 
537
        If there is one, it is returned, along with the unused portion of url.
 
538
 
 
539
        :return: The BzrDir that contains the path, and a Unicode path 
 
540
                for the rest of the URL.
 
541
        """
 
542
        # this gets the normalised url back. I.e. '.' -> the full path.
 
543
        url = a_transport.base
 
544
        while True:
 
545
            try:
 
546
                result = BzrDir.open_from_transport(a_transport)
 
547
                return result, urlutils.unescape(a_transport.relpath(url))
 
548
            except errors.NotBranchError, e:
 
549
                pass
 
550
            new_t = a_transport.clone('..')
 
551
            if new_t.base == a_transport.base:
 
552
                # reached the root, whatever that may be
 
553
                raise errors.NotBranchError(path=url)
 
554
            a_transport = new_t
 
555
 
 
556
    def open_repository(self, _unsupported=False):
 
557
        """Open the repository object at this BzrDir if one is present.
 
558
 
 
559
        This will not follow the Branch object pointer - its strictly a direct
 
560
        open facility. Most client code should use open_branch().repository to
 
561
        get at a repository.
 
562
 
 
563
        _unsupported is a private parameter, not part of the api.
 
564
        TODO: static convenience version of this?
 
565
        """
 
566
        raise NotImplementedError(self.open_repository)
 
567
 
 
568
    def open_workingtree(self, _unsupported=False):
 
569
        """Open the workingtree object at this BzrDir if one is present.
 
570
        
 
571
        TODO: static convenience version of this?
 
572
        """
 
573
        raise NotImplementedError(self.open_workingtree)
 
574
 
 
575
    def has_branch(self):
 
576
        """Tell if this bzrdir contains a branch.
 
577
        
 
578
        Note: if you're going to open the branch, you should just go ahead
 
579
        and try, and not ask permission first.  (This method just opens the 
 
580
        branch and discards it, and that's somewhat expensive.) 
 
581
        """
 
582
        try:
 
583
            self.open_branch()
 
584
            return True
 
585
        except errors.NotBranchError:
 
586
            return False
 
587
 
 
588
    def has_workingtree(self):
 
589
        """Tell if this bzrdir contains a working tree.
 
590
 
 
591
        This will still raise an exception if the bzrdir has a workingtree that
 
592
        is remote & inaccessible.
 
593
        
 
594
        Note: if you're going to open the working tree, you should just go ahead
 
595
        and try, and not ask permission first.  (This method just opens the 
 
596
        workingtree and discards it, and that's somewhat expensive.) 
 
597
        """
 
598
        try:
 
599
            self.open_workingtree()
 
600
            return True
 
601
        except errors.NoWorkingTree:
 
602
            return False
 
603
 
 
604
    def cloning_metadir(self, basis=None):
 
605
        """Produce a metadir suitable for cloning with"""
 
606
        def related_repository(bzrdir):
 
607
            try:
 
608
                branch = bzrdir.open_branch()
 
609
                return branch.repository
 
610
            except errors.NotBranchError:
 
611
                source_branch = None
 
612
                return bzrdir.open_repository()
 
613
        result_format = self._format.__class__()
 
614
        try:
 
615
            try:
 
616
                source_repository = related_repository(self)
 
617
            except errors.NoRepositoryPresent:
 
618
                if basis is None:
 
619
                    raise
 
620
                source_repository = related_repository(self)
 
621
            result_format.repository_format = source_repository._format
 
622
        except errors.NoRepositoryPresent:
 
623
            pass
 
624
        return result_format
 
625
 
 
626
    def sprout(self, url, revision_id=None, basis=None, force_new_repo=False):
 
627
        """Create a copy of this bzrdir prepared for use as a new line of
 
628
        development.
 
629
 
 
630
        If urls last component does not exist, it will be created.
 
631
 
 
632
        Attributes related to the identity of the source branch like
 
633
        branch nickname will be cleaned, a working tree is created
 
634
        whether one existed before or not; and a local branch is always
 
635
        created.
 
636
 
 
637
        if revision_id is not None, then the clone operation may tune
 
638
            itself to download less data.
 
639
        """
 
640
        self._make_tail(url)
 
641
        cloning_format = self.cloning_metadir(basis)
 
642
        result = cloning_format.initialize(url)
 
643
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
644
        try:
 
645
            source_branch = self.open_branch()
 
646
            source_repository = source_branch.repository
 
647
        except errors.NotBranchError:
 
648
            source_branch = None
 
649
            try:
 
650
                source_repository = self.open_repository()
 
651
            except errors.NoRepositoryPresent:
 
652
                # copy the entire basis one if there is one
 
653
                # but there is no repository.
 
654
                source_repository = basis_repo
 
655
        if force_new_repo:
 
656
            result_repo = None
 
657
        else:
 
658
            try:
 
659
                result_repo = result.find_repository()
 
660
            except errors.NoRepositoryPresent:
 
661
                result_repo = None
 
662
        if source_repository is None and result_repo is not None:
 
663
            pass
 
664
        elif source_repository is None and result_repo is None:
 
665
            # no repo available, make a new one
 
666
            result.create_repository()
 
667
        elif source_repository is not None and result_repo is None:
 
668
            # have source, and want to make a new target repo
 
669
            # we don't clone the repo because that preserves attributes
 
670
            # like is_shared(), and we have not yet implemented a 
 
671
            # repository sprout().
 
672
            result_repo = result.create_repository()
 
673
        if result_repo is not None:
 
674
            # fetch needed content into target.
 
675
            if basis_repo:
 
676
                # XXX FIXME RBC 20060214 need tests for this when the basis
 
677
                # is incomplete
 
678
                result_repo.fetch(basis_repo, revision_id=revision_id)
 
679
            if source_repository is not None:
 
680
                result_repo.fetch(source_repository, revision_id=revision_id)
 
681
        if source_branch is not None:
 
682
            source_branch.sprout(result, revision_id=revision_id)
 
683
        else:
 
684
            result.create_branch()
 
685
        # TODO: jam 20060426 we probably need a test in here in the
 
686
        #       case that the newly sprouted branch is a remote one
 
687
        if result_repo is None or result_repo.make_working_trees():
 
688
            wt = result.create_workingtree()
 
689
            if wt.inventory.root is None:
 
690
                try:
 
691
                    wt.set_root_id(self.open_workingtree.get_root_id())
 
692
                except errors.NoWorkingTree:
 
693
                    pass
 
694
        return result
 
695
 
 
696
 
 
697
class BzrDirPreSplitOut(BzrDir):
 
698
    """A common class for the all-in-one formats."""
 
699
 
 
700
    def __init__(self, _transport, _format):
 
701
        """See BzrDir.__init__."""
 
702
        super(BzrDirPreSplitOut, self).__init__(_transport, _format)
 
703
        assert self._format._lock_class == lockable_files.TransportLock
 
704
        assert self._format._lock_file_name == 'branch-lock'
 
705
        self._control_files = lockable_files.LockableFiles(
 
706
                                            self.get_branch_transport(None),
 
707
                                            self._format._lock_file_name,
 
708
                                            self._format._lock_class)
 
709
 
 
710
    def break_lock(self):
 
711
        """Pre-splitout bzrdirs do not suffer from stale locks."""
 
712
        raise NotImplementedError(self.break_lock)
 
713
 
 
714
    def clone(self, url, revision_id=None, basis=None, force_new_repo=False):
 
715
        """See BzrDir.clone()."""
 
716
        from bzrlib.workingtree import WorkingTreeFormat2
 
717
        self._make_tail(url)
 
718
        result = self._format._initialize_for_clone(url)
 
719
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
720
        self.open_repository().clone(result, revision_id=revision_id, basis=basis_repo)
 
721
        from_branch = self.open_branch()
 
722
        from_branch.clone(result, revision_id=revision_id)
 
723
        try:
 
724
            self.open_workingtree().clone(result, basis=basis_tree)
 
725
        except errors.NotLocalUrl:
 
726
            # make a new one, this format always has to have one.
 
727
            try:
 
728
                WorkingTreeFormat2().initialize(result)
 
729
            except errors.NotLocalUrl:
 
730
                # but we cannot do it for remote trees.
 
731
                to_branch = result.open_branch()
 
732
                WorkingTreeFormat2().stub_initialize_remote(to_branch.control_files)
 
733
        return result
 
734
 
 
735
    def create_branch(self):
 
736
        """See BzrDir.create_branch."""
 
737
        return self.open_branch()
 
738
 
 
739
    def create_repository(self, shared=False):
 
740
        """See BzrDir.create_repository."""
 
741
        if shared:
 
742
            raise errors.IncompatibleFormat('shared repository', self._format)
 
743
        return self.open_repository()
 
744
 
 
745
    def create_workingtree(self, revision_id=None):
 
746
        """See BzrDir.create_workingtree."""
 
747
        # this looks buggy but is not -really-
 
748
        # clone and sprout will have set the revision_id
 
749
        # and that will have set it for us, its only
 
750
        # specific uses of create_workingtree in isolation
 
751
        # that can do wonky stuff here, and that only
 
752
        # happens for creating checkouts, which cannot be 
 
753
        # done on this format anyway. So - acceptable wart.
 
754
        result = self.open_workingtree()
 
755
        if revision_id is not None:
 
756
            if revision_id == _mod_revision.NULL_REVISION:
 
757
                result.set_parent_ids([])
 
758
            else:
 
759
                result.set_parent_ids([revision_id])
 
760
        return result
 
761
 
 
762
    def destroy_workingtree(self):
 
763
        """See BzrDir.destroy_workingtree."""
 
764
        raise errors.UnsupportedOperation(self.destroy_workingtree, self)
 
765
 
 
766
    def destroy_workingtree_metadata(self):
 
767
        """See BzrDir.destroy_workingtree_metadata."""
 
768
        raise errors.UnsupportedOperation(self.destroy_workingtree_metadata, 
 
769
                                          self)
 
770
 
 
771
    def get_branch_transport(self, branch_format):
 
772
        """See BzrDir.get_branch_transport()."""
 
773
        if branch_format is None:
 
774
            return self.transport
 
775
        try:
 
776
            branch_format.get_format_string()
 
777
        except NotImplementedError:
 
778
            return self.transport
 
779
        raise errors.IncompatibleFormat(branch_format, self._format)
 
780
 
 
781
    def get_repository_transport(self, repository_format):
 
782
        """See BzrDir.get_repository_transport()."""
 
783
        if repository_format is None:
 
784
            return self.transport
 
785
        try:
 
786
            repository_format.get_format_string()
 
787
        except NotImplementedError:
 
788
            return self.transport
 
789
        raise errors.IncompatibleFormat(repository_format, self._format)
 
790
 
 
791
    def get_workingtree_transport(self, workingtree_format):
 
792
        """See BzrDir.get_workingtree_transport()."""
 
793
        if workingtree_format is None:
 
794
            return self.transport
 
795
        try:
 
796
            workingtree_format.get_format_string()
 
797
        except NotImplementedError:
 
798
            return self.transport
 
799
        raise errors.IncompatibleFormat(workingtree_format, self._format)
 
800
 
 
801
    def needs_format_conversion(self, format=None):
 
802
        """See BzrDir.needs_format_conversion()."""
 
803
        # if the format is not the same as the system default,
 
804
        # an upgrade is needed.
 
805
        if format is None:
 
806
            format = BzrDirFormat.get_default_format()
 
807
        return not isinstance(self._format, format.__class__)
 
808
 
 
809
    def open_branch(self, unsupported=False):
 
810
        """See BzrDir.open_branch."""
 
811
        from bzrlib.branch import BzrBranchFormat4
 
812
        format = BzrBranchFormat4()
 
813
        self._check_supported(format, unsupported)
 
814
        return format.open(self, _found=True)
 
815
 
 
816
    def sprout(self, url, revision_id=None, basis=None, force_new_repo=False):
 
817
        """See BzrDir.sprout()."""
 
818
        from bzrlib.workingtree import WorkingTreeFormat2
 
819
        self._make_tail(url)
 
820
        result = self._format._initialize_for_clone(url)
 
821
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
822
        try:
 
823
            self.open_repository().clone(result, revision_id=revision_id, basis=basis_repo)
 
824
        except errors.NoRepositoryPresent:
 
825
            pass
 
826
        try:
 
827
            self.open_branch().sprout(result, revision_id=revision_id)
 
828
        except errors.NotBranchError:
 
829
            pass
 
830
        # we always want a working tree
 
831
        WorkingTreeFormat2().initialize(result)
 
832
        return result
 
833
 
 
834
 
 
835
class BzrDir4(BzrDirPreSplitOut):
 
836
    """A .bzr version 4 control object.
 
837
    
 
838
    This is a deprecated format and may be removed after sept 2006.
 
839
    """
 
840
 
 
841
    def create_repository(self, shared=False):
 
842
        """See BzrDir.create_repository."""
 
843
        return self._format.repository_format.initialize(self, shared)
 
844
 
 
845
    def needs_format_conversion(self, format=None):
 
846
        """Format 4 dirs are always in need of conversion."""
 
847
        return True
 
848
 
 
849
    def open_repository(self):
 
850
        """See BzrDir.open_repository."""
 
851
        from bzrlib.repository import RepositoryFormat4
 
852
        return RepositoryFormat4().open(self, _found=True)
 
853
 
 
854
 
 
855
class BzrDir5(BzrDirPreSplitOut):
 
856
    """A .bzr version 5 control object.
 
857
 
 
858
    This is a deprecated format and may be removed after sept 2006.
 
859
    """
 
860
 
 
861
    def open_repository(self):
 
862
        """See BzrDir.open_repository."""
 
863
        from bzrlib.repository import RepositoryFormat5
 
864
        return RepositoryFormat5().open(self, _found=True)
 
865
 
 
866
    def open_workingtree(self, _unsupported=False):
 
867
        """See BzrDir.create_workingtree."""
 
868
        from bzrlib.workingtree import WorkingTreeFormat2
 
869
        return WorkingTreeFormat2().open(self, _found=True)
 
870
 
 
871
 
 
872
class BzrDir6(BzrDirPreSplitOut):
 
873
    """A .bzr version 6 control object.
 
874
 
 
875
    This is a deprecated format and may be removed after sept 2006.
 
876
    """
 
877
 
 
878
    def open_repository(self):
 
879
        """See BzrDir.open_repository."""
 
880
        from bzrlib.repository import RepositoryFormat6
 
881
        return RepositoryFormat6().open(self, _found=True)
 
882
 
 
883
    def open_workingtree(self, _unsupported=False):
 
884
        """See BzrDir.create_workingtree."""
 
885
        from bzrlib.workingtree import WorkingTreeFormat2
 
886
        return WorkingTreeFormat2().open(self, _found=True)
 
887
 
 
888
 
 
889
class BzrDirMeta1(BzrDir):
 
890
    """A .bzr meta version 1 control object.
 
891
    
 
892
    This is the first control object where the 
 
893
    individual aspects are really split out: there are separate repository,
 
894
    workingtree and branch subdirectories and any subset of the three can be
 
895
    present within a BzrDir.
 
896
    """
 
897
 
 
898
    def can_convert_format(self):
 
899
        """See BzrDir.can_convert_format()."""
 
900
        return True
 
901
 
 
902
    def create_branch(self):
 
903
        """See BzrDir.create_branch."""
 
904
        from bzrlib.branch import BranchFormat
 
905
        return BranchFormat.get_default_format().initialize(self)
 
906
 
 
907
    def create_repository(self, shared=False):
 
908
        """See BzrDir.create_repository."""
 
909
        return self._format.repository_format.initialize(self, shared)
 
910
 
 
911
    def create_workingtree(self, revision_id=None):
 
912
        """See BzrDir.create_workingtree."""
 
913
        from bzrlib.workingtree import WorkingTreeFormat
 
914
        return WorkingTreeFormat.get_default_format().initialize(self, revision_id)
 
915
 
 
916
    def destroy_workingtree(self):
 
917
        """See BzrDir.destroy_workingtree."""
 
918
        wt = self.open_workingtree()
 
919
        repository = wt.branch.repository
 
920
        empty = repository.revision_tree(bzrlib.revision.NULL_REVISION)
 
921
        wt.revert([], old_tree=empty)
 
922
        self.destroy_workingtree_metadata()
 
923
 
 
924
    def destroy_workingtree_metadata(self):
 
925
        self.transport.delete_tree('checkout')
 
926
 
 
927
    def _get_mkdir_mode(self):
 
928
        """Figure out the mode to use when creating a bzrdir subdir."""
 
929
        temp_control = lockable_files.LockableFiles(self.transport, '',
 
930
                                     lockable_files.TransportLock)
 
931
        return temp_control._dir_mode
 
932
 
 
933
    def get_branch_transport(self, branch_format):
 
934
        """See BzrDir.get_branch_transport()."""
 
935
        if branch_format is None:
 
936
            return self.transport.clone('branch')
 
937
        try:
 
938
            branch_format.get_format_string()
 
939
        except NotImplementedError:
 
940
            raise errors.IncompatibleFormat(branch_format, self._format)
 
941
        try:
 
942
            self.transport.mkdir('branch', mode=self._get_mkdir_mode())
 
943
        except errors.FileExists:
 
944
            pass
 
945
        return self.transport.clone('branch')
 
946
 
 
947
    def get_repository_transport(self, repository_format):
 
948
        """See BzrDir.get_repository_transport()."""
 
949
        if repository_format is None:
 
950
            return self.transport.clone('repository')
 
951
        try:
 
952
            repository_format.get_format_string()
 
953
        except NotImplementedError:
 
954
            raise errors.IncompatibleFormat(repository_format, self._format)
 
955
        try:
 
956
            self.transport.mkdir('repository', mode=self._get_mkdir_mode())
 
957
        except errors.FileExists:
 
958
            pass
 
959
        return self.transport.clone('repository')
 
960
 
 
961
    def get_workingtree_transport(self, workingtree_format):
 
962
        """See BzrDir.get_workingtree_transport()."""
 
963
        if workingtree_format is None:
 
964
            return self.transport.clone('checkout')
 
965
        try:
 
966
            workingtree_format.get_format_string()
 
967
        except NotImplementedError:
 
968
            raise errors.IncompatibleFormat(workingtree_format, self._format)
 
969
        try:
 
970
            self.transport.mkdir('checkout', mode=self._get_mkdir_mode())
 
971
        except errors.FileExists:
 
972
            pass
 
973
        return self.transport.clone('checkout')
 
974
 
 
975
    def needs_format_conversion(self, format=None):
 
976
        """See BzrDir.needs_format_conversion()."""
 
977
        if format is None:
 
978
            format = BzrDirFormat.get_default_format()
 
979
        if not isinstance(self._format, format.__class__):
 
980
            # it is not a meta dir format, conversion is needed.
 
981
            return True
 
982
        # we might want to push this down to the repository?
 
983
        try:
 
984
            if not isinstance(self.open_repository()._format,
 
985
                              format.repository_format.__class__):
 
986
                # the repository needs an upgrade.
 
987
                return True
 
988
        except errors.NoRepositoryPresent:
 
989
            pass
 
990
        # currently there are no other possible conversions for meta1 formats.
 
991
        return False
 
992
 
 
993
    def open_branch(self, unsupported=False):
 
994
        """See BzrDir.open_branch."""
 
995
        from bzrlib.branch import BranchFormat
 
996
        format = BranchFormat.find_format(self)
 
997
        self._check_supported(format, unsupported)
 
998
        return format.open(self, _found=True)
 
999
 
 
1000
    def open_repository(self, unsupported=False):
 
1001
        """See BzrDir.open_repository."""
 
1002
        from bzrlib.repository import RepositoryFormat
 
1003
        format = RepositoryFormat.find_format(self)
 
1004
        self._check_supported(format, unsupported)
 
1005
        return format.open(self, _found=True)
 
1006
 
 
1007
    def open_workingtree(self, unsupported=False):
 
1008
        """See BzrDir.open_workingtree."""
 
1009
        from bzrlib.workingtree import WorkingTreeFormat
 
1010
        format = WorkingTreeFormat.find_format(self)
 
1011
        self._check_supported(format, unsupported)
 
1012
        return format.open(self, _found=True)
 
1013
 
 
1014
 
 
1015
class BzrDirFormat(object):
 
1016
    """An encapsulation of the initialization and open routines for a format.
 
1017
 
 
1018
    Formats provide three things:
 
1019
     * An initialization routine,
 
1020
     * a format string,
 
1021
     * an open routine.
 
1022
 
 
1023
    Formats are placed in an dict by their format string for reference 
 
1024
    during bzrdir opening. These should be subclasses of BzrDirFormat
 
1025
    for consistency.
 
1026
 
 
1027
    Once a format is deprecated, just deprecate the initialize and open
 
1028
    methods on the format class. Do not deprecate the object, as the 
 
1029
    object will be created every system load.
 
1030
    """
 
1031
 
 
1032
    _default_format = None
 
1033
    """The default format used for new .bzr dirs."""
 
1034
 
 
1035
    _formats = {}
 
1036
    """The known formats."""
 
1037
 
 
1038
    _control_formats = []
 
1039
    """The registered control formats - .bzr, ....
 
1040
    
 
1041
    This is a list of BzrDirFormat objects.
 
1042
    """
 
1043
 
 
1044
    _lock_file_name = 'branch-lock'
 
1045
 
 
1046
    # _lock_class must be set in subclasses to the lock type, typ.
 
1047
    # TransportLock or LockDir
 
1048
 
 
1049
    @classmethod
 
1050
    def find_format(klass, transport):
 
1051
        """Return the format present at transport."""
 
1052
        for format in klass._control_formats:
 
1053
            try:
 
1054
                return format.probe_transport(transport)
 
1055
            except errors.NotBranchError:
 
1056
                # this format does not find a control dir here.
 
1057
                pass
 
1058
        raise errors.NotBranchError(path=transport.base)
 
1059
 
 
1060
    @classmethod
 
1061
    def probe_transport(klass, transport):
 
1062
        """Return the .bzrdir style transport present at URL."""
 
1063
        try:
 
1064
            format_string = transport.get(".bzr/branch-format").read()
 
1065
        except errors.NoSuchFile:
 
1066
            raise errors.NotBranchError(path=transport.base)
 
1067
 
 
1068
        try:
 
1069
            return klass._formats[format_string]
 
1070
        except KeyError:
 
1071
            raise errors.UnknownFormatError(format=format_string)
 
1072
 
 
1073
    @classmethod
 
1074
    def get_default_format(klass):
 
1075
        """Return the current default format."""
 
1076
        return klass._default_format
 
1077
 
 
1078
    def get_format_string(self):
 
1079
        """Return the ASCII format string that identifies this format."""
 
1080
        raise NotImplementedError(self.get_format_string)
 
1081
 
 
1082
    def get_format_description(self):
 
1083
        """Return the short description for this format."""
 
1084
        raise NotImplementedError(self.get_format_description)
 
1085
 
 
1086
    def get_converter(self, format=None):
 
1087
        """Return the converter to use to convert bzrdirs needing converts.
 
1088
 
 
1089
        This returns a bzrlib.bzrdir.Converter object.
 
1090
 
 
1091
        This should return the best upgrader to step this format towards the
 
1092
        current default format. In the case of plugins we can/should provide
 
1093
        some means for them to extend the range of returnable converters.
 
1094
 
 
1095
        :param format: Optional format to override the default format of the 
 
1096
                       library.
 
1097
        """
 
1098
        raise NotImplementedError(self.get_converter)
 
1099
 
 
1100
    def initialize(self, url):
 
1101
        """Create a bzr control dir at this url and return an opened copy.
 
1102
        
 
1103
        Subclasses should typically override initialize_on_transport
 
1104
        instead of this method.
 
1105
        """
 
1106
        return self.initialize_on_transport(get_transport(url))
 
1107
 
 
1108
    def initialize_on_transport(self, transport):
 
1109
        """Initialize a new bzrdir in the base directory of a Transport."""
 
1110
        # Since we don't have a .bzr directory, inherit the
 
1111
        # mode from the root directory
 
1112
        temp_control = lockable_files.LockableFiles(transport,
 
1113
                            '', lockable_files.TransportLock)
 
1114
        temp_control._transport.mkdir('.bzr',
 
1115
                                      # FIXME: RBC 20060121 don't peek under
 
1116
                                      # the covers
 
1117
                                      mode=temp_control._dir_mode)
 
1118
        file_mode = temp_control._file_mode
 
1119
        del temp_control
 
1120
        mutter('created control directory in ' + transport.base)
 
1121
        control = transport.clone('.bzr')
 
1122
        utf8_files = [('README', 
 
1123
                       "This is a Bazaar-NG control directory.\n"
 
1124
                       "Do not change any files in this directory.\n"),
 
1125
                      ('branch-format', self.get_format_string()),
 
1126
                      ]
 
1127
        # NB: no need to escape relative paths that are url safe.
 
1128
        control_files = lockable_files.LockableFiles(control,
 
1129
                            self._lock_file_name, self._lock_class)
 
1130
        control_files.create_lock()
 
1131
        control_files.lock_write()
 
1132
        try:
 
1133
            for file, content in utf8_files:
 
1134
                control_files.put_utf8(file, content)
 
1135
        finally:
 
1136
            control_files.unlock()
 
1137
        return self.open(transport, _found=True)
 
1138
 
 
1139
    def is_supported(self):
 
1140
        """Is this format supported?
 
1141
 
 
1142
        Supported formats must be initializable and openable.
 
1143
        Unsupported formats may not support initialization or committing or 
 
1144
        some other features depending on the reason for not being supported.
 
1145
        """
 
1146
        return True
 
1147
 
 
1148
    def same_model(self, target_format):
 
1149
        return (self.repository_format.rich_root_data == 
 
1150
            target_format.rich_root_data)
 
1151
 
 
1152
    @classmethod
 
1153
    def known_formats(klass):
 
1154
        """Return all the known formats.
 
1155
        
 
1156
        Concrete formats should override _known_formats.
 
1157
        """
 
1158
        # There is double indirection here to make sure that control 
 
1159
        # formats used by more than one dir format will only be probed 
 
1160
        # once. This can otherwise be quite expensive for remote connections.
 
1161
        result = set()
 
1162
        for format in klass._control_formats:
 
1163
            result.update(format._known_formats())
 
1164
        return result
 
1165
    
 
1166
    @classmethod
 
1167
    def _known_formats(klass):
 
1168
        """Return the known format instances for this control format."""
 
1169
        return set(klass._formats.values())
 
1170
 
 
1171
    def open(self, transport, _found=False):
 
1172
        """Return an instance of this format for the dir transport points at.
 
1173
        
 
1174
        _found is a private parameter, do not use it.
 
1175
        """
 
1176
        if not _found:
 
1177
            assert isinstance(BzrDirFormat.find_format(transport),
 
1178
                              self.__class__)
 
1179
        return self._open(transport)
 
1180
 
 
1181
    def _open(self, transport):
 
1182
        """Template method helper for opening BzrDirectories.
 
1183
 
 
1184
        This performs the actual open and any additional logic or parameter
 
1185
        passing.
 
1186
        """
 
1187
        raise NotImplementedError(self._open)
 
1188
 
 
1189
    @classmethod
 
1190
    def register_format(klass, format):
 
1191
        klass._formats[format.get_format_string()] = format
 
1192
 
 
1193
    @classmethod
 
1194
    def register_control_format(klass, format):
 
1195
        """Register a format that does not use '.bzrdir' for its control dir.
 
1196
 
 
1197
        TODO: This should be pulled up into a 'ControlDirFormat' base class
 
1198
        which BzrDirFormat can inherit from, and renamed to register_format 
 
1199
        there. It has been done without that for now for simplicity of
 
1200
        implementation.
 
1201
        """
 
1202
        klass._control_formats.append(format)
 
1203
 
 
1204
    @classmethod
 
1205
    def set_default_format(klass, format):
 
1206
        klass._default_format = format
 
1207
 
 
1208
    def __str__(self):
 
1209
        return self.get_format_string()[:-1]
 
1210
 
 
1211
    @classmethod
 
1212
    def unregister_format(klass, format):
 
1213
        assert klass._formats[format.get_format_string()] is format
 
1214
        del klass._formats[format.get_format_string()]
 
1215
 
 
1216
    @classmethod
 
1217
    def unregister_control_format(klass, format):
 
1218
        klass._control_formats.remove(format)
 
1219
 
 
1220
 
 
1221
# register BzrDirFormat as a control format
 
1222
BzrDirFormat.register_control_format(BzrDirFormat)
 
1223
 
 
1224
 
 
1225
class BzrDirFormat4(BzrDirFormat):
 
1226
    """Bzr dir format 4.
 
1227
 
 
1228
    This format is a combined format for working tree, branch and repository.
 
1229
    It has:
 
1230
     - Format 1 working trees [always]
 
1231
     - Format 4 branches [always]
 
1232
     - Format 4 repositories [always]
 
1233
 
 
1234
    This format is deprecated: it indexes texts using a text it which is
 
1235
    removed in format 5; write support for this format has been removed.
 
1236
    """
 
1237
 
 
1238
    _lock_class = lockable_files.TransportLock
 
1239
 
 
1240
    def get_format_string(self):
 
1241
        """See BzrDirFormat.get_format_string()."""
 
1242
        return "Bazaar-NG branch, format 0.0.4\n"
 
1243
 
 
1244
    def get_format_description(self):
 
1245
        """See BzrDirFormat.get_format_description()."""
 
1246
        return "All-in-one format 4"
 
1247
 
 
1248
    def get_converter(self, format=None):
 
1249
        """See BzrDirFormat.get_converter()."""
 
1250
        # there is one and only one upgrade path here.
 
1251
        return ConvertBzrDir4To5()
 
1252
        
 
1253
    def initialize_on_transport(self, transport):
 
1254
        """Format 4 branches cannot be created."""
 
1255
        raise errors.UninitializableFormat(self)
 
1256
 
 
1257
    def is_supported(self):
 
1258
        """Format 4 is not supported.
 
1259
 
 
1260
        It is not supported because the model changed from 4 to 5 and the
 
1261
        conversion logic is expensive - so doing it on the fly was not 
 
1262
        feasible.
 
1263
        """
 
1264
        return False
 
1265
 
 
1266
    def _open(self, transport):
 
1267
        """See BzrDirFormat._open."""
 
1268
        return BzrDir4(transport, self)
 
1269
 
 
1270
    def __return_repository_format(self):
 
1271
        """Circular import protection."""
 
1272
        from bzrlib.repository import RepositoryFormat4
 
1273
        return RepositoryFormat4()
 
1274
    repository_format = property(__return_repository_format)
 
1275
 
 
1276
 
 
1277
class BzrDirFormat5(BzrDirFormat):
 
1278
    """Bzr control format 5.
 
1279
 
 
1280
    This format is a combined format for working tree, branch and repository.
 
1281
    It has:
 
1282
     - Format 2 working trees [always] 
 
1283
     - Format 4 branches [always] 
 
1284
     - Format 5 repositories [always]
 
1285
       Unhashed stores in the repository.
 
1286
    """
 
1287
 
 
1288
    _lock_class = lockable_files.TransportLock
 
1289
 
 
1290
    def get_format_string(self):
 
1291
        """See BzrDirFormat.get_format_string()."""
 
1292
        return "Bazaar-NG branch, format 5\n"
 
1293
 
 
1294
    def get_format_description(self):
 
1295
        """See BzrDirFormat.get_format_description()."""
 
1296
        return "All-in-one format 5"
 
1297
 
 
1298
    def get_converter(self, format=None):
 
1299
        """See BzrDirFormat.get_converter()."""
 
1300
        # there is one and only one upgrade path here.
 
1301
        return ConvertBzrDir5To6()
 
1302
 
 
1303
    def _initialize_for_clone(self, url):
 
1304
        return self.initialize_on_transport(get_transport(url), _cloning=True)
 
1305
        
 
1306
    def initialize_on_transport(self, transport, _cloning=False):
 
1307
        """Format 5 dirs always have working tree, branch and repository.
 
1308
        
 
1309
        Except when they are being cloned.
 
1310
        """
 
1311
        from bzrlib.branch import BzrBranchFormat4
 
1312
        from bzrlib.repository import RepositoryFormat5
 
1313
        from bzrlib.workingtree import WorkingTreeFormat2
 
1314
        result = (super(BzrDirFormat5, self).initialize_on_transport(transport))
 
1315
        RepositoryFormat5().initialize(result, _internal=True)
 
1316
        if not _cloning:
 
1317
            branch = BzrBranchFormat4().initialize(result)
 
1318
            try:
 
1319
                WorkingTreeFormat2().initialize(result)
 
1320
            except errors.NotLocalUrl:
 
1321
                # Even though we can't access the working tree, we need to
 
1322
                # create its control files.
 
1323
                WorkingTreeFormat2().stub_initialize_remote(branch.control_files)
 
1324
        return result
 
1325
 
 
1326
    def _open(self, transport):
 
1327
        """See BzrDirFormat._open."""
 
1328
        return BzrDir5(transport, self)
 
1329
 
 
1330
    def __return_repository_format(self):
 
1331
        """Circular import protection."""
 
1332
        from bzrlib.repository import RepositoryFormat5
 
1333
        return RepositoryFormat5()
 
1334
    repository_format = property(__return_repository_format)
 
1335
 
 
1336
 
 
1337
class BzrDirFormat6(BzrDirFormat):
 
1338
    """Bzr control format 6.
 
1339
 
 
1340
    This format is a combined format for working tree, branch and repository.
 
1341
    It has:
 
1342
     - Format 2 working trees [always] 
 
1343
     - Format 4 branches [always] 
 
1344
     - Format 6 repositories [always]
 
1345
    """
 
1346
 
 
1347
    _lock_class = lockable_files.TransportLock
 
1348
 
 
1349
    def get_format_string(self):
 
1350
        """See BzrDirFormat.get_format_string()."""
 
1351
        return "Bazaar-NG branch, format 6\n"
 
1352
 
 
1353
    def get_format_description(self):
 
1354
        """See BzrDirFormat.get_format_description()."""
 
1355
        return "All-in-one format 6"
 
1356
 
 
1357
    def get_converter(self, format=None):
 
1358
        """See BzrDirFormat.get_converter()."""
 
1359
        # there is one and only one upgrade path here.
 
1360
        return ConvertBzrDir6ToMeta()
 
1361
        
 
1362
    def _initialize_for_clone(self, url):
 
1363
        return self.initialize_on_transport(get_transport(url), _cloning=True)
 
1364
 
 
1365
    def initialize_on_transport(self, transport, _cloning=False):
 
1366
        """Format 6 dirs always have working tree, branch and repository.
 
1367
        
 
1368
        Except when they are being cloned.
 
1369
        """
 
1370
        from bzrlib.branch import BzrBranchFormat4
 
1371
        from bzrlib.repository import RepositoryFormat6
 
1372
        from bzrlib.workingtree import WorkingTreeFormat2
 
1373
        result = super(BzrDirFormat6, self).initialize_on_transport(transport)
 
1374
        RepositoryFormat6().initialize(result, _internal=True)
 
1375
        if not _cloning:
 
1376
            branch = BzrBranchFormat4().initialize(result)
 
1377
            try:
 
1378
                WorkingTreeFormat2().initialize(result)
 
1379
            except errors.NotLocalUrl:
 
1380
                # Even though we can't access the working tree, we need to
 
1381
                # create its control files.
 
1382
                WorkingTreeFormat2().stub_initialize_remote(branch.control_files)
 
1383
        return result
 
1384
 
 
1385
    def _open(self, transport):
 
1386
        """See BzrDirFormat._open."""
 
1387
        return BzrDir6(transport, self)
 
1388
 
 
1389
    def __return_repository_format(self):
 
1390
        """Circular import protection."""
 
1391
        from bzrlib.repository import RepositoryFormat6
 
1392
        return RepositoryFormat6()
 
1393
    repository_format = property(__return_repository_format)
 
1394
 
 
1395
 
 
1396
class BzrDirMetaFormat1(BzrDirFormat):
 
1397
    """Bzr meta control format 1
 
1398
 
 
1399
    This is the first format with split out working tree, branch and repository
 
1400
    disk storage.
 
1401
    It has:
 
1402
     - Format 3 working trees [optional]
 
1403
     - Format 5 branches [optional]
 
1404
     - Format 7 repositories [optional]
 
1405
    """
 
1406
 
 
1407
    _lock_class = lockdir.LockDir
 
1408
 
 
1409
    def get_converter(self, format=None):
 
1410
        """See BzrDirFormat.get_converter()."""
 
1411
        if format is None:
 
1412
            format = BzrDirFormat.get_default_format()
 
1413
        if not isinstance(self, format.__class__):
 
1414
            # converting away from metadir is not implemented
 
1415
            raise NotImplementedError(self.get_converter)
 
1416
        return ConvertMetaToMeta(format)
 
1417
 
 
1418
    def get_format_string(self):
 
1419
        """See BzrDirFormat.get_format_string()."""
 
1420
        return "Bazaar-NG meta directory, format 1\n"
 
1421
 
 
1422
    def get_format_description(self):
 
1423
        """See BzrDirFormat.get_format_description()."""
 
1424
        return "Meta directory format 1"
 
1425
 
 
1426
    def _open(self, transport):
 
1427
        """See BzrDirFormat._open."""
 
1428
        return BzrDirMeta1(transport, self)
 
1429
 
 
1430
    def __return_repository_format(self):
 
1431
        """Circular import protection."""
 
1432
        if getattr(self, '_repository_format', None):
 
1433
            return self._repository_format
 
1434
        from bzrlib.repository import RepositoryFormat
 
1435
        return RepositoryFormat.get_default_format()
 
1436
 
 
1437
    def __set_repository_format(self, value):
 
1438
        """Allow changint the repository format for metadir formats."""
 
1439
        self._repository_format = value
 
1440
 
 
1441
    repository_format = property(__return_repository_format, __set_repository_format)
 
1442
 
 
1443
 
 
1444
BzrDirFormat.register_format(BzrDirFormat4())
 
1445
BzrDirFormat.register_format(BzrDirFormat5())
 
1446
BzrDirFormat.register_format(BzrDirFormat6())
 
1447
__default_format = BzrDirMetaFormat1()
 
1448
BzrDirFormat.register_format(__default_format)
 
1449
BzrDirFormat.set_default_format(__default_format)
 
1450
 
 
1451
 
 
1452
class BzrDirTestProviderAdapter(object):
 
1453
    """A tool to generate a suite testing multiple bzrdir formats at once.
 
1454
 
 
1455
    This is done by copying the test once for each transport and injecting
 
1456
    the transport_server, transport_readonly_server, and bzrdir_format
 
1457
    classes into each copy. Each copy is also given a new id() to make it
 
1458
    easy to identify.
 
1459
    """
 
1460
 
 
1461
    def __init__(self, transport_server, transport_readonly_server, formats):
 
1462
        self._transport_server = transport_server
 
1463
        self._transport_readonly_server = transport_readonly_server
 
1464
        self._formats = formats
 
1465
    
 
1466
    def adapt(self, test):
 
1467
        result = unittest.TestSuite()
 
1468
        for format in self._formats:
 
1469
            new_test = deepcopy(test)
 
1470
            new_test.transport_server = self._transport_server
 
1471
            new_test.transport_readonly_server = self._transport_readonly_server
 
1472
            new_test.bzrdir_format = format
 
1473
            def make_new_test_id():
 
1474
                new_id = "%s(%s)" % (new_test.id(), format.__class__.__name__)
 
1475
                return lambda: new_id
 
1476
            new_test.id = make_new_test_id()
 
1477
            result.addTest(new_test)
 
1478
        return result
 
1479
 
 
1480
 
 
1481
class Converter(object):
 
1482
    """Converts a disk format object from one format to another."""
 
1483
 
 
1484
    def convert(self, to_convert, pb):
 
1485
        """Perform the conversion of to_convert, giving feedback via pb.
 
1486
 
 
1487
        :param to_convert: The disk object to convert.
 
1488
        :param pb: a progress bar to use for progress information.
 
1489
        """
 
1490
 
 
1491
    def step(self, message):
 
1492
        """Update the pb by a step."""
 
1493
        self.count +=1
 
1494
        self.pb.update(message, self.count, self.total)
 
1495
 
 
1496
 
 
1497
class ConvertBzrDir4To5(Converter):
 
1498
    """Converts format 4 bzr dirs to format 5."""
 
1499
 
 
1500
    def __init__(self):
 
1501
        super(ConvertBzrDir4To5, self).__init__()
 
1502
        self.converted_revs = set()
 
1503
        self.absent_revisions = set()
 
1504
        self.text_count = 0
 
1505
        self.revisions = {}
 
1506
        
 
1507
    def convert(self, to_convert, pb):
 
1508
        """See Converter.convert()."""
 
1509
        self.bzrdir = to_convert
 
1510
        self.pb = pb
 
1511
        self.pb.note('starting upgrade from format 4 to 5')
 
1512
        if isinstance(self.bzrdir.transport, LocalTransport):
 
1513
            self.bzrdir.get_workingtree_transport(None).delete('stat-cache')
 
1514
        self._convert_to_weaves()
 
1515
        return BzrDir.open(self.bzrdir.root_transport.base)
 
1516
 
 
1517
    def _convert_to_weaves(self):
 
1518
        self.pb.note('note: upgrade may be faster if all store files are ungzipped first')
 
1519
        try:
 
1520
            # TODO permissions
 
1521
            stat = self.bzrdir.transport.stat('weaves')
 
1522
            if not S_ISDIR(stat.st_mode):
 
1523
                self.bzrdir.transport.delete('weaves')
 
1524
                self.bzrdir.transport.mkdir('weaves')
 
1525
        except errors.NoSuchFile:
 
1526
            self.bzrdir.transport.mkdir('weaves')
 
1527
        # deliberately not a WeaveFile as we want to build it up slowly.
 
1528
        self.inv_weave = Weave('inventory')
 
1529
        # holds in-memory weaves for all files
 
1530
        self.text_weaves = {}
 
1531
        self.bzrdir.transport.delete('branch-format')
 
1532
        self.branch = self.bzrdir.open_branch()
 
1533
        self._convert_working_inv()
 
1534
        rev_history = self.branch.revision_history()
 
1535
        # to_read is a stack holding the revisions we still need to process;
 
1536
        # appending to it adds new highest-priority revisions
 
1537
        self.known_revisions = set(rev_history)
 
1538
        self.to_read = rev_history[-1:]
 
1539
        while self.to_read:
 
1540
            rev_id = self.to_read.pop()
 
1541
            if (rev_id not in self.revisions
 
1542
                and rev_id not in self.absent_revisions):
 
1543
                self._load_one_rev(rev_id)
 
1544
        self.pb.clear()
 
1545
        to_import = self._make_order()
 
1546
        for i, rev_id in enumerate(to_import):
 
1547
            self.pb.update('converting revision', i, len(to_import))
 
1548
            self._convert_one_rev(rev_id)
 
1549
        self.pb.clear()
 
1550
        self._write_all_weaves()
 
1551
        self._write_all_revs()
 
1552
        self.pb.note('upgraded to weaves:')
 
1553
        self.pb.note('  %6d revisions and inventories', len(self.revisions))
 
1554
        self.pb.note('  %6d revisions not present', len(self.absent_revisions))
 
1555
        self.pb.note('  %6d texts', self.text_count)
 
1556
        self._cleanup_spare_files_after_format4()
 
1557
        self.branch.control_files.put_utf8('branch-format', BzrDirFormat5().get_format_string())
 
1558
 
 
1559
    def _cleanup_spare_files_after_format4(self):
 
1560
        # FIXME working tree upgrade foo.
 
1561
        for n in 'merged-patches', 'pending-merged-patches':
 
1562
            try:
 
1563
                ## assert os.path.getsize(p) == 0
 
1564
                self.bzrdir.transport.delete(n)
 
1565
            except errors.NoSuchFile:
 
1566
                pass
 
1567
        self.bzrdir.transport.delete_tree('inventory-store')
 
1568
        self.bzrdir.transport.delete_tree('text-store')
 
1569
 
 
1570
    def _convert_working_inv(self):
 
1571
        inv = xml4.serializer_v4.read_inventory(
 
1572
                    self.branch.control_files.get('inventory'))
 
1573
        new_inv_xml = xml5.serializer_v5.write_inventory_to_string(inv)
 
1574
        # FIXME inventory is a working tree change.
 
1575
        self.branch.control_files.put('inventory', StringIO(new_inv_xml))
 
1576
 
 
1577
    def _write_all_weaves(self):
 
1578
        controlweaves = WeaveStore(self.bzrdir.transport, prefixed=False)
 
1579
        weave_transport = self.bzrdir.transport.clone('weaves')
 
1580
        weaves = WeaveStore(weave_transport, prefixed=False)
 
1581
        transaction = WriteTransaction()
 
1582
 
 
1583
        try:
 
1584
            i = 0
 
1585
            for file_id, file_weave in self.text_weaves.items():
 
1586
                self.pb.update('writing weave', i, len(self.text_weaves))
 
1587
                weaves._put_weave(file_id, file_weave, transaction)
 
1588
                i += 1
 
1589
            self.pb.update('inventory', 0, 1)
 
1590
            controlweaves._put_weave('inventory', self.inv_weave, transaction)
 
1591
            self.pb.update('inventory', 1, 1)
 
1592
        finally:
 
1593
            self.pb.clear()
 
1594
 
 
1595
    def _write_all_revs(self):
 
1596
        """Write all revisions out in new form."""
 
1597
        self.bzrdir.transport.delete_tree('revision-store')
 
1598
        self.bzrdir.transport.mkdir('revision-store')
 
1599
        revision_transport = self.bzrdir.transport.clone('revision-store')
 
1600
        # TODO permissions
 
1601
        _revision_store = TextRevisionStore(TextStore(revision_transport,
 
1602
                                                      prefixed=False,
 
1603
                                                      compressed=True))
 
1604
        try:
 
1605
            transaction = WriteTransaction()
 
1606
            for i, rev_id in enumerate(self.converted_revs):
 
1607
                self.pb.update('write revision', i, len(self.converted_revs))
 
1608
                _revision_store.add_revision(self.revisions[rev_id], transaction)
 
1609
        finally:
 
1610
            self.pb.clear()
 
1611
            
 
1612
    def _load_one_rev(self, rev_id):
 
1613
        """Load a revision object into memory.
 
1614
 
 
1615
        Any parents not either loaded or abandoned get queued to be
 
1616
        loaded."""
 
1617
        self.pb.update('loading revision',
 
1618
                       len(self.revisions),
 
1619
                       len(self.known_revisions))
 
1620
        if not self.branch.repository.has_revision(rev_id):
 
1621
            self.pb.clear()
 
1622
            self.pb.note('revision {%s} not present in branch; '
 
1623
                         'will be converted as a ghost',
 
1624
                         rev_id)
 
1625
            self.absent_revisions.add(rev_id)
 
1626
        else:
 
1627
            rev = self.branch.repository._revision_store.get_revision(rev_id,
 
1628
                self.branch.repository.get_transaction())
 
1629
            for parent_id in rev.parent_ids:
 
1630
                self.known_revisions.add(parent_id)
 
1631
                self.to_read.append(parent_id)
 
1632
            self.revisions[rev_id] = rev
 
1633
 
 
1634
    def _load_old_inventory(self, rev_id):
 
1635
        assert rev_id not in self.converted_revs
 
1636
        old_inv_xml = self.branch.repository.inventory_store.get(rev_id).read()
 
1637
        inv = xml4.serializer_v4.read_inventory_from_string(old_inv_xml)
 
1638
        inv.revision_id = rev_id
 
1639
        rev = self.revisions[rev_id]
 
1640
        if rev.inventory_sha1:
 
1641
            assert rev.inventory_sha1 == sha_string(old_inv_xml), \
 
1642
                'inventory sha mismatch for {%s}' % rev_id
 
1643
        return inv
 
1644
 
 
1645
    def _load_updated_inventory(self, rev_id):
 
1646
        assert rev_id in self.converted_revs
 
1647
        inv_xml = self.inv_weave.get_text(rev_id)
 
1648
        inv = xml5.serializer_v5.read_inventory_from_string(inv_xml)
 
1649
        return inv
 
1650
 
 
1651
    def _convert_one_rev(self, rev_id):
 
1652
        """Convert revision and all referenced objects to new format."""
 
1653
        rev = self.revisions[rev_id]
 
1654
        inv = self._load_old_inventory(rev_id)
 
1655
        present_parents = [p for p in rev.parent_ids
 
1656
                           if p not in self.absent_revisions]
 
1657
        self._convert_revision_contents(rev, inv, present_parents)
 
1658
        self._store_new_weave(rev, inv, present_parents)
 
1659
        self.converted_revs.add(rev_id)
 
1660
 
 
1661
    def _store_new_weave(self, rev, inv, present_parents):
 
1662
        # the XML is now updated with text versions
 
1663
        if __debug__:
 
1664
            entries = inv.iter_entries()
 
1665
            entries.next()
 
1666
            for path, ie in entries:
 
1667
                assert getattr(ie, 'revision', None) is not None, \
 
1668
                    'no revision on {%s} in {%s}' % \
 
1669
                    (file_id, rev.revision_id)
 
1670
        new_inv_xml = xml5.serializer_v5.write_inventory_to_string(inv)
 
1671
        new_inv_sha1 = sha_string(new_inv_xml)
 
1672
        self.inv_weave.add_lines(rev.revision_id, 
 
1673
                                 present_parents,
 
1674
                                 new_inv_xml.splitlines(True))
 
1675
        rev.inventory_sha1 = new_inv_sha1
 
1676
 
 
1677
    def _convert_revision_contents(self, rev, inv, present_parents):
 
1678
        """Convert all the files within a revision.
 
1679
 
 
1680
        Also upgrade the inventory to refer to the text revision ids."""
 
1681
        rev_id = rev.revision_id
 
1682
        mutter('converting texts of revision {%s}',
 
1683
               rev_id)
 
1684
        parent_invs = map(self._load_updated_inventory, present_parents)
 
1685
        entries = inv.iter_entries()
 
1686
        entries.next()
 
1687
        for path, ie in entries:
 
1688
            self._convert_file_version(rev, ie, parent_invs)
 
1689
 
 
1690
    def _convert_file_version(self, rev, ie, parent_invs):
 
1691
        """Convert one version of one file.
 
1692
 
 
1693
        The file needs to be added into the weave if it is a merge
 
1694
        of >=2 parents or if it's changed from its parent.
 
1695
        """
 
1696
        file_id = ie.file_id
 
1697
        rev_id = rev.revision_id
 
1698
        w = self.text_weaves.get(file_id)
 
1699
        if w is None:
 
1700
            w = Weave(file_id)
 
1701
            self.text_weaves[file_id] = w
 
1702
        text_changed = False
 
1703
        previous_entries = ie.find_previous_heads(parent_invs,
 
1704
                                                  None,
 
1705
                                                  None,
 
1706
                                                  entry_vf=w)
 
1707
        for old_revision in previous_entries:
 
1708
                # if this fails, its a ghost ?
 
1709
                assert old_revision in self.converted_revs, \
 
1710
                    "Revision {%s} not in converted_revs" % old_revision
 
1711
        self.snapshot_ie(previous_entries, ie, w, rev_id)
 
1712
        del ie.text_id
 
1713
        assert getattr(ie, 'revision', None) is not None
 
1714
 
 
1715
    def snapshot_ie(self, previous_revisions, ie, w, rev_id):
 
1716
        # TODO: convert this logic, which is ~= snapshot to
 
1717
        # a call to:. This needs the path figured out. rather than a work_tree
 
1718
        # a v4 revision_tree can be given, or something that looks enough like
 
1719
        # one to give the file content to the entry if it needs it.
 
1720
        # and we need something that looks like a weave store for snapshot to 
 
1721
        # save against.
 
1722
        #ie.snapshot(rev, PATH, previous_revisions, REVISION_TREE, InMemoryWeaveStore(self.text_weaves))
 
1723
        if len(previous_revisions) == 1:
 
1724
            previous_ie = previous_revisions.values()[0]
 
1725
            if ie._unchanged(previous_ie):
 
1726
                ie.revision = previous_ie.revision
 
1727
                return
 
1728
        if ie.has_text():
 
1729
            text = self.branch.repository.text_store.get(ie.text_id)
 
1730
            file_lines = text.readlines()
 
1731
            assert sha_strings(file_lines) == ie.text_sha1
 
1732
            assert sum(map(len, file_lines)) == ie.text_size
 
1733
            w.add_lines(rev_id, previous_revisions, file_lines)
 
1734
            self.text_count += 1
 
1735
        else:
 
1736
            w.add_lines(rev_id, previous_revisions, [])
 
1737
        ie.revision = rev_id
 
1738
 
 
1739
    def _make_order(self):
 
1740
        """Return a suitable order for importing revisions.
 
1741
 
 
1742
        The order must be such that an revision is imported after all
 
1743
        its (present) parents.
 
1744
        """
 
1745
        todo = set(self.revisions.keys())
 
1746
        done = self.absent_revisions.copy()
 
1747
        order = []
 
1748
        while todo:
 
1749
            # scan through looking for a revision whose parents
 
1750
            # are all done
 
1751
            for rev_id in sorted(list(todo)):
 
1752
                rev = self.revisions[rev_id]
 
1753
                parent_ids = set(rev.parent_ids)
 
1754
                if parent_ids.issubset(done):
 
1755
                    # can take this one now
 
1756
                    order.append(rev_id)
 
1757
                    todo.remove(rev_id)
 
1758
                    done.add(rev_id)
 
1759
        return order
 
1760
 
 
1761
 
 
1762
class ConvertBzrDir5To6(Converter):
 
1763
    """Converts format 5 bzr dirs to format 6."""
 
1764
 
 
1765
    def convert(self, to_convert, pb):
 
1766
        """See Converter.convert()."""
 
1767
        self.bzrdir = to_convert
 
1768
        self.pb = pb
 
1769
        self.pb.note('starting upgrade from format 5 to 6')
 
1770
        self._convert_to_prefixed()
 
1771
        return BzrDir.open(self.bzrdir.root_transport.base)
 
1772
 
 
1773
    def _convert_to_prefixed(self):
 
1774
        from bzrlib.store import TransportStore
 
1775
        self.bzrdir.transport.delete('branch-format')
 
1776
        for store_name in ["weaves", "revision-store"]:
 
1777
            self.pb.note("adding prefixes to %s" % store_name)
 
1778
            store_transport = self.bzrdir.transport.clone(store_name)
 
1779
            store = TransportStore(store_transport, prefixed=True)
 
1780
            for urlfilename in store_transport.list_dir('.'):
 
1781
                filename = urlutils.unescape(urlfilename)
 
1782
                if (filename.endswith(".weave") or
 
1783
                    filename.endswith(".gz") or
 
1784
                    filename.endswith(".sig")):
 
1785
                    file_id = os.path.splitext(filename)[0]
 
1786
                else:
 
1787
                    file_id = filename
 
1788
                prefix_dir = store.hash_prefix(file_id)
 
1789
                # FIXME keep track of the dirs made RBC 20060121
 
1790
                try:
 
1791
                    store_transport.move(filename, prefix_dir + '/' + filename)
 
1792
                except errors.NoSuchFile: # catches missing dirs strangely enough
 
1793
                    store_transport.mkdir(prefix_dir)
 
1794
                    store_transport.move(filename, prefix_dir + '/' + filename)
 
1795
        self.bzrdir._control_files.put_utf8('branch-format', BzrDirFormat6().get_format_string())
 
1796
 
 
1797
 
 
1798
class ConvertBzrDir6ToMeta(Converter):
 
1799
    """Converts format 6 bzr dirs to metadirs."""
 
1800
 
 
1801
    def convert(self, to_convert, pb):
 
1802
        """See Converter.convert()."""
 
1803
        self.bzrdir = to_convert
 
1804
        self.pb = pb
 
1805
        self.count = 0
 
1806
        self.total = 20 # the steps we know about
 
1807
        self.garbage_inventories = []
 
1808
 
 
1809
        self.pb.note('starting upgrade from format 6 to metadir')
 
1810
        self.bzrdir._control_files.put_utf8('branch-format', "Converting to format 6")
 
1811
        # its faster to move specific files around than to open and use the apis...
 
1812
        # first off, nuke ancestry.weave, it was never used.
 
1813
        try:
 
1814
            self.step('Removing ancestry.weave')
 
1815
            self.bzrdir.transport.delete('ancestry.weave')
 
1816
        except errors.NoSuchFile:
 
1817
            pass
 
1818
        # find out whats there
 
1819
        self.step('Finding branch files')
 
1820
        last_revision = self.bzrdir.open_branch().last_revision()
 
1821
        bzrcontents = self.bzrdir.transport.list_dir('.')
 
1822
        for name in bzrcontents:
 
1823
            if name.startswith('basis-inventory.'):
 
1824
                self.garbage_inventories.append(name)
 
1825
        # create new directories for repository, working tree and branch
 
1826
        self.dir_mode = self.bzrdir._control_files._dir_mode
 
1827
        self.file_mode = self.bzrdir._control_files._file_mode
 
1828
        repository_names = [('inventory.weave', True),
 
1829
                            ('revision-store', True),
 
1830
                            ('weaves', True)]
 
1831
        self.step('Upgrading repository  ')
 
1832
        self.bzrdir.transport.mkdir('repository', mode=self.dir_mode)
 
1833
        self.make_lock('repository')
 
1834
        # we hard code the formats here because we are converting into
 
1835
        # the meta format. The meta format upgrader can take this to a 
 
1836
        # future format within each component.
 
1837
        self.put_format('repository', bzrlib.repository.RepositoryFormat7())
 
1838
        for entry in repository_names:
 
1839
            self.move_entry('repository', entry)
 
1840
 
 
1841
        self.step('Upgrading branch      ')
 
1842
        self.bzrdir.transport.mkdir('branch', mode=self.dir_mode)
 
1843
        self.make_lock('branch')
 
1844
        self.put_format('branch', bzrlib.branch.BzrBranchFormat5())
 
1845
        branch_files = [('revision-history', True),
 
1846
                        ('branch-name', True),
 
1847
                        ('parent', False)]
 
1848
        for entry in branch_files:
 
1849
            self.move_entry('branch', entry)
 
1850
 
 
1851
        checkout_files = [('pending-merges', True),
 
1852
                          ('inventory', True),
 
1853
                          ('stat-cache', False)]
 
1854
        # If a mandatory checkout file is not present, the branch does not have
 
1855
        # a functional checkout. Do not create a checkout in the converted
 
1856
        # branch.
 
1857
        for name, mandatory in checkout_files:
 
1858
            if mandatory and name not in bzrcontents:
 
1859
                has_checkout = False
 
1860
                break
 
1861
        else:
 
1862
            has_checkout = True
 
1863
        if not has_checkout:
 
1864
            self.pb.note('No working tree.')
 
1865
            # If some checkout files are there, we may as well get rid of them.
 
1866
            for name, mandatory in checkout_files:
 
1867
                if name in bzrcontents:
 
1868
                    self.bzrdir.transport.delete(name)
 
1869
        else:
 
1870
            self.step('Upgrading working tree')
 
1871
            self.bzrdir.transport.mkdir('checkout', mode=self.dir_mode)
 
1872
            self.make_lock('checkout')
 
1873
            self.put_format(
 
1874
                'checkout', bzrlib.workingtree.WorkingTreeFormat3())
 
1875
            self.bzrdir.transport.delete_multi(
 
1876
                self.garbage_inventories, self.pb)
 
1877
            for entry in checkout_files:
 
1878
                self.move_entry('checkout', entry)
 
1879
            if last_revision is not None:
 
1880
                self.bzrdir._control_files.put_utf8(
 
1881
                    'checkout/last-revision', last_revision)
 
1882
        self.bzrdir._control_files.put_utf8(
 
1883
            'branch-format', BzrDirMetaFormat1().get_format_string())
 
1884
        return BzrDir.open(self.bzrdir.root_transport.base)
 
1885
 
 
1886
    def make_lock(self, name):
 
1887
        """Make a lock for the new control dir name."""
 
1888
        self.step('Make %s lock' % name)
 
1889
        ld = lockdir.LockDir(self.bzrdir.transport,
 
1890
                             '%s/lock' % name,
 
1891
                             file_modebits=self.file_mode,
 
1892
                             dir_modebits=self.dir_mode)
 
1893
        ld.create()
 
1894
 
 
1895
    def move_entry(self, new_dir, entry):
 
1896
        """Move then entry name into new_dir."""
 
1897
        name = entry[0]
 
1898
        mandatory = entry[1]
 
1899
        self.step('Moving %s' % name)
 
1900
        try:
 
1901
            self.bzrdir.transport.move(name, '%s/%s' % (new_dir, name))
 
1902
        except errors.NoSuchFile:
 
1903
            if mandatory:
 
1904
                raise
 
1905
 
 
1906
    def put_format(self, dirname, format):
 
1907
        self.bzrdir._control_files.put_utf8('%s/format' % dirname, format.get_format_string())
 
1908
 
 
1909
 
 
1910
class ConvertMetaToMeta(Converter):
 
1911
    """Converts the components of metadirs."""
 
1912
 
 
1913
    def __init__(self, target_format):
 
1914
        """Create a metadir to metadir converter.
 
1915
 
 
1916
        :param target_format: The final metadir format that is desired.
 
1917
        """
 
1918
        self.target_format = target_format
 
1919
 
 
1920
    def convert(self, to_convert, pb):
 
1921
        """See Converter.convert()."""
 
1922
        self.bzrdir = to_convert
 
1923
        self.pb = pb
 
1924
        self.count = 0
 
1925
        self.total = 1
 
1926
        self.step('checking repository format')
 
1927
        try:
 
1928
            repo = self.bzrdir.open_repository()
 
1929
        except errors.NoRepositoryPresent:
 
1930
            pass
 
1931
        else:
 
1932
            if not isinstance(repo._format, self.target_format.repository_format.__class__):
 
1933
                from bzrlib.repository import CopyConverter
 
1934
                self.pb.note('starting repository conversion')
 
1935
                converter = CopyConverter(self.target_format.repository_format)
 
1936
                converter.convert(repo, pb)
 
1937
        return to_convert