~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/workingtree.py

  • Committer: Ian Clatworthy
  • Date: 2007-12-17 04:49:20 UTC
  • mfrom: (3089.3.17 bzr.ug-tweaks)
  • mto: This revision was merged to the branch mainline in revision 3120.
  • Revision ID: ian.clatworthy@internode.on.net-20071217044920-8fjh9v6m1t93c8dc
Move material out of User Guide into User Reference (Ian Clatworthy)

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005-2011 Canonical Ltd
 
1
# Copyright (C) 2005, 2006, 2007 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
"""WorkingTree object and friends.
18
18
 
19
19
A WorkingTree represents the editable working copy of a branch.
20
 
Operations which represent the WorkingTree are also done here,
21
 
such as renaming or adding files.  The WorkingTree has an inventory
22
 
which is updated by these operations.  A commit produces a
 
20
Operations which represent the WorkingTree are also done here, 
 
21
such as renaming or adding files.  The WorkingTree has an inventory 
 
22
which is updated by these operations.  A commit produces a 
23
23
new revision based on the workingtree and its inventory.
24
24
 
25
25
At the moment every WorkingTree has its own branch.  Remote
29
29
WorkingTree.open(dir).
30
30
"""
31
31
 
 
32
# TODO: Give the workingtree sole responsibility for the working inventory;
 
33
# remove the variable and references to it from the branch.  This may require
 
34
# updating the commit code so as to update the inventory within the working
 
35
# copy, and making sure there's only one WorkingTree for any directory on disk.
 
36
# At the moment they may alias the inventory and have old copies of it in
 
37
# memory.  (Now done? -- mbp 20060309)
32
38
 
33
39
from cStringIO import StringIO
34
40
import os
42
48
import itertools
43
49
import operator
44
50
import stat
 
51
from time import time
 
52
import warnings
45
53
import re
46
54
 
47
55
import bzrlib
49
57
    branch,
50
58
    bzrdir,
51
59
    conflicts as _mod_conflicts,
52
 
    controldir,
 
60
    dirstate,
53
61
    errors,
54
62
    generate_ids,
55
63
    globbing,
56
 
    graph as _mod_graph,
57
64
    hashcache,
58
65
    ignores,
59
 
    inventory,
60
66
    merge,
61
67
    revision as _mod_revision,
62
68
    revisiontree,
 
69
    repository,
 
70
    textui,
63
71
    trace,
64
72
    transform,
65
 
    transport,
66
73
    ui,
67
 
    views,
 
74
    urlutils,
68
75
    xml5,
 
76
    xml6,
69
77
    xml7,
70
78
    )
71
 
from bzrlib.workingtree_4 import (
72
 
    WorkingTreeFormat4,
73
 
    WorkingTreeFormat5,
74
 
    WorkingTreeFormat6,
75
 
    )
 
79
import bzrlib.branch
 
80
from bzrlib.transport import get_transport
 
81
import bzrlib.ui
 
82
from bzrlib.workingtree_4 import WorkingTreeFormat4
76
83
""")
77
84
 
78
85
from bzrlib import symbol_versioning
79
86
from bzrlib.decorators import needs_read_lock, needs_write_lock
80
 
from bzrlib.lock import LogicalLockResult
81
 
from bzrlib.lockable_files import LockableFiles
 
87
from bzrlib.inventory import InventoryEntry, Inventory, ROOT_ID, TreeReference
 
88
from bzrlib.lockable_files import LockableFiles, TransportLock
82
89
from bzrlib.lockdir import LockDir
83
90
import bzrlib.mutabletree
84
91
from bzrlib.mutabletree import needs_tree_write_lock
85
92
from bzrlib import osutils
86
93
from bzrlib.osutils import (
 
94
    compact_date,
87
95
    file_kind,
88
96
    isdir,
89
97
    normpath,
90
98
    pathjoin,
 
99
    rand_chars,
91
100
    realpath,
92
101
    safe_unicode,
93
102
    splitpath,
94
103
    supports_executable,
95
104
    )
96
 
from bzrlib.filters import filtered_input_file
97
105
from bzrlib.trace import mutter, note
98
106
from bzrlib.transport.local import LocalTransport
99
 
from bzrlib.revision import CURRENT_REVISION
 
107
from bzrlib.progress import DummyProgress, ProgressPhase
 
108
from bzrlib.revision import NULL_REVISION, CURRENT_REVISION
100
109
from bzrlib.rio import RioReader, rio_file, Stanza
101
 
from bzrlib.symbol_versioning import (
102
 
    deprecated_passed,
103
 
    DEPRECATED_PARAMETER,
104
 
    )
 
110
from bzrlib.symbol_versioning import (deprecated_passed,
 
111
        deprecated_method,
 
112
        deprecated_function,
 
113
        DEPRECATED_PARAMETER,
 
114
        zero_eight,
 
115
        zero_eleven,
 
116
        zero_thirteen,
 
117
        )
105
118
 
106
119
 
107
120
MERGE_MODIFIED_HEADER_1 = "BZR merge-modified list format 1"
108
 
# TODO: Modifying the conflict objects or their type is currently nearly
109
 
# impossible as there is no clear relationship between the working tree format
110
 
# and the conflict list file format.
111
121
CONFLICT_HEADER_1 = "BZR conflict list format 1"
112
122
 
113
123
ERROR_PATH_NOT_FOUND = 3    # WindowsError errno code, equivalent to ENOENT
114
124
 
115
125
 
 
126
@deprecated_function(zero_thirteen)
 
127
def gen_file_id(name):
 
128
    """Return new file id for the basename 'name'.
 
129
 
 
130
    Use bzrlib.generate_ids.gen_file_id() instead
 
131
    """
 
132
    return generate_ids.gen_file_id(name)
 
133
 
 
134
 
 
135
@deprecated_function(zero_thirteen)
 
136
def gen_root_id():
 
137
    """Return a new tree-root file id.
 
138
 
 
139
    This has been deprecated in favor of bzrlib.generate_ids.gen_root_id()
 
140
    """
 
141
    return generate_ids.gen_root_id()
 
142
 
 
143
 
116
144
class TreeEntry(object):
117
145
    """An entry that implements the minimum interface used by commands.
118
146
 
119
 
    This needs further inspection, it may be better to have
 
147
    This needs further inspection, it may be better to have 
120
148
    InventoryEntries without ids - though that seems wrong. For now,
121
149
    this is a parallel hierarchy to InventoryEntry, and needs to become
122
150
    one of several things: decorates to that hierarchy, children of, or
125
153
    no InventoryEntry available - i.e. for unversioned objects.
126
154
    Perhaps they should be UnversionedEntry et al. ? - RBC 20051003
127
155
    """
128
 
 
 
156
 
129
157
    def __eq__(self, other):
130
158
        # yes, this us ugly, TODO: best practice __eq__ style.
131
159
        return (isinstance(other, TreeEntry)
132
160
                and other.__class__ == self.__class__)
133
 
 
 
161
 
134
162
    def kind_character(self):
135
163
        return "???"
136
164
 
168
196
        return ''
169
197
 
170
198
 
171
 
class WorkingTree(bzrlib.mutabletree.MutableTree,
172
 
    controldir.ControlComponent):
 
199
class WorkingTree(bzrlib.mutabletree.MutableTree):
173
200
    """Working copy tree.
174
201
 
175
202
    The inventory is held in the `Branch` working-inventory, and the
177
204
 
178
205
    It is possible for a `WorkingTree` to have a filename which is
179
206
    not listed in the Inventory and vice versa.
180
 
 
181
 
    :ivar basedir: The root of the tree on disk. This is a unicode path object
182
 
        (as opposed to a URL).
183
207
    """
184
208
 
185
 
    # override this to set the strategy for storing views
186
 
    def _make_views(self):
187
 
        return views.DisabledViews(self)
188
 
 
189
209
    def __init__(self, basedir='.',
190
210
                 branch=DEPRECATED_PARAMETER,
191
211
                 _inventory=None,
202
222
        if not _internal:
203
223
            raise errors.BzrError("Please use bzrdir.open_workingtree or "
204
224
                "WorkingTree.open() to obtain a WorkingTree.")
 
225
        assert isinstance(basedir, basestring), \
 
226
            "base directory %r is not a string" % basedir
205
227
        basedir = safe_unicode(basedir)
206
228
        mutter("opening working tree %r", basedir)
207
229
        if deprecated_passed(branch):
209
231
        else:
210
232
            self._branch = self.bzrdir.open_branch()
211
233
        self.basedir = realpath(basedir)
212
 
        self._control_files = _control_files
213
 
        self._transport = self._control_files._transport
 
234
        # if branch is at our basedir and is a format 6 or less
 
235
        if isinstance(self._format, WorkingTreeFormat2):
 
236
            # share control object
 
237
            self._control_files = self.branch.control_files
 
238
        else:
 
239
            # assume all other formats have their own control files.
 
240
            assert isinstance(_control_files, LockableFiles), \
 
241
                    "_control_files must be a LockableFiles, not %r" \
 
242
                    % _control_files
 
243
            self._control_files = _control_files
214
244
        # update the whole cache up front and write to disk if anything changed;
215
245
        # in the future we might want to do this more selectively
216
246
        # two possible ways offer themselves : in self._unlock, write the cache
220
250
        wt_trans = self.bzrdir.get_workingtree_transport(None)
221
251
        cache_filename = wt_trans.local_abspath('stat-cache')
222
252
        self._hashcache = hashcache.HashCache(basedir, cache_filename,
223
 
            self.bzrdir._get_file_mode(),
224
 
            self._content_filter_stack_provider())
 
253
                                              self._control_files._file_mode)
225
254
        hc = self._hashcache
226
255
        hc.read()
227
256
        # is this scan needed ? it makes things kinda slow.
242
271
            # permitted to do this.
243
272
            self._set_inventory(_inventory, dirty=False)
244
273
        self._detect_case_handling()
245
 
        self._rules_searcher = None
246
 
        self.views = self._make_views()
247
 
 
248
 
    @property
249
 
    def user_transport(self):
250
 
        return self.bzrdir.user_transport
251
 
 
252
 
    @property
253
 
    def control_transport(self):
254
 
        return self._transport
255
274
 
256
275
    def _detect_case_handling(self):
257
276
        wt_trans = self.bzrdir.get_workingtree_transport(None)
258
277
        try:
259
 
            wt_trans.stat(self._format.case_sensitive_filename)
 
278
            wt_trans.stat("FoRMaT")
260
279
        except errors.NoSuchFile:
261
280
            self.case_sensitive = True
262
281
        else:
263
282
            self.case_sensitive = False
264
283
 
265
 
        self._setup_directory_is_tree_reference()
266
 
 
267
284
    branch = property(
268
285
        fget=lambda self: self._branch,
269
286
        doc="""The branch this WorkingTree is connected to.
283
300
        self._control_files.break_lock()
284
301
        self.branch.break_lock()
285
302
 
286
 
    def _get_check_refs(self):
287
 
        """Return the references needed to perform a check of this tree.
288
 
        
289
 
        The default implementation returns no refs, and is only suitable for
290
 
        trees that have no local caching and can commit on ghosts at any time.
291
 
 
292
 
        :seealso: bzrlib.check for details about check_refs.
293
 
        """
294
 
        return []
295
 
 
296
303
    def requires_rich_root(self):
297
304
        return self._format.requires_rich_root
298
305
 
299
306
    def supports_tree_reference(self):
300
307
        return False
301
308
 
302
 
    def supports_content_filtering(self):
303
 
        return self._format.supports_content_filtering()
304
 
 
305
 
    def supports_views(self):
306
 
        return self.views.supports_views()
307
 
 
308
309
    def _set_inventory(self, inv, dirty):
309
310
        """Set the internal cached inventory.
310
311
 
315
316
            False then the inventory is the same as that on disk and any
316
317
            serialisation would be unneeded overhead.
317
318
        """
 
319
        assert inv.root is not None
318
320
        self._inventory = inv
319
321
        self._inventory_is_modified = dirty
320
322
 
324
326
 
325
327
        """
326
328
        if path is None:
327
 
            path = osutils.getcwd()
 
329
            path = os.path.getcwdu()
328
330
        control = bzrdir.BzrDir.open(path, _unsupported)
329
331
        return control.open_workingtree(_unsupported)
330
 
 
 
332
        
331
333
    @staticmethod
332
334
    def open_containing(path=None):
333
335
        """Open an existing working tree which has its root about path.
334
 
 
 
336
        
335
337
        This probes for a working tree at path and searches upwards from there.
336
338
 
337
339
        Basically we keep looking up until we find the control directory or
344
346
        if path is None:
345
347
            path = osutils.getcwd()
346
348
        control, relpath = bzrdir.BzrDir.open_containing(path)
 
349
 
347
350
        return control.open_workingtree(), relpath
348
351
 
349
352
    @staticmethod
350
 
    def open_containing_paths(file_list, default_directory=None,
351
 
                              canonicalize=True, apply_view=True):
352
 
        """Open the WorkingTree that contains a set of paths.
353
 
 
354
 
        Fail if the paths given are not all in a single tree.
355
 
 
356
 
        This is used for the many command-line interfaces that take a list of
357
 
        any number of files and that require they all be in the same tree.
358
 
        """
359
 
        if default_directory is None:
360
 
            default_directory = u'.'
361
 
        # recommended replacement for builtins.internal_tree_files
362
 
        if file_list is None or len(file_list) == 0:
363
 
            tree = WorkingTree.open_containing(default_directory)[0]
364
 
            # XXX: doesn't really belong here, and seems to have the strange
365
 
            # side effect of making it return a bunch of files, not the whole
366
 
            # tree -- mbp 20100716
367
 
            if tree.supports_views() and apply_view:
368
 
                view_files = tree.views.lookup_view()
369
 
                if view_files:
370
 
                    file_list = view_files
371
 
                    view_str = views.view_display_str(view_files)
372
 
                    note("Ignoring files outside view. View is %s" % view_str)
373
 
            return tree, file_list
374
 
        if default_directory == u'.':
375
 
            seed = file_list[0]
376
 
        else:
377
 
            seed = default_directory
378
 
            file_list = [osutils.pathjoin(default_directory, f)
379
 
                         for f in file_list]
380
 
        tree = WorkingTree.open_containing(seed)[0]
381
 
        return tree, tree.safe_relpath_files(file_list, canonicalize,
382
 
                                             apply_view=apply_view)
383
 
 
384
 
    def safe_relpath_files(self, file_list, canonicalize=True, apply_view=True):
385
 
        """Convert file_list into a list of relpaths in tree.
386
 
 
387
 
        :param self: A tree to operate on.
388
 
        :param file_list: A list of user provided paths or None.
389
 
        :param apply_view: if True and a view is set, apply it or check that
390
 
            specified files are within it
391
 
        :return: A list of relative paths.
392
 
        :raises errors.PathNotChild: When a provided path is in a different self
393
 
            than self.
394
 
        """
395
 
        if file_list is None:
396
 
            return None
397
 
        if self.supports_views() and apply_view:
398
 
            view_files = self.views.lookup_view()
399
 
        else:
400
 
            view_files = []
401
 
        new_list = []
402
 
        # self.relpath exists as a "thunk" to osutils, but canonical_relpath
403
 
        # doesn't - fix that up here before we enter the loop.
404
 
        if canonicalize:
405
 
            fixer = lambda p: osutils.canonical_relpath(self.basedir, p)
406
 
        else:
407
 
            fixer = self.relpath
408
 
        for filename in file_list:
409
 
            relpath = fixer(osutils.dereference_path(filename))
410
 
            if view_files and not osutils.is_inside_any(view_files, relpath):
411
 
                raise errors.FileOutsideView(filename, view_files)
412
 
            new_list.append(relpath)
413
 
        return new_list
414
 
 
415
 
    @staticmethod
416
353
    def open_downlevel(path=None):
417
354
        """Open an unsupported working tree.
418
355
 
420
357
        """
421
358
        return WorkingTree.open(path, _unsupported=True)
422
359
 
423
 
    @staticmethod
424
 
    def find_trees(location):
425
 
        def list_current(transport):
426
 
            return [d for d in transport.list_dir('') if d != '.bzr']
427
 
        def evaluate(bzrdir):
428
 
            try:
429
 
                tree = bzrdir.open_workingtree()
430
 
            except errors.NoWorkingTree:
431
 
                return True, None
432
 
            else:
433
 
                return True, tree
434
 
        t = transport.get_transport(location)
435
 
        iterator = bzrdir.BzrDir.find_bzrdirs(t, evaluate=evaluate,
436
 
                                              list_current=list_current)
437
 
        return [tr for tr in iterator if tr is not None]
438
 
 
439
360
    # should be deprecated - this is slow and in any case treating them as a
440
361
    # container is (we now know) bad style -- mbp 20070302
441
362
    ## @deprecated_method(zero_fifteen)
450
371
            if osutils.lexists(self.abspath(path)):
451
372
                yield ie.file_id
452
373
 
453
 
    def all_file_ids(self):
454
 
        """See Tree.iter_all_file_ids"""
455
 
        return set(self.inventory)
456
 
 
457
374
    def __repr__(self):
458
375
        return "<%s of %s>" % (self.__class__.__name__,
459
376
                               getattr(self, 'basedir', None))
463
380
 
464
381
    def basis_tree(self):
465
382
        """Return RevisionTree for the current last revision.
466
 
 
 
383
        
467
384
        If the left most parent is a ghost then the returned tree will be an
468
 
        empty tree - one obtained by calling
469
 
        repository.revision_tree(NULL_REVISION).
 
385
        empty tree - one obtained by calling repository.revision_tree(None).
470
386
        """
471
387
        try:
472
388
            revision_id = self.get_parent_ids()[0]
474
390
            # no parents, return an empty revision tree.
475
391
            # in the future this should return the tree for
476
392
            # 'empty:' - the implicit root empty tree.
477
 
            return self.branch.repository.revision_tree(
478
 
                       _mod_revision.NULL_REVISION)
 
393
            return self.branch.repository.revision_tree(None)
479
394
        try:
480
395
            return self.revision_tree(revision_id)
481
396
        except errors.NoSuchRevision:
485
400
        # at this point ?
486
401
        try:
487
402
            return self.branch.repository.revision_tree(revision_id)
488
 
        except (errors.RevisionNotPresent, errors.NoSuchRevision):
 
403
        except errors.RevisionNotPresent:
489
404
            # the basis tree *may* be a ghost or a low level error may have
490
 
            # occurred. If the revision is present, its a problem, if its not
 
405
            # occured. If the revision is present, its a problem, if its not
491
406
            # its a ghost.
492
407
            if self.branch.repository.has_revision(revision_id):
493
408
                raise
494
409
            # the basis tree is a ghost so return an empty tree.
495
 
            return self.branch.repository.revision_tree(
496
 
                       _mod_revision.NULL_REVISION)
 
410
            return self.branch.repository.revision_tree(None)
497
411
 
498
412
    def _cleanup(self):
499
413
        self._flush_ignore_list_cache()
500
414
 
 
415
    @staticmethod
 
416
    @deprecated_method(zero_eight)
 
417
    def create(branch, directory):
 
418
        """Create a workingtree for branch at directory.
 
419
 
 
420
        If existing_directory already exists it must have a .bzr directory.
 
421
        If it does not exist, it will be created.
 
422
 
 
423
        This returns a new WorkingTree object for the new checkout.
 
424
 
 
425
        TODO FIXME RBC 20060124 when we have checkout formats in place this
 
426
        should accept an optional revisionid to checkout [and reject this if
 
427
        checking out into the same dir as a pre-checkout-aware branch format.]
 
428
 
 
429
        XXX: When BzrDir is present, these should be created through that 
 
430
        interface instead.
 
431
        """
 
432
        warnings.warn('delete WorkingTree.create', stacklevel=3)
 
433
        transport = get_transport(directory)
 
434
        if branch.bzrdir.root_transport.base == transport.base:
 
435
            # same dir 
 
436
            return branch.bzrdir.create_workingtree()
 
437
        # different directory, 
 
438
        # create a branch reference
 
439
        # and now a working tree.
 
440
        raise NotImplementedError
 
441
 
 
442
    @staticmethod
 
443
    @deprecated_method(zero_eight)
 
444
    def create_standalone(directory):
 
445
        """Create a checkout and a branch and a repo at directory.
 
446
 
 
447
        Directory must exist and be empty.
 
448
 
 
449
        please use BzrDir.create_standalone_workingtree
 
450
        """
 
451
        return bzrdir.BzrDir.create_standalone_workingtree(directory)
 
452
 
501
453
    def relpath(self, path):
502
454
        """Return the local path portion from a given path.
503
 
 
504
 
        The path may be absolute or relative. If its a relative path it is
 
455
        
 
456
        The path may be absolute or relative. If its a relative path it is 
505
457
        interpreted relative to the python current working directory.
506
458
        """
507
459
        return osutils.relpath(self.basedir, path)
509
461
    def has_filename(self, filename):
510
462
        return osutils.lexists(self.abspath(filename))
511
463
 
512
 
    def get_file(self, file_id, path=None, filtered=True):
513
 
        return self.get_file_with_stat(file_id, path, filtered=filtered)[0]
514
 
 
515
 
    def get_file_with_stat(self, file_id, path=None, filtered=True,
516
 
        _fstat=os.fstat):
517
 
        """See Tree.get_file_with_stat."""
 
464
    def get_file(self, file_id, path=None):
518
465
        if path is None:
519
466
            path = self.id2path(file_id)
520
 
        file_obj = self.get_file_byname(path, filtered=False)
521
 
        stat_value = _fstat(file_obj.fileno())
522
 
        if filtered and self.supports_content_filtering():
523
 
            filters = self._content_filter_stack(path)
524
 
            file_obj = filtered_input_file(file_obj, filters)
525
 
        return (file_obj, stat_value)
526
 
 
527
 
    def get_file_text(self, file_id, path=None, filtered=True):
528
 
        my_file = self.get_file(file_id, path=path, filtered=filtered)
529
 
        try:
530
 
            return my_file.read()
531
 
        finally:
532
 
            my_file.close()
533
 
 
534
 
    def get_file_byname(self, filename, filtered=True):
535
 
        path = self.abspath(filename)
536
 
        f = file(path, 'rb')
537
 
        if filtered and self.supports_content_filtering():
538
 
            filters = self._content_filter_stack(filename)
539
 
            return filtered_input_file(f, filters)
540
 
        else:
541
 
            return f
542
 
 
543
 
    def get_file_lines(self, file_id, path=None, filtered=True):
544
 
        """See Tree.get_file_lines()"""
545
 
        file = self.get_file(file_id, path, filtered=filtered)
546
 
        try:
547
 
            return file.readlines()
548
 
        finally:
549
 
            file.close()
 
467
        return self.get_file_byname(path)
 
468
 
 
469
    def get_file_text(self, file_id):
 
470
        return self.get_file(file_id).read()
 
471
 
 
472
    def get_file_byname(self, filename):
 
473
        return file(self.abspath(filename), 'rb')
550
474
 
551
475
    @needs_read_lock
552
476
    def annotate_iter(self, file_id, default_revision=CURRENT_REVISION):
559
483
        incorrectly attributed to CURRENT_REVISION (but after committing, the
560
484
        attribution will be correct).
561
485
        """
562
 
        maybe_file_parent_keys = []
563
 
        for parent_id in self.get_parent_ids():
564
 
            try:
565
 
                parent_tree = self.revision_tree(parent_id)
566
 
            except errors.NoSuchRevisionInTree:
567
 
                parent_tree = self.branch.repository.revision_tree(parent_id)
568
 
            parent_tree.lock_read()
569
 
            try:
570
 
                if file_id not in parent_tree:
571
 
                    continue
572
 
                ie = parent_tree.inventory[file_id]
573
 
                if ie.kind != 'file':
574
 
                    # Note: this is slightly unnecessary, because symlinks and
575
 
                    # directories have a "text" which is the empty text, and we
576
 
                    # know that won't mess up annotations. But it seems cleaner
577
 
                    continue
578
 
                parent_text_key = (file_id, ie.revision)
579
 
                if parent_text_key not in maybe_file_parent_keys:
580
 
                    maybe_file_parent_keys.append(parent_text_key)
581
 
            finally:
582
 
                parent_tree.unlock()
583
 
        graph = _mod_graph.Graph(self.branch.repository.texts)
584
 
        heads = graph.heads(maybe_file_parent_keys)
585
 
        file_parent_keys = []
586
 
        for key in maybe_file_parent_keys:
587
 
            if key in heads:
588
 
                file_parent_keys.append(key)
589
 
 
590
 
        # Now we have the parents of this content
591
 
        annotator = self.branch.repository.texts.get_annotator()
592
 
        text = self.get_file_text(file_id)
593
 
        this_key =(file_id, default_revision)
594
 
        annotator.add_special_text(this_key, file_parent_keys, text)
595
 
        annotations = [(key[-1], line)
596
 
                       for key, line in annotator.annotate_flat(this_key)]
597
 
        return annotations
 
486
        basis = self.basis_tree()
 
487
        basis.lock_read()
 
488
        try:
 
489
            changes = self._iter_changes(basis, True, [self.id2path(file_id)],
 
490
                require_versioned=True).next()
 
491
            changed_content, kind = changes[2], changes[6]
 
492
            if not changed_content:
 
493
                return basis.annotate_iter(file_id)
 
494
            if kind[1] is None:
 
495
                return None
 
496
            import annotate
 
497
            if kind[0] != 'file':
 
498
                old_lines = []
 
499
            else:
 
500
                old_lines = list(basis.annotate_iter(file_id))
 
501
            old = [old_lines]
 
502
            for tree in self.branch.repository.revision_trees(
 
503
                self.get_parent_ids()[1:]):
 
504
                if file_id not in tree:
 
505
                    continue
 
506
                old.append(list(tree.annotate_iter(file_id)))
 
507
            return annotate.reannotate(old, self.get_file(file_id).readlines(),
 
508
                                       default_revision)
 
509
        finally:
 
510
            basis.unlock()
598
511
 
599
512
    def _get_ancestors(self, default_revision):
600
513
        ancestors = set([default_revision])
605
518
 
606
519
    def get_parent_ids(self):
607
520
        """See Tree.get_parent_ids.
608
 
 
 
521
        
609
522
        This implementation reads the pending merges list and last_revision
610
523
        value and uses that to decide what the parents list should be.
611
524
        """
615
528
        else:
616
529
            parents = [last_rev]
617
530
        try:
618
 
            merges_bytes = self._transport.get_bytes('pending-merges')
 
531
            merges_file = self._control_files.get('pending-merges')
619
532
        except errors.NoSuchFile:
620
533
            pass
621
534
        else:
622
 
            for l in osutils.split_lines(merges_bytes):
 
535
            for l in merges_file.readlines():
623
536
                revision_id = l.rstrip('\n')
624
537
                parents.append(revision_id)
625
538
        return parents
628
541
    def get_root_id(self):
629
542
        """Return the id of this trees root"""
630
543
        return self._inventory.root.file_id
631
 
 
 
544
        
632
545
    def _get_store_filename(self, file_id):
633
546
        ## XXX: badly named; this is not in the store at all
634
547
        return self.abspath(self.id2path(file_id))
636
549
    @needs_read_lock
637
550
    def clone(self, to_bzrdir, revision_id=None):
638
551
        """Duplicate this working tree into to_bzr, including all state.
639
 
 
 
552
        
640
553
        Specifically modified files are kept as modified, but
641
554
        ignored and unknown files are discarded.
642
555
 
643
556
        If you want to make a new line of development, see bzrdir.sprout()
644
557
 
645
558
        revision
646
 
            If not None, the cloned tree will have its last revision set to
647
 
            revision, and difference between the source trees last revision
 
559
            If not None, the cloned tree will have its last revision set to 
 
560
            revision, and and difference between the source trees last revision
648
561
            and this one merged in.
649
562
        """
650
563
        # assumes the target bzr dir format is compatible.
651
 
        result = to_bzrdir.create_workingtree()
 
564
        result = self._format.initialize(to_bzrdir)
652
565
        self.copy_content_into(result, revision_id)
653
566
        return result
654
567
 
683
596
    __contains__ = has_id
684
597
 
685
598
    def get_file_size(self, file_id):
686
 
        """See Tree.get_file_size"""
687
 
        # XXX: this returns the on-disk size; it should probably return the
688
 
        # canonical size
689
 
        try:
690
 
            return os.path.getsize(self.id2abspath(file_id))
691
 
        except OSError, e:
692
 
            if e.errno != errno.ENOENT:
693
 
                raise
694
 
            else:
695
 
                return None
 
599
        return os.path.getsize(self.id2abspath(file_id))
696
600
 
697
601
    @needs_read_lock
698
602
    def get_file_sha1(self, file_id, path=None, stat_value=None):
707
611
 
708
612
    def _is_executable_from_path_and_stat_from_basis(self, path, stat_result):
709
613
        file_id = self.path2id(path)
710
 
        if file_id is None:
711
 
            # For unversioned files on win32, we just assume they are not
712
 
            # executable
713
 
            return False
714
614
        return self._inventory[file_id].executable
715
615
 
716
616
    def _is_executable_from_path_and_stat_from_stat(self, path, stat_result):
738
638
        """See MutableTree._add."""
739
639
        # TODO: Re-adding a file that is removed in the working copy
740
640
        # should probably put it back with the previous ID.
741
 
        # the read and write working inventory should not occur in this
 
641
        # the read and write working inventory should not occur in this 
742
642
        # function - they should be part of lock_write and unlock.
743
643
        inv = self.inventory
744
644
        for f, file_id, kind in zip(files, ids, kinds):
 
645
            assert kind is not None
745
646
            if file_id is None:
746
647
                inv.add_path(f, kind=kind)
747
648
            else:
826
727
            raise
827
728
        kind = _mapper(stat_result.st_mode)
828
729
        if kind == 'file':
829
 
            return self._file_content_summary(path, stat_result)
 
730
            size = stat_result.st_size
 
731
            # try for a stat cache lookup
 
732
            executable = self._is_executable_from_path_and_stat(path, stat_result)
 
733
            return (kind, size, executable, self._sha_from_stat(
 
734
                path, stat_result))
830
735
        elif kind == 'directory':
831
736
            # perhaps it looks like a plain directory, but it's really a
832
737
            # reference.
834
739
                kind = 'tree-reference'
835
740
            return kind, None, None, None
836
741
        elif kind == 'symlink':
837
 
            target = osutils.readlink(abspath)
838
 
            return ('symlink', None, None, target)
 
742
            return ('symlink', None, None, os.readlink(abspath))
839
743
        else:
840
744
            return (kind, None, None, None)
841
745
 
842
 
    def _file_content_summary(self, path, stat_result):
843
 
        size = stat_result.st_size
844
 
        executable = self._is_executable_from_path_and_stat(path, stat_result)
845
 
        # try for a stat cache lookup
846
 
        return ('file', size, executable, self._sha_from_stat(
847
 
            path, stat_result))
 
746
    @deprecated_method(zero_eleven)
 
747
    @needs_read_lock
 
748
    def pending_merges(self):
 
749
        """Return a list of pending merges.
 
750
 
 
751
        These are revisions that have been merged into the working
 
752
        directory but not yet committed.
 
753
 
 
754
        As of 0.11 this is deprecated. Please see WorkingTree.get_parent_ids()
 
755
        instead - which is available on all tree objects.
 
756
        """
 
757
        return self.get_parent_ids()[1:]
848
758
 
849
759
    def _check_parents_for_ghosts(self, revision_ids, allow_leftmost_as_ghost):
850
760
        """Common ghost checking functionality from set_parent_*.
860
770
 
861
771
    def _set_merges_from_parent_ids(self, parent_ids):
862
772
        merges = parent_ids[1:]
863
 
        self._transport.put_bytes('pending-merges', '\n'.join(merges),
864
 
            mode=self.bzrdir._get_file_mode())
865
 
 
866
 
    def _filter_parent_ids_by_ancestry(self, revision_ids):
867
 
        """Check that all merged revisions are proper 'heads'.
868
 
 
869
 
        This will always return the first revision_id, and any merged revisions
870
 
        which are
871
 
        """
872
 
        if len(revision_ids) == 0:
873
 
            return revision_ids
874
 
        graph = self.branch.repository.get_graph()
875
 
        heads = graph.heads(revision_ids)
876
 
        new_revision_ids = revision_ids[:1]
877
 
        for revision_id in revision_ids[1:]:
878
 
            if revision_id in heads and revision_id not in new_revision_ids:
879
 
                new_revision_ids.append(revision_id)
880
 
        if new_revision_ids != revision_ids:
881
 
            trace.mutter('requested to set revision_ids = %s,'
882
 
                         ' but filtered to %s', revision_ids, new_revision_ids)
883
 
        return new_revision_ids
 
773
        self._control_files.put_bytes('pending-merges', '\n'.join(merges))
884
774
 
885
775
    @needs_tree_write_lock
886
776
    def set_parent_ids(self, revision_ids, allow_leftmost_as_ghost=False):
887
777
        """Set the parent ids to revision_ids.
888
 
 
 
778
        
889
779
        See also set_parent_trees. This api will try to retrieve the tree data
890
780
        for each element of revision_ids from the trees repository. If you have
891
781
        tree data already available, it is more efficient to use
900
790
        for revision_id in revision_ids:
901
791
            _mod_revision.check_not_reserved_id(revision_id)
902
792
 
903
 
        revision_ids = self._filter_parent_ids_by_ancestry(revision_ids)
904
 
 
905
793
        if len(revision_ids) > 0:
906
794
            self.set_last_revision(revision_ids[0])
907
795
        else:
919
807
        self._check_parents_for_ghosts(parent_ids,
920
808
            allow_leftmost_as_ghost=allow_leftmost_as_ghost)
921
809
 
922
 
        parent_ids = self._filter_parent_ids_by_ancestry(parent_ids)
923
 
 
924
810
        if len(parent_ids) == 0:
925
811
            leftmost_parent_id = _mod_revision.NULL_REVISION
926
812
            leftmost_parent_tree = None
966
852
    def _put_rio(self, filename, stanzas, header):
967
853
        self._must_be_locked()
968
854
        my_file = rio_file(stanzas, header)
969
 
        self._transport.put_file(filename, my_file,
970
 
            mode=self.bzrdir._get_file_mode())
 
855
        self._control_files.put(filename, my_file)
971
856
 
972
857
    @needs_write_lock # because merge pulls data into the branch.
973
858
    def merge_from_branch(self, branch, to_revision=None, from_revision=None,
974
 
                          merge_type=None, force=False):
 
859
        merge_type=None):
975
860
        """Merge from a branch into this working tree.
976
861
 
977
862
        :param branch: The branch to merge from.
981
866
            branch.last_revision().
982
867
        """
983
868
        from bzrlib.merge import Merger, Merge3Merger
984
 
        merger = Merger(self.branch, this_tree=self)
985
 
        # check that there are no local alterations
986
 
        if not force and self.has_changes():
987
 
            raise errors.UncommittedChanges(self)
988
 
        if to_revision is None:
989
 
            to_revision = _mod_revision.ensure_null(branch.last_revision())
990
 
        merger.other_rev_id = to_revision
991
 
        if _mod_revision.is_null(merger.other_rev_id):
992
 
            raise errors.NoCommits(branch)
993
 
        self.branch.fetch(branch, last_revision=merger.other_rev_id)
994
 
        merger.other_basis = merger.other_rev_id
995
 
        merger.other_tree = self.branch.repository.revision_tree(
996
 
            merger.other_rev_id)
997
 
        merger.other_branch = branch
998
 
        if from_revision is None:
999
 
            merger.find_base()
1000
 
        else:
1001
 
            merger.set_base_revision(from_revision, branch)
1002
 
        if merger.base_rev_id == merger.other_rev_id:
1003
 
            raise errors.PointlessMerge
1004
 
        merger.backup_files = False
1005
 
        if merge_type is None:
1006
 
            merger.merge_type = Merge3Merger
1007
 
        else:
1008
 
            merger.merge_type = merge_type
1009
 
        merger.set_interesting_files(None)
1010
 
        merger.show_base = False
1011
 
        merger.reprocess = False
1012
 
        conflicts = merger.do_merge()
1013
 
        merger.set_pending()
 
869
        pb = bzrlib.ui.ui_factory.nested_progress_bar()
 
870
        try:
 
871
            merger = Merger(self.branch, this_tree=self, pb=pb)
 
872
            merger.pp = ProgressPhase("Merge phase", 5, pb)
 
873
            merger.pp.next_phase()
 
874
            # check that there are no
 
875
            # local alterations
 
876
            merger.check_basis(check_clean=True, require_commits=False)
 
877
            if to_revision is None:
 
878
                to_revision = _mod_revision.ensure_null(branch.last_revision())
 
879
            merger.other_rev_id = to_revision
 
880
            if _mod_revision.is_null(merger.other_rev_id):
 
881
                raise errors.NoCommits(branch)
 
882
            self.branch.fetch(branch, last_revision=merger.other_rev_id)
 
883
            merger.other_basis = merger.other_rev_id
 
884
            merger.other_tree = self.branch.repository.revision_tree(
 
885
                merger.other_rev_id)
 
886
            merger.other_branch = branch
 
887
            merger.pp.next_phase()
 
888
            if from_revision is None:
 
889
                merger.find_base()
 
890
            else:
 
891
                merger.set_base_revision(from_revision, branch)
 
892
            if merger.base_rev_id == merger.other_rev_id:
 
893
                raise errors.PointlessMerge
 
894
            merger.backup_files = False
 
895
            if merge_type is None:
 
896
                merger.merge_type = Merge3Merger
 
897
            else:
 
898
                merger.merge_type = merge_type
 
899
            merger.set_interesting_files(None)
 
900
            merger.show_base = False
 
901
            merger.reprocess = False
 
902
            conflicts = merger.do_merge()
 
903
            merger.set_pending()
 
904
        finally:
 
905
            pb.finished()
1014
906
        return conflicts
1015
907
 
1016
908
    @needs_read_lock
1017
909
    def merge_modified(self):
1018
910
        """Return a dictionary of files modified by a merge.
1019
911
 
1020
 
        The list is initialized by WorkingTree.set_merge_modified, which is
 
912
        The list is initialized by WorkingTree.set_merge_modified, which is 
1021
913
        typically called after we make some automatic updates to the tree
1022
914
        because of a merge.
1023
915
 
1025
917
        still in the working inventory and have that text hash.
1026
918
        """
1027
919
        try:
1028
 
            hashfile = self._transport.get('merge-hashes')
 
920
            hashfile = self._control_files.get('merge-hashes')
1029
921
        except errors.NoSuchFile:
1030
922
            return {}
 
923
        merge_hashes = {}
1031
924
        try:
1032
 
            merge_hashes = {}
1033
 
            try:
1034
 
                if hashfile.next() != MERGE_MODIFIED_HEADER_1 + '\n':
1035
 
                    raise errors.MergeModifiedFormatError()
1036
 
            except StopIteration:
 
925
            if hashfile.next() != MERGE_MODIFIED_HEADER_1 + '\n':
1037
926
                raise errors.MergeModifiedFormatError()
1038
 
            for s in RioReader(hashfile):
1039
 
                # RioReader reads in Unicode, so convert file_ids back to utf8
1040
 
                file_id = osutils.safe_file_id(s.get("file_id"), warn=False)
1041
 
                if file_id not in self.inventory:
1042
 
                    continue
1043
 
                text_hash = s.get("hash")
1044
 
                if text_hash == self.get_file_sha1(file_id):
1045
 
                    merge_hashes[file_id] = text_hash
1046
 
            return merge_hashes
1047
 
        finally:
1048
 
            hashfile.close()
 
927
        except StopIteration:
 
928
            raise errors.MergeModifiedFormatError()
 
929
        for s in RioReader(hashfile):
 
930
            # RioReader reads in Unicode, so convert file_ids back to utf8
 
931
            file_id = osutils.safe_file_id(s.get("file_id"), warn=False)
 
932
            if file_id not in self.inventory:
 
933
                continue
 
934
            text_hash = s.get("hash")
 
935
            if text_hash == self.get_file_sha1(file_id):
 
936
                merge_hashes[file_id] = text_hash
 
937
        return merge_hashes
1049
938
 
1050
939
    @needs_write_lock
1051
940
    def mkdir(self, path, file_id=None):
1057
946
        return file_id
1058
947
 
1059
948
    def get_symlink_target(self, file_id):
1060
 
        abspath = self.id2abspath(file_id)
1061
 
        target = osutils.readlink(abspath)
1062
 
        return target
 
949
        return os.readlink(self.id2abspath(file_id))
1063
950
 
1064
951
    @needs_write_lock
1065
952
    def subsume(self, other_tree):
1103
990
            other_tree.unlock()
1104
991
        other_tree.bzrdir.retire_bzrdir()
1105
992
 
1106
 
    def _setup_directory_is_tree_reference(self):
1107
 
        if self._branch.repository._format.supports_tree_reference:
1108
 
            self._directory_is_tree_reference = \
1109
 
                self._directory_may_be_tree_reference
1110
 
        else:
1111
 
            self._directory_is_tree_reference = \
1112
 
                self._directory_is_never_tree_reference
1113
 
 
1114
 
    def _directory_is_never_tree_reference(self, relpath):
1115
 
        return False
1116
 
 
1117
 
    def _directory_may_be_tree_reference(self, relpath):
1118
 
        # as a special case, if a directory contains control files then
 
993
    def _directory_is_tree_reference(self, relpath):
 
994
        # as a special case, if a directory contains control files then 
1119
995
        # it's a tree reference, except that the root of the tree is not
1120
996
        return relpath and osutils.isdir(self.abspath(relpath) + u"/.bzr")
1121
997
        # TODO: We could ask all the control formats whether they
1132
1008
    @needs_tree_write_lock
1133
1009
    def extract(self, file_id, format=None):
1134
1010
        """Extract a subtree from this tree.
1135
 
 
 
1011
        
1136
1012
        A new branch will be created, relative to the path for this tree.
1137
1013
        """
1138
1014
        self.flush()
1143
1019
                transport = transport.clone(name)
1144
1020
                transport.ensure_base()
1145
1021
            return transport
1146
 
 
 
1022
            
1147
1023
        sub_path = self.id2path(file_id)
1148
1024
        branch_transport = mkdirs(sub_path)
1149
1025
        if format is None:
1150
 
            format = self.bzrdir.cloning_metadir()
 
1026
            format = bzrdir.format_registry.make_bzrdir('dirstate-with-subtree')
1151
1027
        branch_transport.ensure_base()
1152
1028
        branch_bzrdir = format.initialize_on_transport(branch_transport)
1153
1029
        try:
1154
1030
            repo = branch_bzrdir.find_repository()
1155
1031
        except errors.NoRepositoryPresent:
1156
1032
            repo = branch_bzrdir.create_repository()
1157
 
        if not repo.supports_rich_root():
1158
 
            raise errors.RootNotRich()
 
1033
            assert repo.supports_rich_root()
 
1034
        else:
 
1035
            if not repo.supports_rich_root():
 
1036
                raise errors.RootNotRich()
1159
1037
        new_branch = branch_bzrdir.create_branch()
1160
1038
        new_branch.pull(self.branch)
1161
1039
        for parent_id in self.get_parent_ids():
1163
1041
        tree_transport = self.bzrdir.root_transport.clone(sub_path)
1164
1042
        if tree_transport.base != branch_transport.base:
1165
1043
            tree_bzrdir = format.initialize_on_transport(tree_transport)
1166
 
            branch.BranchReferenceFormat().initialize(tree_bzrdir,
1167
 
                target_branch=new_branch)
 
1044
            branch.BranchReferenceFormat().initialize(tree_bzrdir, new_branch)
1168
1045
        else:
1169
1046
            tree_bzrdir = branch_bzrdir
1170
 
        wt = tree_bzrdir.create_workingtree(_mod_revision.NULL_REVISION)
 
1047
        wt = tree_bzrdir.create_workingtree(NULL_REVISION)
1171
1048
        wt.set_parent_ids(self.get_parent_ids())
1172
1049
        my_inv = self.inventory
1173
 
        child_inv = inventory.Inventory(root_id=None)
 
1050
        child_inv = Inventory(root_id=None)
1174
1051
        new_root = my_inv[file_id]
1175
1052
        my_inv.remove_recursive_id(file_id)
1176
1053
        new_root.parent_id = None
1194
1071
        sio = StringIO()
1195
1072
        self._serialize(self._inventory, sio)
1196
1073
        sio.seek(0)
1197
 
        self._transport.put_file('inventory', sio,
1198
 
            mode=self.bzrdir._get_file_mode())
 
1074
        self._control_files.put('inventory', sio)
1199
1075
        self._inventory_is_modified = False
1200
1076
 
1201
1077
    def _kind(self, relpath):
1202
1078
        return osutils.file_kind(self.abspath(relpath))
1203
1079
 
1204
 
    def list_files(self, include_root=False, from_dir=None, recursive=True):
1205
 
        """List all files as (path, class, kind, id, entry).
 
1080
    def list_files(self, include_root=False):
 
1081
        """Recursively list all files as (path, class, kind, id, entry).
1206
1082
 
1207
1083
        Lists, but does not descend into unversioned directories.
 
1084
 
1208
1085
        This does not include files that have been deleted in this
1209
 
        tree. Skips the control directory.
 
1086
        tree.
1210
1087
 
1211
 
        :param include_root: if True, return an entry for the root
1212
 
        :param from_dir: start from this directory or None for the root
1213
 
        :param recursive: whether to recurse into subdirectories or not
 
1088
        Skips the control directory.
1214
1089
        """
1215
1090
        # list_files is an iterator, so @needs_read_lock doesn't work properly
1216
1091
        # with it. So callers should be careful to always read_lock the tree.
1218
1093
            raise errors.ObjectNotLocked(self)
1219
1094
 
1220
1095
        inv = self.inventory
1221
 
        if from_dir is None and include_root is True:
 
1096
        if include_root is True:
1222
1097
            yield ('', 'V', 'directory', inv.root.file_id, inv.root)
1223
1098
        # Convert these into local objects to save lookup times
1224
1099
        pathjoin = osutils.pathjoin
1231
1106
        fk_entries = {'directory':TreeDirectory, 'file':TreeFile, 'symlink':TreeLink}
1232
1107
 
1233
1108
        # directory file_id, relative path, absolute path, reverse sorted children
1234
 
        if from_dir is not None:
1235
 
            from_dir_id = inv.path2id(from_dir)
1236
 
            if from_dir_id is None:
1237
 
                # Directory not versioned
1238
 
                return
1239
 
            from_dir_abspath = pathjoin(self.basedir, from_dir)
1240
 
        else:
1241
 
            from_dir_id = inv.root.file_id
1242
 
            from_dir_abspath = self.basedir
1243
 
        children = os.listdir(from_dir_abspath)
 
1109
        children = os.listdir(self.basedir)
1244
1110
        children.sort()
1245
 
        # jam 20060527 The kernel sized tree seems equivalent whether we
 
1111
        # jam 20060527 The kernel sized tree seems equivalent whether we 
1246
1112
        # use a deque and popleft to keep them sorted, or if we use a plain
1247
1113
        # list and just reverse() them.
1248
1114
        children = collections.deque(children)
1249
 
        stack = [(from_dir_id, u'', from_dir_abspath, children)]
 
1115
        stack = [(inv.root.file_id, u'', self.basedir, children)]
1250
1116
        while stack:
1251
1117
            from_dir_id, from_dir_relpath, from_dir_abspath, children = stack[-1]
1252
1118
 
1268
1134
 
1269
1135
                # absolute path
1270
1136
                fap = from_dir_abspath + '/' + f
1271
 
 
1272
 
                dir_ie = inv[from_dir_id]
1273
 
                if dir_ie.kind == 'directory':
1274
 
                    f_ie = dir_ie.children.get(f)
1275
 
                else:
1276
 
                    f_ie = None
 
1137
                
 
1138
                f_ie = inv.get_child(from_dir_id, f)
1277
1139
                if f_ie:
1278
1140
                    c = 'V'
1279
1141
                elif self.is_ignored(fp[1:]):
1280
1142
                    c = 'I'
1281
1143
                else:
1282
 
                    # we may not have found this file, because of a unicode
1283
 
                    # issue, or because the directory was actually a symlink.
 
1144
                    # we may not have found this file, because of a unicode issue
1284
1145
                    f_norm, can_access = osutils.normalized_filename(f)
1285
1146
                    if f == f_norm or not can_access:
1286
1147
                        # No change, so treat this file normally
1311
1172
                    except KeyError:
1312
1173
                        yield fp[1:], c, fk, None, TreeEntry()
1313
1174
                    continue
1314
 
 
 
1175
                
1315
1176
                if fk != 'directory':
1316
1177
                    continue
1317
1178
 
1318
 
                # But do this child first if recursing down
1319
 
                if recursive:
1320
 
                    new_children = os.listdir(fap)
1321
 
                    new_children.sort()
1322
 
                    new_children = collections.deque(new_children)
1323
 
                    stack.append((f_ie.file_id, fp, fap, new_children))
1324
 
                    # Break out of inner loop,
1325
 
                    # so that we start outer loop with child
1326
 
                    break
 
1179
                # But do this child first
 
1180
                new_children = os.listdir(fap)
 
1181
                new_children.sort()
 
1182
                new_children = collections.deque(new_children)
 
1183
                stack.append((f_ie.file_id, fp, fap, new_children))
 
1184
                # Break out of inner loop,
 
1185
                # so that we start outer loop with child
 
1186
                break
1327
1187
            else:
1328
1188
                # if we finished all children, pop it off the stack
1329
1189
                stack.pop()
1330
1190
 
1331
1191
    @needs_tree_write_lock
1332
 
    def move(self, from_paths, to_dir=None, after=False):
 
1192
    def move(self, from_paths, to_dir=None, after=False, **kwargs):
1333
1193
        """Rename files.
1334
1194
 
1335
1195
        to_dir must exist in the inventory.
1336
1196
 
1337
1197
        If to_dir exists and is a directory, the files are moved into
1338
 
        it, keeping their old names.
 
1198
        it, keeping their old names.  
1339
1199
 
1340
1200
        Note that to_dir is only the last component of the new name;
1341
1201
        this doesn't change the directory.
1369
1229
 
1370
1230
        # check for deprecated use of signature
1371
1231
        if to_dir is None:
1372
 
            raise TypeError('You must supply a target directory')
 
1232
            to_dir = kwargs.get('to_name', None)
 
1233
            if to_dir is None:
 
1234
                raise TypeError('You must supply a target directory')
 
1235
            else:
 
1236
                symbol_versioning.warn('The parameter to_name was deprecated'
 
1237
                                       ' in version 0.13. Use to_dir instead',
 
1238
                                       DeprecationWarning)
 
1239
 
1373
1240
        # check destination directory
1374
 
        if isinstance(from_paths, basestring):
1375
 
            raise ValueError()
 
1241
        assert not isinstance(from_paths, basestring)
1376
1242
        inv = self.inventory
1377
1243
        to_abs = self.abspath(to_dir)
1378
1244
        if not isdir(to_abs):
1384
1250
        to_dir_id = inv.path2id(to_dir)
1385
1251
        if to_dir_id is None:
1386
1252
            raise errors.BzrMoveFailedError('',to_dir,
1387
 
                errors.NotVersionedError(path=to_dir))
 
1253
                errors.NotVersionedError(path=str(to_dir)))
1388
1254
 
1389
1255
        to_dir_ie = inv[to_dir_id]
1390
1256
        if to_dir_ie.kind != 'directory':
1397
1263
            from_id = inv.path2id(from_rel)
1398
1264
            if from_id is None:
1399
1265
                raise errors.BzrMoveFailedError(from_rel,to_dir,
1400
 
                    errors.NotVersionedError(path=from_rel))
 
1266
                    errors.NotVersionedError(path=str(from_rel)))
1401
1267
 
1402
1268
            from_entry = inv[from_id]
1403
1269
            from_parent_id = from_entry.parent_id
1445
1311
            # check the inventory for source and destination
1446
1312
            if from_id is None:
1447
1313
                raise errors.BzrMoveFailedError(from_rel,to_rel,
1448
 
                    errors.NotVersionedError(path=from_rel))
 
1314
                    errors.NotVersionedError(path=str(from_rel)))
1449
1315
            if to_id is not None:
1450
1316
                raise errors.BzrMoveFailedError(from_rel,to_rel,
1451
 
                    errors.AlreadyVersionedError(path=to_rel))
 
1317
                    errors.AlreadyVersionedError(path=str(to_rel)))
1452
1318
 
1453
1319
            # try to determine the mode for rename (only change inv or change
1454
1320
            # inv and file system)
1455
1321
            if after:
1456
1322
                if not self.has_filename(to_rel):
1457
1323
                    raise errors.BzrMoveFailedError(from_id,to_rel,
1458
 
                        errors.NoSuchFile(path=to_rel,
 
1324
                        errors.NoSuchFile(path=str(to_rel),
1459
1325
                        extra="New file has not been created yet"))
1460
1326
                only_change_inv = True
1461
1327
            elif not self.has_filename(from_rel) and self.has_filename(to_rel):
1462
1328
                only_change_inv = True
1463
1329
            elif self.has_filename(from_rel) and not self.has_filename(to_rel):
1464
1330
                only_change_inv = False
1465
 
            elif (not self.case_sensitive
1466
 
                  and from_rel.lower() == to_rel.lower()
1467
 
                  and self.has_filename(from_rel)):
 
1331
            elif (sys.platform == 'win32'
 
1332
                and from_rel.lower() == to_rel.lower()
 
1333
                and self.has_filename(from_rel)):
1468
1334
                only_change_inv = False
1469
1335
            else:
1470
1336
                # something is wrong, so lets determine what exactly
1500
1366
        inv = self.inventory
1501
1367
        for entry in moved:
1502
1368
            try:
1503
 
                self._move_entry(WorkingTree._RenameEntry(
1504
 
                    entry.to_rel, entry.from_id,
 
1369
                self._move_entry(_RenameEntry(entry.to_rel, entry.from_id,
1505
1370
                    entry.to_tail, entry.to_parent_id, entry.from_rel,
1506
1371
                    entry.from_tail, entry.from_parent_id,
1507
1372
                    entry.only_change_inv))
1558
1423
        from_tail = splitpath(from_rel)[-1]
1559
1424
        from_id = inv.path2id(from_rel)
1560
1425
        if from_id is None:
1561
 
            # if file is missing in the inventory maybe it's in the basis_tree
1562
 
            basis_tree = self.branch.basis_tree()
1563
 
            from_id = basis_tree.path2id(from_rel)
1564
 
            if from_id is None:
1565
 
                raise errors.BzrRenameFailedError(from_rel,to_rel,
1566
 
                    errors.NotVersionedError(path=from_rel))
1567
 
            # put entry back in the inventory so we can rename it
1568
 
            from_entry = basis_tree.inventory[from_id].copy()
1569
 
            inv.add(from_entry)
1570
 
        else:
1571
 
            from_entry = inv[from_id]
 
1426
            raise errors.BzrRenameFailedError(from_rel,to_rel,
 
1427
                errors.NotVersionedError(path=str(from_rel)))
 
1428
        from_entry = inv[from_id]
1572
1429
        from_parent_id = from_entry.parent_id
1573
1430
        to_dir, to_tail = os.path.split(to_rel)
1574
1431
        to_dir_id = inv.path2id(to_dir)
1587
1444
        # versioned
1588
1445
        if to_dir_id is None:
1589
1446
            raise errors.BzrMoveFailedError(from_rel,to_rel,
1590
 
                errors.NotVersionedError(path=to_dir))
 
1447
                errors.NotVersionedError(path=str(to_dir)))
1591
1448
 
1592
1449
        # all checks done. now we can continue with our actual work
1593
1450
        mutter('rename_one:\n'
1620
1477
        These are files in the working directory that are not versioned or
1621
1478
        control files or ignored.
1622
1479
        """
1623
 
        # force the extras method to be fully executed before returning, to
 
1480
        # force the extras method to be fully executed before returning, to 
1624
1481
        # prevent race conditions with the lock
1625
1482
        return iter(
1626
1483
            [subp for subp in self.extras() if not self.is_ignored(subp)])
1636
1493
        :raises: NoSuchId if any fileid is not currently versioned.
1637
1494
        """
1638
1495
        for file_id in file_ids:
1639
 
            if file_id not in self._inventory:
1640
 
                raise errors.NoSuchId(self, file_id)
1641
 
        for file_id in file_ids:
1642
1496
            if self._inventory.has_id(file_id):
1643
1497
                self._inventory.remove_recursive_id(file_id)
 
1498
            else:
 
1499
                raise errors.NoSuchId(self, file_id)
1644
1500
        if len(file_ids):
1645
 
            # in the future this should just set a dirty bit to wait for the
 
1501
            # in the future this should just set a dirty bit to wait for the 
1646
1502
            # final unlock. However, until all methods of workingtree start
1647
 
            # with the current in -memory inventory rather than triggering
 
1503
            # with the current in -memory inventory rather than triggering 
1648
1504
            # a read, it is more complex - we need to teach read_inventory
1649
1505
            # to know when to read, and when to not read first... and possibly
1650
1506
            # to save first when the in memory one may be corrupted.
1651
1507
            # so for now, we just only write it if it is indeed dirty.
1652
1508
            # - RBC 20060907
1653
1509
            self._write_inventory(self._inventory)
 
1510
    
 
1511
    @deprecated_method(zero_eight)
 
1512
    def iter_conflicts(self):
 
1513
        """List all files in the tree that have text or content conflicts.
 
1514
        DEPRECATED.  Use conflicts instead."""
 
1515
        return self._iter_conflicts()
1654
1516
 
1655
1517
    def _iter_conflicts(self):
1656
1518
        conflicted = set()
1665
1527
 
1666
1528
    @needs_write_lock
1667
1529
    def pull(self, source, overwrite=False, stop_revision=None,
1668
 
             change_reporter=None, possible_transports=None, local=False,
1669
 
             show_base=False):
 
1530
             change_reporter=None, possible_transports=None):
 
1531
        top_pb = bzrlib.ui.ui_factory.nested_progress_bar()
1670
1532
        source.lock_read()
1671
1533
        try:
 
1534
            pp = ProgressPhase("Pull phase", 2, top_pb)
 
1535
            pp.next_phase()
1672
1536
            old_revision_info = self.branch.last_revision_info()
1673
1537
            basis_tree = self.basis_tree()
1674
1538
            count = self.branch.pull(source, overwrite, stop_revision,
1675
 
                                     possible_transports=possible_transports,
1676
 
                                     local=local)
 
1539
                                     possible_transports=possible_transports)
1677
1540
            new_revision_info = self.branch.last_revision_info()
1678
1541
            if new_revision_info != old_revision_info:
 
1542
                pp.next_phase()
1679
1543
                repository = self.branch.repository
 
1544
                pb = bzrlib.ui.ui_factory.nested_progress_bar()
1680
1545
                basis_tree.lock_read()
1681
1546
                try:
1682
1547
                    new_basis_tree = self.branch.basis_tree()
1685
1550
                                new_basis_tree,
1686
1551
                                basis_tree,
1687
1552
                                this_tree=self,
1688
 
                                pb=None,
1689
 
                                change_reporter=change_reporter,
1690
 
                                show_base=show_base)
1691
 
                    basis_root_id = basis_tree.get_root_id()
1692
 
                    new_root_id = new_basis_tree.get_root_id()
1693
 
                    if basis_root_id != new_root_id:
1694
 
                        self.set_root_id(new_root_id)
 
1553
                                pb=pb,
 
1554
                                change_reporter=change_reporter)
 
1555
                    if (basis_tree.inventory.root is None and
 
1556
                        new_basis_tree.inventory.root is not None):
 
1557
                        self.set_root_id(new_basis_tree.get_root_id())
1695
1558
                finally:
 
1559
                    pb.finished()
1696
1560
                    basis_tree.unlock()
1697
1561
                # TODO - dedup parents list with things merged by pull ?
1698
1562
                # reuse the revisiontree we merged against to set the new
1699
1563
                # tree data.
1700
1564
                parent_trees = [(self.branch.last_revision(), new_basis_tree)]
1701
 
                # we have to pull the merge trees out again, because
1702
 
                # merge_inner has set the ids. - this corner is not yet
 
1565
                # we have to pull the merge trees out again, because 
 
1566
                # merge_inner has set the ids. - this corner is not yet 
1703
1567
                # layered well enough to prevent double handling.
1704
1568
                # XXX TODO: Fix the double handling: telling the tree about
1705
1569
                # the already known parent data is wasteful.
1711
1575
            return count
1712
1576
        finally:
1713
1577
            source.unlock()
 
1578
            top_pb.finished()
1714
1579
 
1715
1580
    @needs_write_lock
1716
1581
    def put_file_bytes_non_atomic(self, file_id, bytes):
1742
1607
 
1743
1608
            fl = []
1744
1609
            for subf in os.listdir(dirabs):
1745
 
                if self.bzrdir.is_control_filename(subf):
 
1610
                if subf == '.bzr':
1746
1611
                    continue
1747
1612
                if subf not in dir_entry.children:
1748
 
                    try:
1749
 
                        (subf_norm,
1750
 
                         can_access) = osutils.normalized_filename(subf)
1751
 
                    except UnicodeDecodeError:
1752
 
                        path_os_enc = path.encode(osutils._fs_enc)
1753
 
                        relpath = path_os_enc + '/' + subf
1754
 
                        raise errors.BadFilenameEncoding(relpath,
1755
 
                                                         osutils._fs_enc)
 
1613
                    subf_norm, can_access = osutils.normalized_filename(subf)
1756
1614
                    if subf_norm != subf and can_access:
1757
1615
                        if subf_norm not in dir_entry.children:
1758
1616
                            fl.append(subf_norm)
1759
1617
                    else:
1760
1618
                        fl.append(subf)
1761
 
 
 
1619
            
1762
1620
            fl.sort()
1763
1621
            for subf in fl:
1764
1622
                subp = pathjoin(path, subf)
1801
1659
        r"""Check whether the filename matches an ignore pattern.
1802
1660
 
1803
1661
        Patterns containing '/' or '\' need to match the whole path;
1804
 
        others match against only the last component.  Patterns starting
1805
 
        with '!' are ignore exceptions.  Exceptions take precedence
1806
 
        over regular patterns and cause the filename to not be ignored.
 
1662
        others match against only the last component.
1807
1663
 
1808
1664
        If the file is ignored, returns the pattern which caused it to
1809
1665
        be ignored, otherwise None.  So this can simply be used as a
1810
1666
        boolean if desired."""
1811
1667
        if getattr(self, '_ignoreglobster', None) is None:
1812
 
            self._ignoreglobster = globbing.ExceptionGlobster(self.get_ignore_list())
 
1668
            self._ignoreglobster = globbing.Globster(self.get_ignore_list())
1813
1669
        return self._ignoreglobster.match(filename)
1814
1670
 
1815
1671
    def kind(self, file_id):
1816
1672
        return file_kind(self.id2abspath(file_id))
1817
1673
 
1818
 
    def stored_kind(self, file_id):
1819
 
        """See Tree.stored_kind"""
1820
 
        return self.inventory[file_id].kind
1821
 
 
1822
1674
    def _comparison_data(self, entry, path):
1823
1675
        abspath = self.abspath(path)
1824
1676
        try:
1865
1717
            raise errors.ObjectNotLocked(self)
1866
1718
 
1867
1719
    def lock_read(self):
1868
 
        """Lock the tree for reading.
1869
 
 
1870
 
        This also locks the branch, and can be unlocked via self.unlock().
1871
 
 
1872
 
        :return: A bzrlib.lock.LogicalLockResult.
1873
 
        """
 
1720
        """See Branch.lock_read, and WorkingTree.unlock."""
1874
1721
        if not self.is_locked():
1875
1722
            self._reset_data()
1876
1723
        self.branch.lock_read()
1877
1724
        try:
1878
 
            self._control_files.lock_read()
1879
 
            return LogicalLockResult(self.unlock)
 
1725
            return self._control_files.lock_read()
1880
1726
        except:
1881
1727
            self.branch.unlock()
1882
1728
            raise
1883
1729
 
1884
1730
    def lock_tree_write(self):
1885
 
        """See MutableTree.lock_tree_write, and WorkingTree.unlock.
1886
 
 
1887
 
        :return: A bzrlib.lock.LogicalLockResult.
1888
 
        """
 
1731
        """See MutableTree.lock_tree_write, and WorkingTree.unlock."""
1889
1732
        if not self.is_locked():
1890
1733
            self._reset_data()
1891
1734
        self.branch.lock_read()
1892
1735
        try:
1893
 
            self._control_files.lock_write()
1894
 
            return LogicalLockResult(self.unlock)
 
1736
            return self._control_files.lock_write()
1895
1737
        except:
1896
1738
            self.branch.unlock()
1897
1739
            raise
1898
1740
 
1899
1741
    def lock_write(self):
1900
 
        """See MutableTree.lock_write, and WorkingTree.unlock.
1901
 
 
1902
 
        :return: A bzrlib.lock.LogicalLockResult.
1903
 
        """
 
1742
        """See MutableTree.lock_write, and WorkingTree.unlock."""
1904
1743
        if not self.is_locked():
1905
1744
            self._reset_data()
1906
1745
        self.branch.lock_write()
1907
1746
        try:
1908
 
            self._control_files.lock_write()
1909
 
            return LogicalLockResult(self.unlock)
 
1747
            return self._control_files.lock_write()
1910
1748
        except:
1911
1749
            self.branch.unlock()
1912
1750
            raise
1920
1758
    def _reset_data(self):
1921
1759
        """Reset transient data that cannot be revalidated."""
1922
1760
        self._inventory_is_modified = False
1923
 
        f = self._transport.get('inventory')
1924
 
        try:
1925
 
            result = self._deserialize(f)
1926
 
        finally:
1927
 
            f.close()
 
1761
        result = self._deserialize(self._control_files.get('inventory'))
1928
1762
        self._set_inventory(result, dirty=False)
1929
1763
 
1930
1764
    @needs_tree_write_lock
1935
1769
 
1936
1770
    def _change_last_revision(self, new_revision):
1937
1771
        """Template method part of set_last_revision to perform the change.
1938
 
 
 
1772
        
1939
1773
        This is used to allow WorkingTree3 instances to not affect branch
1940
1774
        when their last revision is set.
1941
1775
        """
1951
1785
 
1952
1786
    def _write_basis_inventory(self, xml):
1953
1787
        """Write the basis inventory XML to the basis-inventory file"""
 
1788
        assert isinstance(xml, str), 'serialised xml must be bytestring.'
1954
1789
        path = self._basis_inventory_name()
1955
1790
        sio = StringIO(xml)
1956
 
        self._transport.put_file(path, sio,
1957
 
            mode=self.bzrdir._get_file_mode())
 
1791
        self._control_files.put(path, sio)
1958
1792
 
1959
1793
    def _create_basis_xml_from_inventory(self, revision_id, inventory):
1960
1794
        """Create the text that will be saved in basis-inventory"""
1967
1801
        # as commit already has that ready-to-use [while the format is the
1968
1802
        # same, that is].
1969
1803
        try:
1970
 
            # this double handles the inventory - unpack and repack -
 
1804
            # this double handles the inventory - unpack and repack - 
1971
1805
            # but is easier to understand. We can/should put a conditional
1972
1806
            # in here based on whether the inventory is in the latest format
1973
1807
            # - perhaps we should repack all inventories on a repository
1974
1808
            # upgrade ?
1975
1809
            # the fast path is to copy the raw xml from the repository. If the
1976
 
            # xml contains 'revision_id="', then we assume the right
 
1810
            # xml contains 'revision_id="', then we assume the right 
1977
1811
            # revision_id is set. We must check for this full string, because a
1978
1812
            # root node id can legitimately look like 'revision_id' but cannot
1979
1813
            # contain a '"'.
1980
 
            xml = self.branch.repository._get_inventory_xml(new_revision)
 
1814
            xml = self.branch.repository.get_inventory_xml(new_revision)
1981
1815
            firstline = xml.split('\n', 1)[0]
1982
 
            if (not 'revision_id="' in firstline or
 
1816
            if (not 'revision_id="' in firstline or 
1983
1817
                'format="7"' not in firstline):
1984
 
                inv = self.branch.repository._serializer.read_inventory_from_string(
1985
 
                    xml, new_revision)
 
1818
                inv = self.branch.repository.deserialise_inventory(
 
1819
                    new_revision, xml)
1986
1820
                xml = self._create_basis_xml_from_inventory(new_revision, inv)
1987
1821
            self._write_basis_inventory(xml)
1988
1822
        except (errors.NoSuchRevision, errors.RevisionNotPresent):
1991
1825
    def read_basis_inventory(self):
1992
1826
        """Read the cached basis inventory."""
1993
1827
        path = self._basis_inventory_name()
1994
 
        return self._transport.get_bytes(path)
1995
 
 
 
1828
        return self._control_files.get(path).read()
 
1829
        
1996
1830
    @needs_read_lock
1997
1831
    def read_working_inventory(self):
1998
1832
        """Read the working inventory.
1999
 
 
 
1833
        
2000
1834
        :raises errors.InventoryModified: read_working_inventory will fail
2001
1835
            when the current in memory inventory has been modified.
2002
1836
        """
2003
 
        # conceptually this should be an implementation detail of the tree.
 
1837
        # conceptually this should be an implementation detail of the tree. 
2004
1838
        # XXX: Deprecate this.
2005
1839
        # ElementTree does its own conversion from UTF-8, so open in
2006
1840
        # binary.
2007
1841
        if self._inventory_is_modified:
2008
1842
            raise errors.InventoryModified(self)
2009
 
        f = self._transport.get('inventory')
2010
 
        try:
2011
 
            result = self._deserialize(f)
2012
 
        finally:
2013
 
            f.close()
 
1843
        result = self._deserialize(self._control_files.get('inventory'))
2014
1844
        self._set_inventory(result, dirty=False)
2015
1845
        return result
2016
1846
 
2029
1859
 
2030
1860
        inv_delta = []
2031
1861
 
2032
 
        all_files = set() # specified and nested files 
 
1862
        new_files=set()
2033
1863
        unknown_nested_files=set()
2034
 
        if to_file is None:
2035
 
            to_file = sys.stdout
2036
 
 
2037
 
        files_to_backup = []
2038
1864
 
2039
1865
        def recurse_directory_to_add_files(directory):
2040
1866
            # Recurse directory and add all files
2041
1867
            # so we can check if they have changed.
2042
 
            for parent_info, file_infos in self.walkdirs(directory):
2043
 
                for relpath, basename, kind, lstat, fileid, kind in file_infos:
 
1868
            for parent_info, file_infos in\
 
1869
                osutils.walkdirs(self.abspath(directory),
 
1870
                    directory):
 
1871
                for relpath, basename, kind, lstat, abspath in file_infos:
2044
1872
                    # Is it versioned or ignored?
2045
 
                    if self.path2id(relpath):
 
1873
                    if self.path2id(relpath) or self.is_ignored(relpath):
2046
1874
                        # Add nested content for deletion.
2047
 
                        all_files.add(relpath)
 
1875
                        new_files.add(relpath)
2048
1876
                    else:
2049
 
                        # Files which are not versioned
 
1877
                        # Files which are not versioned and not ignored
2050
1878
                        # should be treated as unknown.
2051
 
                        files_to_backup.append(relpath)
 
1879
                        unknown_nested_files.add((relpath, None, kind))
2052
1880
 
2053
1881
        for filename in files:
2054
1882
            # Get file name into canonical form.
2055
1883
            abspath = self.abspath(filename)
2056
1884
            filename = self.relpath(abspath)
2057
1885
            if len(filename) > 0:
2058
 
                all_files.add(filename)
2059
 
                recurse_directory_to_add_files(filename)
 
1886
                new_files.add(filename)
 
1887
                if osutils.isdir(abspath):
 
1888
                    recurse_directory_to_add_files(filename)
2060
1889
 
2061
 
        files = list(all_files)
 
1890
        files = list(new_files)
2062
1891
 
2063
1892
        if len(files) == 0:
2064
1893
            return # nothing to do
2068
1897
 
2069
1898
        # Bail out if we are going to delete files we shouldn't
2070
1899
        if not keep_files and not force:
2071
 
            for (file_id, path, content_change, versioned, parent_id, name,
2072
 
                 kind, executable) in self.iter_changes(self.basis_tree(),
2073
 
                     include_unchanged=True, require_versioned=False,
2074
 
                     want_unversioned=True, specific_files=files):
2075
 
                if versioned[0] == False:
2076
 
                    # The record is unknown or newly added
2077
 
                    files_to_backup.append(path[1])
2078
 
                elif (content_change and (kind[1] is not None) and
2079
 
                        osutils.is_inside_any(files, path[1])):
2080
 
                    # Versioned and changed, but not deleted, and still
2081
 
                    # in one of the dirs to be deleted.
2082
 
                    files_to_backup.append(path[1])
2083
 
 
2084
 
        def backup(file_to_backup):
2085
 
            backup_name = self.bzrdir._available_backup_name(file_to_backup)
2086
 
            osutils.rename(abs_path, self.abspath(backup_name))
2087
 
            return "removed %s (but kept a copy: %s)" % (file_to_backup,
2088
 
                                                         backup_name)
2089
 
 
2090
 
        # Build inv_delta and delete files where applicable,
 
1900
            has_changed_files = len(unknown_nested_files) > 0
 
1901
            if not has_changed_files:
 
1902
                for (file_id, path, content_change, versioned, parent_id, name,
 
1903
                     kind, executable) in self._iter_changes(self.basis_tree(),
 
1904
                         include_unchanged=True, require_versioned=False,
 
1905
                         want_unversioned=True, specific_files=files):
 
1906
                    if versioned == (False, False):
 
1907
                        # The record is unknown ...
 
1908
                        if not self.is_ignored(path[1]):
 
1909
                            # ... but not ignored
 
1910
                            has_changed_files = True
 
1911
                            break
 
1912
                    elif content_change and (kind[1] != None):
 
1913
                        # Versioned and changed, but not deleted
 
1914
                        has_changed_files = True
 
1915
                        break
 
1916
 
 
1917
            if has_changed_files:
 
1918
                # Make delta show ALL applicable changes in error message.
 
1919
                tree_delta = self.changes_from(self.basis_tree(),
 
1920
                    require_versioned=False, want_unversioned=True,
 
1921
                    specific_files=files)
 
1922
                for unknown_file in unknown_nested_files:
 
1923
                    if unknown_file not in tree_delta.unversioned:
 
1924
                        tree_delta.unversioned.extend((unknown_file,))
 
1925
                raise errors.BzrRemoveChangedFilesError(tree_delta)
 
1926
 
 
1927
        # Build inv_delta and delete files where applicaple,
2091
1928
        # do this before any modifications to inventory.
2092
1929
        for f in files:
2093
1930
            fid = self.path2id(f)
2101
1938
                        new_status = 'I'
2102
1939
                    else:
2103
1940
                        new_status = '?'
2104
 
                    # XXX: Really should be a more abstract reporter interface
2105
 
                    kind_ch = osutils.kind_marker(self.kind(fid))
2106
 
                    to_file.write(new_status + '       ' + f + kind_ch + '\n')
 
1941
                    textui.show_status(new_status, self.kind(fid), f,
 
1942
                                       to_file=to_file)
2107
1943
                # Unversion file
2108
1944
                inv_delta.append((f, None, fid, None))
2109
1945
                message = "removed %s" % (f,)
2115
1951
                        len(os.listdir(abs_path)) > 0):
2116
1952
                        if force:
2117
1953
                            osutils.rmtree(abs_path)
2118
 
                            message = "deleted %s" % (f,)
2119
1954
                        else:
2120
 
                            message = backup(f)
 
1955
                            message = "%s is not an empty directory "\
 
1956
                                "and won't be deleted." % (f,)
2121
1957
                    else:
2122
 
                        if f in files_to_backup:
2123
 
                            message = backup(f)
2124
 
                        else:
2125
 
                            osutils.delete_any(abs_path)
2126
 
                            message = "deleted %s" % (f,)
 
1958
                        osutils.delete_any(abs_path)
 
1959
                        message = "deleted %s" % (f,)
2127
1960
                elif message is not None:
2128
1961
                    # Only care if we haven't done anything yet.
2129
1962
                    message = "%s does not exist." % (f,)
2135
1968
 
2136
1969
    @needs_tree_write_lock
2137
1970
    def revert(self, filenames=None, old_tree=None, backups=True,
2138
 
               pb=None, report_changes=False):
 
1971
               pb=DummyProgress(), report_changes=False):
2139
1972
        from bzrlib.conflicts import resolve
2140
1973
        if filenames == []:
2141
1974
            filenames = None
2154
1987
            if filenames is None and len(self.get_parent_ids()) > 1:
2155
1988
                parent_trees = []
2156
1989
                last_revision = self.last_revision()
2157
 
                if last_revision != _mod_revision.NULL_REVISION:
 
1990
                if last_revision != NULL_REVISION:
2158
1991
                    if basis_tree is None:
2159
1992
                        basis_tree = self.basis_tree()
2160
1993
                        basis_tree.lock_read()
2198
2031
    def set_inventory(self, new_inventory_list):
2199
2032
        from bzrlib.inventory import (Inventory,
2200
2033
                                      InventoryDirectory,
 
2034
                                      InventoryEntry,
2201
2035
                                      InventoryFile,
2202
2036
                                      InventoryLink)
2203
2037
        inv = Inventory(self.get_root_id())
2205
2039
            name = os.path.basename(path)
2206
2040
            if name == "":
2207
2041
                continue
2208
 
            # fixme, there should be a factory function inv,add_??
 
2042
            # fixme, there should be a factory function inv,add_?? 
2209
2043
            if kind == 'directory':
2210
2044
                inv.add(InventoryDirectory(file_id, name, parent))
2211
2045
            elif kind == 'file':
2219
2053
    @needs_tree_write_lock
2220
2054
    def set_root_id(self, file_id):
2221
2055
        """Set the root id for this tree."""
2222
 
        # for compatability
 
2056
        # for compatability 
2223
2057
        if file_id is None:
2224
 
            raise ValueError(
2225
 
                'WorkingTree.set_root_id with fileid=None')
2226
 
        file_id = osutils.safe_file_id(file_id)
 
2058
            symbol_versioning.warn(symbol_versioning.zero_twelve
 
2059
                % 'WorkingTree.set_root_id with fileid=None',
 
2060
                DeprecationWarning,
 
2061
                stacklevel=3)
 
2062
            file_id = ROOT_ID
 
2063
        else:
 
2064
            file_id = osutils.safe_file_id(file_id)
2227
2065
        self._set_root_id(file_id)
2228
2066
 
2229
2067
    def _set_root_id(self, file_id):
2230
2068
        """Set the root id for this tree, in a format specific manner.
2231
2069
 
2232
 
        :param file_id: The file id to assign to the root. It must not be
 
2070
        :param file_id: The file id to assign to the root. It must not be 
2233
2071
            present in the current inventory or an error will occur. It must
2234
2072
            not be None, but rather a valid file id.
2235
2073
        """
2254
2092
 
2255
2093
    def unlock(self):
2256
2094
        """See Branch.unlock.
2257
 
 
 
2095
        
2258
2096
        WorkingTree locking just uses the Branch locking facilities.
2259
2097
        This is current because all working trees have an embedded branch
2260
2098
        within them. IF in the future, we were to make branch data shareable
2261
 
        between multiple working trees, i.e. via shared storage, then we
 
2099
        between multiple working trees, i.e. via shared storage, then we 
2262
2100
        would probably want to lock both the local tree, and the branch.
2263
2101
        """
2264
2102
        raise NotImplementedError(self.unlock)
2265
2103
 
2266
 
    _marker = object()
2267
 
 
2268
 
    def update(self, change_reporter=None, possible_transports=None,
2269
 
               revision=None, old_tip=_marker, show_base=False):
 
2104
    def update(self, change_reporter=None, possible_transports=None):
2270
2105
        """Update a working tree along its branch.
2271
2106
 
2272
2107
        This will update the branch if its bound too, which means we have
2290
2125
        - Merge current state -> basis tree of the master w.r.t. the old tree
2291
2126
          basis.
2292
2127
        - Do a 'normal' merge of the old branch basis if it is relevant.
2293
 
 
2294
 
        :param revision: The target revision to update to. Must be in the
2295
 
            revision history.
2296
 
        :param old_tip: If branch.update() has already been run, the value it
2297
 
            returned (old tip of the branch or None). _marker is used
2298
 
            otherwise.
2299
2128
        """
2300
 
        if self.branch.get_bound_location() is not None:
 
2129
        if self.branch.get_master_branch(possible_transports) is not None:
2301
2130
            self.lock_write()
2302
 
            update_branch = (old_tip is self._marker)
 
2131
            update_branch = True
2303
2132
        else:
2304
2133
            self.lock_tree_write()
2305
2134
            update_branch = False
2307
2136
            if update_branch:
2308
2137
                old_tip = self.branch.update(possible_transports)
2309
2138
            else:
2310
 
                if old_tip is self._marker:
2311
 
                    old_tip = None
2312
 
            return self._update_tree(old_tip, change_reporter, revision, show_base)
 
2139
                old_tip = None
 
2140
            return self._update_tree(old_tip, change_reporter)
2313
2141
        finally:
2314
2142
            self.unlock()
2315
2143
 
2316
2144
    @needs_tree_write_lock
2317
 
    def _update_tree(self, old_tip=None, change_reporter=None, revision=None,
2318
 
                     show_base=False):
 
2145
    def _update_tree(self, old_tip=None, change_reporter=None):
2319
2146
        """Update a tree to the master branch.
2320
2147
 
2321
2148
        :param old_tip: if supplied, the previous tip revision the branch,
2327
2154
        # cant set that until we update the working trees last revision to be
2328
2155
        # one from the new branch, because it will just get absorbed by the
2329
2156
        # parent de-duplication logic.
2330
 
        #
 
2157
        # 
2331
2158
        # We MUST save it even if an error occurs, because otherwise the users
2332
2159
        # local work is unreferenced and will appear to have been lost.
2333
 
        #
2334
 
        nb_conflicts = 0
 
2160
        # 
 
2161
        result = 0
2335
2162
        try:
2336
2163
            last_rev = self.get_parent_ids()[0]
2337
2164
        except IndexError:
2338
2165
            last_rev = _mod_revision.NULL_REVISION
2339
 
        if revision is None:
2340
 
            revision = self.branch.last_revision()
2341
 
 
2342
 
        old_tip = old_tip or _mod_revision.NULL_REVISION
2343
 
 
2344
 
        if not _mod_revision.is_null(old_tip) and old_tip != last_rev:
2345
 
            # the branch we are bound to was updated
2346
 
            # merge those changes in first
2347
 
            base_tree  = self.basis_tree()
2348
 
            other_tree = self.branch.repository.revision_tree(old_tip)
2349
 
            nb_conflicts = merge.merge_inner(self.branch, other_tree,
2350
 
                                             base_tree, this_tree=self,
2351
 
                                             change_reporter=change_reporter,
2352
 
                                             show_base=show_base)
2353
 
            if nb_conflicts:
2354
 
                self.add_parent_tree((old_tip, other_tree))
2355
 
                trace.note('Rerun update after fixing the conflicts.')
2356
 
                return nb_conflicts
2357
 
 
2358
 
        if last_rev != _mod_revision.ensure_null(revision):
2359
 
            # the working tree is up to date with the branch
2360
 
            # we can merge the specified revision from master
2361
 
            to_tree = self.branch.repository.revision_tree(revision)
2362
 
            to_root_id = to_tree.get_root_id()
2363
 
 
 
2166
        if last_rev != _mod_revision.ensure_null(self.branch.last_revision()):
 
2167
            # merge tree state up to new branch tip.
2364
2168
            basis = self.basis_tree()
2365
2169
            basis.lock_read()
2366
2170
            try:
2367
 
                if (basis.inventory.root is None
2368
 
                    or basis.inventory.root.file_id != to_root_id):
2369
 
                    self.set_root_id(to_root_id)
 
2171
                to_tree = self.branch.basis_tree()
 
2172
                if basis.inventory.root is None:
 
2173
                    self.set_root_id(to_tree.get_root_id())
2370
2174
                    self.flush()
 
2175
                result += merge.merge_inner(
 
2176
                                      self.branch,
 
2177
                                      to_tree,
 
2178
                                      basis,
 
2179
                                      this_tree=self,
 
2180
                                      change_reporter=change_reporter)
2371
2181
            finally:
2372
2182
                basis.unlock()
2373
 
 
2374
 
            # determine the branch point
2375
 
            graph = self.branch.repository.get_graph()
2376
 
            base_rev_id = graph.find_unique_lca(self.branch.last_revision(),
2377
 
                                                last_rev)
2378
 
            base_tree = self.branch.repository.revision_tree(base_rev_id)
2379
 
 
2380
 
            nb_conflicts = merge.merge_inner(self.branch, to_tree, base_tree,
2381
 
                                             this_tree=self,
2382
 
                                             change_reporter=change_reporter,
2383
 
                                             show_base=show_base)
2384
 
            self.set_last_revision(revision)
2385
2183
            # TODO - dedup parents list with things merged by pull ?
2386
2184
            # reuse the tree we've updated to to set the basis:
2387
 
            parent_trees = [(revision, to_tree)]
 
2185
            parent_trees = [(self.branch.last_revision(), to_tree)]
2388
2186
            merges = self.get_parent_ids()[1:]
2389
2187
            # Ideally we ask the tree for the trees here, that way the working
2390
 
            # tree can decide whether to give us the entire tree or give us a
 
2188
            # tree can decide whether to give us teh entire tree or give us a
2391
2189
            # lazy initialised tree. dirstate for instance will have the trees
2392
2190
            # in ram already, whereas a last-revision + basis-inventory tree
2393
2191
            # will not, but also does not need them when setting parents.
2394
2192
            for parent in merges:
2395
2193
                parent_trees.append(
2396
2194
                    (parent, self.branch.repository.revision_tree(parent)))
2397
 
            if not _mod_revision.is_null(old_tip):
 
2195
            if (old_tip is not None and not _mod_revision.is_null(old_tip)):
2398
2196
                parent_trees.append(
2399
2197
                    (old_tip, self.branch.repository.revision_tree(old_tip)))
2400
2198
            self.set_parent_trees(parent_trees)
2401
2199
            last_rev = parent_trees[0][0]
2402
 
        return nb_conflicts
 
2200
        else:
 
2201
            # the working tree had the same last-revision as the master
 
2202
            # branch did. We may still have pivot local work from the local
 
2203
            # branch into old_tip:
 
2204
            if (old_tip is not None and not _mod_revision.is_null(old_tip)):
 
2205
                self.add_parent_tree_id(old_tip)
 
2206
        if (old_tip is not None and not _mod_revision.is_null(old_tip)
 
2207
            and old_tip != last_rev):
 
2208
            # our last revision was not the prior branch last revision
 
2209
            # and we have converted that last revision to a pending merge.
 
2210
            # base is somewhere between the branch tip now
 
2211
            # and the now pending merge
 
2212
 
 
2213
            # Since we just modified the working tree and inventory, flush out
 
2214
            # the current state, before we modify it again.
 
2215
            # TODO: jam 20070214 WorkingTree3 doesn't require this, dirstate
 
2216
            #       requires it only because TreeTransform directly munges the
 
2217
            #       inventory and calls tree._write_inventory(). Ultimately we
 
2218
            #       should be able to remove this extra flush.
 
2219
            self.flush()
 
2220
            graph = self.branch.repository.get_graph()
 
2221
            base_rev_id = graph.find_unique_lca(self.branch.last_revision(),
 
2222
                                                old_tip)
 
2223
            base_tree = self.branch.repository.revision_tree(base_rev_id)
 
2224
            other_tree = self.branch.repository.revision_tree(old_tip)
 
2225
            result += merge.merge_inner(
 
2226
                                  self.branch,
 
2227
                                  other_tree,
 
2228
                                  base_tree,
 
2229
                                  this_tree=self,
 
2230
                                  change_reporter=change_reporter)
 
2231
        return result
2403
2232
 
2404
2233
    def _write_hashcache_if_dirty(self):
2405
2234
        """Write out the hashcache if it is dirty."""
2504
2333
                    # value.
2505
2334
                    bzrdir_loc = bisect_left(cur_disk_dir_content,
2506
2335
                        ('.bzr', '.bzr'))
2507
 
                    if (bzrdir_loc < len(cur_disk_dir_content)
2508
 
                        and self.bzrdir.is_control_filename(
2509
 
                            cur_disk_dir_content[bzrdir_loc][0])):
 
2336
                    if cur_disk_dir_content[bzrdir_loc][0] == '.bzr':
2510
2337
                        # we dont yield the contents of, or, .bzr itself.
2511
2338
                        del cur_disk_dir_content[bzrdir_loc]
2512
2339
            if inv_finished:
2602
2429
                relroot = ""
2603
2430
            # FIXME: stash the node in pending
2604
2431
            entry = inv[top_id]
2605
 
            if entry.kind == 'directory':
2606
 
                for name, child in entry.sorted_children():
2607
 
                    dirblock.append((relroot + name, name, child.kind, None,
2608
 
                        child.file_id, child.kind
2609
 
                        ))
 
2432
            for name, child in entry.sorted_children():
 
2433
                dirblock.append((relroot + name, name, child.kind, None,
 
2434
                    child.file_id, child.kind
 
2435
                    ))
2610
2436
            yield (currentdir[0], entry.file_id), dirblock
2611
2437
            # push the user specified dirs from dirblock
2612
2438
            for dir in reversed(dirblock):
2645
2471
        self.set_conflicts(un_resolved)
2646
2472
        return un_resolved, resolved
2647
2473
 
2648
 
    @needs_read_lock
2649
 
    def _check(self, references):
2650
 
        """Check the tree for consistency.
2651
 
 
2652
 
        :param references: A dict with keys matching the items returned by
2653
 
            self._get_check_refs(), and values from looking those keys up in
2654
 
            the repository.
2655
 
        """
2656
 
        tree_basis = self.basis_tree()
2657
 
        tree_basis.lock_read()
2658
 
        try:
2659
 
            repo_basis = references[('trees', self.last_revision())]
2660
 
            if len(list(repo_basis.iter_changes(tree_basis))) > 0:
2661
 
                raise errors.BzrCheckError(
2662
 
                    "Mismatched basis inventory content.")
2663
 
            self._validate()
2664
 
        finally:
2665
 
            tree_basis.unlock()
2666
 
 
2667
2474
    def _validate(self):
2668
2475
        """Validate internal structures.
2669
2476
 
2675
2482
        """
2676
2483
        return
2677
2484
 
2678
 
    @needs_read_lock
2679
 
    def check_state(self):
2680
 
        """Check that the working state is/isn't valid."""
2681
 
        check_refs = self._get_check_refs()
2682
 
        refs = {}
2683
 
        for ref in check_refs:
2684
 
            kind, value = ref
2685
 
            if kind == 'trees':
2686
 
                refs[ref] = self.branch.repository.revision_tree(value)
2687
 
        self._check(refs)
2688
 
 
2689
 
    @needs_tree_write_lock
2690
 
    def reset_state(self, revision_ids=None):
2691
 
        """Reset the state of the working tree.
2692
 
 
2693
 
        This does a hard-reset to a last-known-good state. This is a way to
2694
 
        fix if something got corrupted (like the .bzr/checkout/dirstate file)
2695
 
        """
2696
 
        if revision_ids is None:
2697
 
            revision_ids = self.get_parent_ids()
2698
 
        if not revision_ids:
2699
 
            rt = self.branch.repository.revision_tree(
2700
 
                _mod_revision.NULL_REVISION)
2701
 
        else:
2702
 
            rt = self.branch.repository.revision_tree(revision_ids[0])
2703
 
        self._write_inventory(rt.inventory)
2704
 
        self.set_parent_ids(revision_ids)
2705
 
 
2706
 
    def _get_rules_searcher(self, default_searcher):
2707
 
        """See Tree._get_rules_searcher."""
2708
 
        if self._rules_searcher is None:
2709
 
            self._rules_searcher = super(WorkingTree,
2710
 
                self)._get_rules_searcher(default_searcher)
2711
 
        return self._rules_searcher
2712
 
 
2713
 
    def get_shelf_manager(self):
2714
 
        """Return the ShelfManager for this WorkingTree."""
2715
 
        from bzrlib.shelf import ShelfManager
2716
 
        return ShelfManager(self, self._transport)
2717
 
 
2718
2485
 
2719
2486
class WorkingTree2(WorkingTree):
2720
2487
    """This is the Format 2 working tree.
2721
2488
 
2722
 
    This was the first weave based working tree.
 
2489
    This was the first weave based working tree. 
2723
2490
     - uses os locks for locking.
2724
2491
     - uses the branch last-revision.
2725
2492
    """
2735
2502
        if self._inventory is None:
2736
2503
            self.read_working_inventory()
2737
2504
 
2738
 
    def _get_check_refs(self):
2739
 
        """Return the references needed to perform a check of this tree."""
2740
 
        return [('trees', self.last_revision())]
2741
 
 
2742
2505
    def lock_tree_write(self):
2743
2506
        """See WorkingTree.lock_tree_write().
2744
2507
 
2745
2508
        In Format2 WorkingTrees we have a single lock for the branch and tree
2746
2509
        so lock_tree_write() degrades to lock_write().
2747
 
 
2748
 
        :return: An object with an unlock method which will release the lock
2749
 
            obtained.
2750
2510
        """
2751
2511
        self.branch.lock_write()
2752
2512
        try:
2753
 
            self._control_files.lock_write()
2754
 
            return self
 
2513
            return self._control_files.lock_write()
2755
2514
        except:
2756
2515
            self.branch.unlock()
2757
2516
            raise
2766
2525
            if self._inventory_is_modified:
2767
2526
                self.flush()
2768
2527
            self._write_hashcache_if_dirty()
2769
 
 
 
2528
                    
2770
2529
        # reverse order of locking.
2771
2530
        try:
2772
2531
            return self._control_files.unlock()
2788
2547
    def _last_revision(self):
2789
2548
        """See Mutable.last_revision."""
2790
2549
        try:
2791
 
            return self._transport.get_bytes('last-revision')
 
2550
            return self._control_files.get('last-revision').read()
2792
2551
        except errors.NoSuchFile:
2793
2552
            return _mod_revision.NULL_REVISION
2794
2553
 
2795
2554
    def _change_last_revision(self, revision_id):
2796
2555
        """See WorkingTree._change_last_revision."""
2797
 
        if revision_id is None or revision_id == _mod_revision.NULL_REVISION:
 
2556
        if revision_id is None or revision_id == NULL_REVISION:
2798
2557
            try:
2799
 
                self._transport.delete('last-revision')
 
2558
                self._control_files._transport.delete('last-revision')
2800
2559
            except errors.NoSuchFile:
2801
2560
                pass
2802
2561
            return False
2803
2562
        else:
2804
 
            self._transport.put_bytes('last-revision', revision_id,
2805
 
                mode=self.bzrdir._get_file_mode())
 
2563
            self._control_files.put_bytes('last-revision', revision_id)
2806
2564
            return True
2807
2565
 
2808
 
    def _get_check_refs(self):
2809
 
        """Return the references needed to perform a check of this tree."""
2810
 
        return [('trees', self.last_revision())]
2811
 
 
2812
2566
    @needs_tree_write_lock
2813
2567
    def set_conflicts(self, conflicts):
2814
 
        self._put_rio('conflicts', conflicts.to_stanzas(),
 
2568
        self._put_rio('conflicts', conflicts.to_stanzas(), 
2815
2569
                      CONFLICT_HEADER_1)
2816
2570
 
2817
2571
    @needs_tree_write_lock
2824
2578
    @needs_read_lock
2825
2579
    def conflicts(self):
2826
2580
        try:
2827
 
            confile = self._transport.get('conflicts')
 
2581
            confile = self._control_files.get('conflicts')
2828
2582
        except errors.NoSuchFile:
2829
2583
            return _mod_conflicts.ConflictList()
2830
2584
        try:
2831
 
            try:
2832
 
                if confile.next() != CONFLICT_HEADER_1 + '\n':
2833
 
                    raise errors.ConflictFormatError()
2834
 
            except StopIteration:
 
2585
            if confile.next() != CONFLICT_HEADER_1 + '\n':
2835
2586
                raise errors.ConflictFormatError()
2836
 
            return _mod_conflicts.ConflictList.from_stanzas(RioReader(confile))
2837
 
        finally:
2838
 
            confile.close()
 
2587
        except StopIteration:
 
2588
            raise errors.ConflictFormatError()
 
2589
        return _mod_conflicts.ConflictList.from_stanzas(RioReader(confile))
2839
2590
 
2840
2591
    def unlock(self):
2841
2592
        # do non-implementation specific cleanup
2858
2609
            return path[:-len(suffix)]
2859
2610
 
2860
2611
 
 
2612
@deprecated_function(zero_eight)
 
2613
def is_control_file(filename):
 
2614
    """See WorkingTree.is_control_filename(filename)."""
 
2615
    ## FIXME: better check
 
2616
    filename = normpath(filename)
 
2617
    while filename != '':
 
2618
        head, tail = os.path.split(filename)
 
2619
        ## mutter('check %r for control file' % ((head, tail),))
 
2620
        if tail == '.bzr':
 
2621
            return True
 
2622
        if filename == head:
 
2623
            break
 
2624
        filename = head
 
2625
    return False
 
2626
 
 
2627
 
2861
2628
class WorkingTreeFormat(object):
2862
2629
    """An encapsulation of the initialization and open routines for a format.
2863
2630
 
2866
2633
     * a format string,
2867
2634
     * an open routine.
2868
2635
 
2869
 
    Formats are placed in an dict by their format string for reference
 
2636
    Formats are placed in an dict by their format string for reference 
2870
2637
    during workingtree opening. Its not required that these be instances, they
2871
 
    can be classes themselves with class methods - it simply depends on
 
2638
    can be classes themselves with class methods - it simply depends on 
2872
2639
    whether state is needed for a given format or not.
2873
2640
 
2874
2641
    Once a format is deprecated, just deprecate the initialize and open
2875
 
    methods on the format class. Do not deprecate the object, as the
 
2642
    methods on the format class. Do not deprecate the object, as the 
2876
2643
    object will be created every time regardless.
2877
2644
    """
2878
2645
 
2882
2649
    _formats = {}
2883
2650
    """The known formats."""
2884
2651
 
2885
 
    _extra_formats = []
2886
 
    """Extra formats that can not be used in a metadir."""
2887
 
 
2888
2652
    requires_rich_root = False
2889
2653
 
2890
2654
    upgrade_recommended = False
2891
2655
 
2892
 
    requires_normalized_unicode_filenames = False
2893
 
 
2894
 
    case_sensitive_filename = "FoRMaT"
2895
 
 
2896
 
    missing_parent_conflicts = False
2897
 
    """If this format supports missing parent conflicts."""
2898
 
 
2899
2656
    @classmethod
2900
2657
    def find_format(klass, a_bzrdir):
2901
2658
        """Return the format for the working tree object in a_bzrdir."""
2902
2659
        try:
2903
2660
            transport = a_bzrdir.get_workingtree_transport(None)
2904
 
            format_string = transport.get_bytes("format")
 
2661
            format_string = transport.get("format").read()
2905
2662
            return klass._formats[format_string]
2906
2663
        except errors.NoSuchFile:
2907
2664
            raise errors.NoWorkingTree(base=transport.base)
2908
2665
        except KeyError:
2909
 
            raise errors.UnknownFormatError(format=format_string,
2910
 
                                            kind="working tree")
 
2666
            raise errors.UnknownFormatError(format=format_string)
2911
2667
 
2912
2668
    def __eq__(self, other):
2913
2669
        return self.__class__ is other.__class__
2932
2688
        """Is this format supported?
2933
2689
 
2934
2690
        Supported formats can be initialized and opened.
2935
 
        Unsupported formats may not support initialization or committing or
 
2691
        Unsupported formats may not support initialization or committing or 
2936
2692
        some other features depending on the reason for not being supported.
2937
2693
        """
2938
2694
        return True
2939
2695
 
2940
 
    def supports_content_filtering(self):
2941
 
        """True if this format supports content filtering."""
2942
 
        return False
2943
 
 
2944
 
    def supports_views(self):
2945
 
        """True if this format supports stored views."""
2946
 
        return False
2947
 
 
2948
2696
    @classmethod
2949
2697
    def register_format(klass, format):
2950
2698
        klass._formats[format.get_format_string()] = format
2951
2699
 
2952
2700
    @classmethod
2953
 
    def register_extra_format(klass, format):
2954
 
        klass._extra_formats.append(format)
2955
 
 
2956
 
    @classmethod
2957
 
    def unregister_extra_format(klass, format):
2958
 
        klass._extra_formats.remove(format)
2959
 
 
2960
 
    @classmethod
2961
 
    def get_formats(klass):
2962
 
        return klass._formats.values() + klass._extra_formats
2963
 
 
2964
 
    @classmethod
2965
2701
    def set_default_format(klass, format):
2966
2702
        klass._default_format = format
2967
2703
 
2968
2704
    @classmethod
2969
2705
    def unregister_format(klass, format):
 
2706
        assert klass._formats[format.get_format_string()] is format
2970
2707
        del klass._formats[format.get_format_string()]
2971
2708
 
2972
2709
 
2973
2710
class WorkingTreeFormat2(WorkingTreeFormat):
2974
 
    """The second working tree format.
 
2711
    """The second working tree format. 
2975
2712
 
2976
2713
    This format modified the hash cache from the format 1 hash cache.
2977
2714
    """
2978
2715
 
2979
2716
    upgrade_recommended = True
2980
2717
 
2981
 
    requires_normalized_unicode_filenames = True
2982
 
 
2983
 
    case_sensitive_filename = "Branch-FoRMaT"
2984
 
 
2985
 
    missing_parent_conflicts = False
2986
 
 
2987
2718
    def get_format_description(self):
2988
2719
        """See WorkingTreeFormat.get_format_description()."""
2989
2720
        return "Working tree format 2"
2990
2721
 
2991
 
    def _stub_initialize_on_transport(self, transport, file_mode):
2992
 
        """Workaround: create control files for a remote working tree.
2993
 
 
 
2722
    def stub_initialize_remote(self, control_files):
 
2723
        """As a special workaround create critical control files for a remote working tree
 
2724
        
2994
2725
        This ensures that it can later be updated and dealt with locally,
2995
 
        since BzrDirFormat6 and BzrDirFormat5 cannot represent dirs with
 
2726
        since BzrDirFormat6 and BzrDirFormat5 cannot represent dirs with 
2996
2727
        no working tree.  (See bug #43064).
2997
2728
        """
2998
2729
        sio = StringIO()
2999
 
        inv = inventory.Inventory()
 
2730
        inv = Inventory()
3000
2731
        xml5.serializer_v5.write_inventory(inv, sio, working=True)
3001
2732
        sio.seek(0)
3002
 
        transport.put_file('inventory', sio, file_mode)
3003
 
        transport.put_bytes('pending-merges', '', file_mode)
3004
 
 
3005
 
    def initialize(self, a_bzrdir, revision_id=None, from_branch=None,
3006
 
                   accelerator_tree=None, hardlink=False):
 
2733
        control_files.put('inventory', sio)
 
2734
 
 
2735
        control_files.put_bytes('pending-merges', '')
 
2736
        
 
2737
 
 
2738
    def initialize(self, a_bzrdir, revision_id=None, from_branch=None):
3007
2739
        """See WorkingTreeFormat.initialize()."""
3008
2740
        if not isinstance(a_bzrdir.transport, LocalTransport):
3009
2741
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
3018
2750
            branch.generate_revision_history(revision_id)
3019
2751
        finally:
3020
2752
            branch.unlock()
3021
 
        inv = inventory.Inventory()
 
2753
        inv = Inventory()
3022
2754
        wt = WorkingTree2(a_bzrdir.root_transport.local_abspath('.'),
3023
2755
                         branch,
3024
2756
                         inv,
3025
2757
                         _internal=True,
3026
2758
                         _format=self,
3027
 
                         _bzrdir=a_bzrdir,
3028
 
                         _control_files=branch.control_files)
 
2759
                         _bzrdir=a_bzrdir)
3029
2760
        basis_tree = branch.repository.revision_tree(revision_id)
3030
2761
        if basis_tree.inventory.root is not None:
3031
2762
            wt.set_root_id(basis_tree.get_root_id())
3056
2787
        wt = WorkingTree2(a_bzrdir.root_transport.local_abspath('.'),
3057
2788
                           _internal=True,
3058
2789
                           _format=self,
3059
 
                           _bzrdir=a_bzrdir,
3060
 
                           _control_files=a_bzrdir.open_branch().control_files)
 
2790
                           _bzrdir=a_bzrdir)
3061
2791
        return wt
3062
2792
 
3063
2793
class WorkingTreeFormat3(WorkingTreeFormat):
3071
2801
        - is new in bzr 0.8
3072
2802
        - uses a LockDir to guard access for writes.
3073
2803
    """
3074
 
 
 
2804
    
3075
2805
    upgrade_recommended = True
3076
2806
 
3077
 
    missing_parent_conflicts = True
3078
 
 
3079
2807
    def get_format_string(self):
3080
2808
        """See WorkingTreeFormat.get_format_string()."""
3081
2809
        return "Bazaar-NG Working Tree format 3"
3096
2824
 
3097
2825
    def _open_control_files(self, a_bzrdir):
3098
2826
        transport = a_bzrdir.get_workingtree_transport(None)
3099
 
        return LockableFiles(transport, self._lock_file_name,
 
2827
        return LockableFiles(transport, self._lock_file_name, 
3100
2828
                             self._lock_class)
3101
2829
 
3102
 
    def initialize(self, a_bzrdir, revision_id=None, from_branch=None,
3103
 
                   accelerator_tree=None, hardlink=False):
 
2830
    def initialize(self, a_bzrdir, revision_id=None, from_branch=None):
3104
2831
        """See WorkingTreeFormat.initialize().
3105
 
 
3106
 
        :param revision_id: if supplied, create a working tree at a different
3107
 
            revision than the branch is at.
3108
 
        :param accelerator_tree: A tree which can be used for retrieving file
3109
 
            contents more quickly than the revision tree, i.e. a workingtree.
3110
 
            The revision tree will be used for cases where accelerator_tree's
3111
 
            content is different.
3112
 
        :param hardlink: If true, hard-link files from accelerator_tree,
3113
 
            where possible.
 
2832
        
 
2833
        revision_id allows creating a working tree at a different
 
2834
        revision than the branch is at.
3114
2835
        """
3115
2836
        if not isinstance(a_bzrdir.transport, LocalTransport):
3116
2837
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
3118
2839
        control_files = self._open_control_files(a_bzrdir)
3119
2840
        control_files.create_lock()
3120
2841
        control_files.lock_write()
3121
 
        transport.put_bytes('format', self.get_format_string(),
3122
 
            mode=a_bzrdir._get_file_mode())
 
2842
        control_files.put_utf8('format', self.get_format_string())
3123
2843
        if from_branch is not None:
3124
2844
            branch = from_branch
3125
2845
        else:
3145
2865
            # only set an explicit root id if there is one to set.
3146
2866
            if basis_tree.inventory.root is not None:
3147
2867
                wt.set_root_id(basis_tree.get_root_id())
3148
 
            if revision_id == _mod_revision.NULL_REVISION:
 
2868
            if revision_id == NULL_REVISION:
3149
2869
                wt.set_parent_trees([])
3150
2870
            else:
3151
2871
                wt.set_parent_trees([(revision_id, basis_tree)])
3158
2878
        return wt
3159
2879
 
3160
2880
    def _initial_inventory(self):
3161
 
        return inventory.Inventory()
 
2881
        return Inventory()
3162
2882
 
3163
2883
    def __init__(self):
3164
2884
        super(WorkingTreeFormat3, self).__init__()
3179
2899
 
3180
2900
    def _open(self, a_bzrdir, control_files):
3181
2901
        """Open the tree itself.
3182
 
 
 
2902
        
3183
2903
        :param a_bzrdir: the dir for the tree.
3184
2904
        :param control_files: the control files for the tree.
3185
2905
        """
3193
2913
        return self.get_format_string()
3194
2914
 
3195
2915
 
3196
 
__default_format = WorkingTreeFormat6()
 
2916
__default_format = WorkingTreeFormat4()
3197
2917
WorkingTreeFormat.register_format(__default_format)
3198
 
WorkingTreeFormat.register_format(WorkingTreeFormat5())
3199
 
WorkingTreeFormat.register_format(WorkingTreeFormat4())
3200
2918
WorkingTreeFormat.register_format(WorkingTreeFormat3())
3201
2919
WorkingTreeFormat.set_default_format(__default_format)
3202
 
# Register extra formats which have no format string are not discoverable
3203
 
# and not independently creatable. They are implicitly created as part of
3204
 
# e.g. older Bazaar formats or foreign formats.
3205
 
WorkingTreeFormat.register_extra_format(WorkingTreeFormat2())
 
2920
# formats which have no format string are not discoverable
 
2921
# and not independently creatable, so are not registered.
 
2922
_legacy_formats = [WorkingTreeFormat2(),
 
2923
                   ]