~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/workingtree.py

  • Committer: Martin Albisetti
  • Date: 2008-05-06 00:21:18 UTC
  • mto: (3431.1.1 integration)
  • mto: This revision was merged to the branch mainline in revision 3432.
  • Revision ID: argentina@gmail.com-20080506002118-7w9ywklw4khddf3g
Added spanish index

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005-2010 Canonical Ltd
 
1
# Copyright (C) 2005, 2006, 2007 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
"""WorkingTree object and friends.
18
18
 
19
19
A WorkingTree represents the editable working copy of a branch.
20
 
Operations which represent the WorkingTree are also done here,
21
 
such as renaming or adding files.  The WorkingTree has an inventory
22
 
which is updated by these operations.  A commit produces a
 
20
Operations which represent the WorkingTree are also done here, 
 
21
such as renaming or adding files.  The WorkingTree has an inventory 
 
22
which is updated by these operations.  A commit produces a 
23
23
new revision based on the workingtree and its inventory.
24
24
 
25
25
At the moment every WorkingTree has its own branch.  Remote
29
29
WorkingTree.open(dir).
30
30
"""
31
31
 
 
32
# TODO: Give the workingtree sole responsibility for the working inventory;
 
33
# remove the variable and references to it from the branch.  This may require
 
34
# updating the commit code so as to update the inventory within the working
 
35
# copy, and making sure there's only one WorkingTree for any directory on disk.
 
36
# At the moment they may alias the inventory and have old copies of it in
 
37
# memory.  (Now done? -- mbp 20060309)
32
38
 
33
39
from cStringIO import StringIO
34
40
import os
42
48
import itertools
43
49
import operator
44
50
import stat
 
51
from time import time
 
52
import warnings
45
53
import re
46
54
 
47
55
import bzrlib
49
57
    branch,
50
58
    bzrdir,
51
59
    conflicts as _mod_conflicts,
 
60
    dirstate,
52
61
    errors,
53
62
    generate_ids,
54
63
    globbing,
55
 
    graph as _mod_graph,
56
64
    hashcache,
57
65
    ignores,
58
 
    inventory,
59
66
    merge,
60
67
    revision as _mod_revision,
61
68
    revisiontree,
 
69
    repository,
 
70
    textui,
62
71
    trace,
63
72
    transform,
64
 
    transport,
65
73
    ui,
66
 
    views,
 
74
    urlutils,
67
75
    xml5,
 
76
    xml6,
68
77
    xml7,
69
78
    )
70
 
from bzrlib.workingtree_4 import (
71
 
    WorkingTreeFormat4,
72
 
    WorkingTreeFormat5,
73
 
    WorkingTreeFormat6,
74
 
    )
 
79
import bzrlib.branch
 
80
from bzrlib.transport import get_transport
 
81
import bzrlib.ui
 
82
from bzrlib.workingtree_4 import WorkingTreeFormat4
75
83
""")
76
84
 
77
85
from bzrlib import symbol_versioning
78
86
from bzrlib.decorators import needs_read_lock, needs_write_lock
79
 
from bzrlib.lock import LogicalLockResult
80
 
from bzrlib.lockable_files import LockableFiles
 
87
from bzrlib.inventory import InventoryEntry, Inventory, ROOT_ID, TreeReference
 
88
from bzrlib.lockable_files import LockableFiles, TransportLock
81
89
from bzrlib.lockdir import LockDir
82
90
import bzrlib.mutabletree
83
91
from bzrlib.mutabletree import needs_tree_write_lock
84
92
from bzrlib import osutils
85
93
from bzrlib.osutils import (
 
94
    compact_date,
86
95
    file_kind,
87
96
    isdir,
88
97
    normpath,
89
98
    pathjoin,
 
99
    rand_chars,
90
100
    realpath,
91
101
    safe_unicode,
92
102
    splitpath,
93
103
    supports_executable,
94
104
    )
95
 
from bzrlib.filters import filtered_input_file
96
105
from bzrlib.trace import mutter, note
97
106
from bzrlib.transport.local import LocalTransport
98
 
from bzrlib.revision import CURRENT_REVISION
 
107
from bzrlib.progress import DummyProgress, ProgressPhase
 
108
from bzrlib.revision import NULL_REVISION, CURRENT_REVISION
99
109
from bzrlib.rio import RioReader, rio_file, Stanza
100
 
from bzrlib.symbol_versioning import (
101
 
    deprecated_passed,
102
 
    DEPRECATED_PARAMETER,
103
 
    )
 
110
from bzrlib.symbol_versioning import (deprecated_passed,
 
111
        deprecated_method,
 
112
        deprecated_function,
 
113
        DEPRECATED_PARAMETER,
 
114
        zero_eight,
 
115
        zero_eleven,
 
116
        zero_thirteen,
 
117
        )
104
118
 
105
119
 
106
120
MERGE_MODIFIED_HEADER_1 = "BZR merge-modified list format 1"
107
 
# TODO: Modifying the conflict objects or their type is currently nearly
108
 
# impossible as there is no clear relationship between the working tree format
109
 
# and the conflict list file format.
110
121
CONFLICT_HEADER_1 = "BZR conflict list format 1"
111
122
 
112
123
ERROR_PATH_NOT_FOUND = 3    # WindowsError errno code, equivalent to ENOENT
113
124
 
114
125
 
 
126
@deprecated_function(zero_thirteen)
 
127
def gen_file_id(name):
 
128
    """Return new file id for the basename 'name'.
 
129
 
 
130
    Use bzrlib.generate_ids.gen_file_id() instead
 
131
    """
 
132
    return generate_ids.gen_file_id(name)
 
133
 
 
134
 
 
135
@deprecated_function(zero_thirteen)
 
136
def gen_root_id():
 
137
    """Return a new tree-root file id.
 
138
 
 
139
    This has been deprecated in favor of bzrlib.generate_ids.gen_root_id()
 
140
    """
 
141
    return generate_ids.gen_root_id()
 
142
 
 
143
 
115
144
class TreeEntry(object):
116
145
    """An entry that implements the minimum interface used by commands.
117
146
 
118
 
    This needs further inspection, it may be better to have
 
147
    This needs further inspection, it may be better to have 
119
148
    InventoryEntries without ids - though that seems wrong. For now,
120
149
    this is a parallel hierarchy to InventoryEntry, and needs to become
121
150
    one of several things: decorates to that hierarchy, children of, or
124
153
    no InventoryEntry available - i.e. for unversioned objects.
125
154
    Perhaps they should be UnversionedEntry et al. ? - RBC 20051003
126
155
    """
127
 
 
 
156
 
128
157
    def __eq__(self, other):
129
158
        # yes, this us ugly, TODO: best practice __eq__ style.
130
159
        return (isinstance(other, TreeEntry)
131
160
                and other.__class__ == self.__class__)
132
 
 
 
161
 
133
162
    def kind_character(self):
134
163
        return "???"
135
164
 
167
196
        return ''
168
197
 
169
198
 
170
 
class WorkingTree(bzrlib.mutabletree.MutableTree,
171
 
    bzrdir.ControlComponent):
 
199
class WorkingTree(bzrlib.mutabletree.MutableTree):
172
200
    """Working copy tree.
173
201
 
174
202
    The inventory is held in the `Branch` working-inventory, and the
176
204
 
177
205
    It is possible for a `WorkingTree` to have a filename which is
178
206
    not listed in the Inventory and vice versa.
179
 
 
180
 
    :ivar basedir: The root of the tree on disk. This is a unicode path object
181
 
        (as opposed to a URL).
182
207
    """
183
208
 
184
 
    # override this to set the strategy for storing views
185
 
    def _make_views(self):
186
 
        return views.DisabledViews(self)
187
 
 
188
209
    def __init__(self, basedir='.',
189
210
                 branch=DEPRECATED_PARAMETER,
190
211
                 _inventory=None,
201
222
        if not _internal:
202
223
            raise errors.BzrError("Please use bzrdir.open_workingtree or "
203
224
                "WorkingTree.open() to obtain a WorkingTree.")
 
225
        assert isinstance(basedir, basestring), \
 
226
            "base directory %r is not a string" % basedir
204
227
        basedir = safe_unicode(basedir)
205
228
        mutter("opening working tree %r", basedir)
206
229
        if deprecated_passed(branch):
214
237
            self._control_files = self.branch.control_files
215
238
        else:
216
239
            # assume all other formats have their own control files.
 
240
            assert isinstance(_control_files, LockableFiles), \
 
241
                    "_control_files must be a LockableFiles, not %r" \
 
242
                    % _control_files
217
243
            self._control_files = _control_files
218
 
        self._transport = self._control_files._transport
219
244
        # update the whole cache up front and write to disk if anything changed;
220
245
        # in the future we might want to do this more selectively
221
246
        # two possible ways offer themselves : in self._unlock, write the cache
225
250
        wt_trans = self.bzrdir.get_workingtree_transport(None)
226
251
        cache_filename = wt_trans.local_abspath('stat-cache')
227
252
        self._hashcache = hashcache.HashCache(basedir, cache_filename,
228
 
            self.bzrdir._get_file_mode(),
229
 
            self._content_filter_stack_provider())
 
253
                                              self._control_files._file_mode)
230
254
        hc = self._hashcache
231
255
        hc.read()
232
256
        # is this scan needed ? it makes things kinda slow.
247
271
            # permitted to do this.
248
272
            self._set_inventory(_inventory, dirty=False)
249
273
        self._detect_case_handling()
250
 
        self._rules_searcher = None
251
 
        self.views = self._make_views()
252
 
 
253
 
    @property
254
 
    def user_transport(self):
255
 
        return self.bzrdir.user_transport
256
 
 
257
 
    @property
258
 
    def control_transport(self):
259
 
        return self._transport
260
274
 
261
275
    def _detect_case_handling(self):
262
276
        wt_trans = self.bzrdir.get_workingtree_transport(None)
288
302
        self._control_files.break_lock()
289
303
        self.branch.break_lock()
290
304
 
291
 
    def _get_check_refs(self):
292
 
        """Return the references needed to perform a check of this tree.
293
 
        
294
 
        The default implementation returns no refs, and is only suitable for
295
 
        trees that have no local caching and can commit on ghosts at any time.
296
 
 
297
 
        :seealso: bzrlib.check for details about check_refs.
298
 
        """
299
 
        return []
300
 
 
301
305
    def requires_rich_root(self):
302
306
        return self._format.requires_rich_root
303
307
 
304
308
    def supports_tree_reference(self):
305
309
        return False
306
310
 
307
 
    def supports_content_filtering(self):
308
 
        return self._format.supports_content_filtering()
309
 
 
310
 
    def supports_views(self):
311
 
        return self.views.supports_views()
312
 
 
313
311
    def _set_inventory(self, inv, dirty):
314
312
        """Set the internal cached inventory.
315
313
 
320
318
            False then the inventory is the same as that on disk and any
321
319
            serialisation would be unneeded overhead.
322
320
        """
 
321
        assert inv.root is not None
323
322
        self._inventory = inv
324
323
        self._inventory_is_modified = dirty
325
324
 
329
328
 
330
329
        """
331
330
        if path is None:
332
 
            path = osutils.getcwd()
 
331
            path = os.path.getcwdu()
333
332
        control = bzrdir.BzrDir.open(path, _unsupported)
334
333
        return control.open_workingtree(_unsupported)
335
 
 
 
334
        
336
335
    @staticmethod
337
336
    def open_containing(path=None):
338
337
        """Open an existing working tree which has its root about path.
339
 
 
 
338
        
340
339
        This probes for a working tree at path and searches upwards from there.
341
340
 
342
341
        Basically we keep looking up until we find the control directory or
371
370
                return True, None
372
371
            else:
373
372
                return True, tree
374
 
        t = transport.get_transport(location)
375
 
        iterator = bzrdir.BzrDir.find_bzrdirs(t, evaluate=evaluate,
 
373
        transport = get_transport(location)
 
374
        iterator = bzrdir.BzrDir.find_bzrdirs(transport, evaluate=evaluate,
376
375
                                              list_current=list_current)
377
 
        return [tr for tr in iterator if tr is not None]
 
376
        return [t for t in iterator if t is not None]
378
377
 
379
378
    # should be deprecated - this is slow and in any case treating them as a
380
379
    # container is (we now know) bad style -- mbp 20070302
403
402
 
404
403
    def basis_tree(self):
405
404
        """Return RevisionTree for the current last revision.
406
 
 
 
405
        
407
406
        If the left most parent is a ghost then the returned tree will be an
408
 
        empty tree - one obtained by calling
409
 
        repository.revision_tree(NULL_REVISION).
 
407
        empty tree - one obtained by calling repository.revision_tree(None).
410
408
        """
411
409
        try:
412
410
            revision_id = self.get_parent_ids()[0]
414
412
            # no parents, return an empty revision tree.
415
413
            # in the future this should return the tree for
416
414
            # 'empty:' - the implicit root empty tree.
417
 
            return self.branch.repository.revision_tree(
418
 
                       _mod_revision.NULL_REVISION)
 
415
            return self.branch.repository.revision_tree(None)
419
416
        try:
420
417
            return self.revision_tree(revision_id)
421
418
        except errors.NoSuchRevision:
425
422
        # at this point ?
426
423
        try:
427
424
            return self.branch.repository.revision_tree(revision_id)
428
 
        except (errors.RevisionNotPresent, errors.NoSuchRevision):
 
425
        except errors.RevisionNotPresent:
429
426
            # the basis tree *may* be a ghost or a low level error may have
430
 
            # occurred. If the revision is present, its a problem, if its not
 
427
            # occured. If the revision is present, its a problem, if its not
431
428
            # its a ghost.
432
429
            if self.branch.repository.has_revision(revision_id):
433
430
                raise
434
431
            # the basis tree is a ghost so return an empty tree.
435
 
            return self.branch.repository.revision_tree(
436
 
                       _mod_revision.NULL_REVISION)
 
432
            return self.branch.repository.revision_tree(None)
437
433
 
438
434
    def _cleanup(self):
439
435
        self._flush_ignore_list_cache()
440
436
 
 
437
    @staticmethod
 
438
    @deprecated_method(zero_eight)
 
439
    def create(branch, directory):
 
440
        """Create a workingtree for branch at directory.
 
441
 
 
442
        If existing_directory already exists it must have a .bzr directory.
 
443
        If it does not exist, it will be created.
 
444
 
 
445
        This returns a new WorkingTree object for the new checkout.
 
446
 
 
447
        TODO FIXME RBC 20060124 when we have checkout formats in place this
 
448
        should accept an optional revisionid to checkout [and reject this if
 
449
        checking out into the same dir as a pre-checkout-aware branch format.]
 
450
 
 
451
        XXX: When BzrDir is present, these should be created through that 
 
452
        interface instead.
 
453
        """
 
454
        warnings.warn('delete WorkingTree.create', stacklevel=3)
 
455
        transport = get_transport(directory)
 
456
        if branch.bzrdir.root_transport.base == transport.base:
 
457
            # same dir 
 
458
            return branch.bzrdir.create_workingtree()
 
459
        # different directory, 
 
460
        # create a branch reference
 
461
        # and now a working tree.
 
462
        raise NotImplementedError
 
463
 
 
464
    @staticmethod
 
465
    @deprecated_method(zero_eight)
 
466
    def create_standalone(directory):
 
467
        """Create a checkout and a branch and a repo at directory.
 
468
 
 
469
        Directory must exist and be empty.
 
470
 
 
471
        please use BzrDir.create_standalone_workingtree
 
472
        """
 
473
        return bzrdir.BzrDir.create_standalone_workingtree(directory)
 
474
 
441
475
    def relpath(self, path):
442
476
        """Return the local path portion from a given path.
443
 
 
444
 
        The path may be absolute or relative. If its a relative path it is
 
477
        
 
478
        The path may be absolute or relative. If its a relative path it is 
445
479
        interpreted relative to the python current working directory.
446
480
        """
447
481
        return osutils.relpath(self.basedir, path)
449
483
    def has_filename(self, filename):
450
484
        return osutils.lexists(self.abspath(filename))
451
485
 
452
 
    def get_file(self, file_id, path=None, filtered=True):
453
 
        return self.get_file_with_stat(file_id, path, filtered=filtered)[0]
454
 
 
455
 
    def get_file_with_stat(self, file_id, path=None, filtered=True,
456
 
        _fstat=os.fstat):
457
 
        """See Tree.get_file_with_stat."""
 
486
    def get_file(self, file_id, path=None):
458
487
        if path is None:
459
488
            path = self.id2path(file_id)
460
 
        file_obj = self.get_file_byname(path, filtered=False)
461
 
        stat_value = _fstat(file_obj.fileno())
462
 
        if filtered and self.supports_content_filtering():
463
 
            filters = self._content_filter_stack(path)
464
 
            file_obj = filtered_input_file(file_obj, filters)
465
 
        return (file_obj, stat_value)
466
 
 
467
 
    def get_file_text(self, file_id, path=None, filtered=True):
468
 
        my_file = self.get_file(file_id, path=path, filtered=filtered)
469
 
        try:
470
 
            return my_file.read()
471
 
        finally:
472
 
            my_file.close()
473
 
 
474
 
    def get_file_byname(self, filename, filtered=True):
475
 
        path = self.abspath(filename)
476
 
        f = file(path, 'rb')
477
 
        if filtered and self.supports_content_filtering():
478
 
            filters = self._content_filter_stack(filename)
479
 
            return filtered_input_file(f, filters)
480
 
        else:
481
 
            return f
482
 
 
483
 
    def get_file_lines(self, file_id, path=None, filtered=True):
484
 
        """See Tree.get_file_lines()"""
485
 
        file = self.get_file(file_id, path, filtered=filtered)
486
 
        try:
487
 
            return file.readlines()
488
 
        finally:
489
 
            file.close()
 
489
        return self.get_file_byname(path)
 
490
 
 
491
    def get_file_text(self, file_id):
 
492
        return self.get_file(file_id).read()
 
493
 
 
494
    def get_file_byname(self, filename):
 
495
        return file(self.abspath(filename), 'rb')
490
496
 
491
497
    @needs_read_lock
492
498
    def annotate_iter(self, file_id, default_revision=CURRENT_REVISION):
499
505
        incorrectly attributed to CURRENT_REVISION (but after committing, the
500
506
        attribution will be correct).
501
507
        """
502
 
        maybe_file_parent_keys = []
503
 
        for parent_id in self.get_parent_ids():
504
 
            try:
505
 
                parent_tree = self.revision_tree(parent_id)
506
 
            except errors.NoSuchRevisionInTree:
507
 
                parent_tree = self.branch.repository.revision_tree(parent_id)
508
 
            parent_tree.lock_read()
509
 
            try:
510
 
                if file_id not in parent_tree:
511
 
                    continue
512
 
                ie = parent_tree.inventory[file_id]
513
 
                if ie.kind != 'file':
514
 
                    # Note: this is slightly unnecessary, because symlinks and
515
 
                    # directories have a "text" which is the empty text, and we
516
 
                    # know that won't mess up annotations. But it seems cleaner
517
 
                    continue
518
 
                parent_text_key = (file_id, ie.revision)
519
 
                if parent_text_key not in maybe_file_parent_keys:
520
 
                    maybe_file_parent_keys.append(parent_text_key)
521
 
            finally:
522
 
                parent_tree.unlock()
523
 
        graph = _mod_graph.Graph(self.branch.repository.texts)
524
 
        heads = graph.heads(maybe_file_parent_keys)
525
 
        file_parent_keys = []
526
 
        for key in maybe_file_parent_keys:
527
 
            if key in heads:
528
 
                file_parent_keys.append(key)
529
 
 
530
 
        # Now we have the parents of this content
531
 
        annotator = self.branch.repository.texts.get_annotator()
532
 
        text = self.get_file_text(file_id)
533
 
        this_key =(file_id, default_revision)
534
 
        annotator.add_special_text(this_key, file_parent_keys, text)
535
 
        annotations = [(key[-1], line)
536
 
                       for key, line in annotator.annotate_flat(this_key)]
537
 
        return annotations
 
508
        basis = self.basis_tree()
 
509
        basis.lock_read()
 
510
        try:
 
511
            changes = self.iter_changes(basis, True, [self.id2path(file_id)],
 
512
                require_versioned=True).next()
 
513
            changed_content, kind = changes[2], changes[6]
 
514
            if not changed_content:
 
515
                return basis.annotate_iter(file_id)
 
516
            if kind[1] is None:
 
517
                return None
 
518
            import annotate
 
519
            if kind[0] != 'file':
 
520
                old_lines = []
 
521
            else:
 
522
                old_lines = list(basis.annotate_iter(file_id))
 
523
            old = [old_lines]
 
524
            for tree in self.branch.repository.revision_trees(
 
525
                self.get_parent_ids()[1:]):
 
526
                if file_id not in tree:
 
527
                    continue
 
528
                old.append(list(tree.annotate_iter(file_id)))
 
529
            return annotate.reannotate(old, self.get_file(file_id).readlines(),
 
530
                                       default_revision)
 
531
        finally:
 
532
            basis.unlock()
538
533
 
539
534
    def _get_ancestors(self, default_revision):
540
535
        ancestors = set([default_revision])
545
540
 
546
541
    def get_parent_ids(self):
547
542
        """See Tree.get_parent_ids.
548
 
 
 
543
        
549
544
        This implementation reads the pending merges list and last_revision
550
545
        value and uses that to decide what the parents list should be.
551
546
        """
555
550
        else:
556
551
            parents = [last_rev]
557
552
        try:
558
 
            merges_bytes = self._transport.get_bytes('pending-merges')
 
553
            merges_file = self._control_files.get('pending-merges')
559
554
        except errors.NoSuchFile:
560
555
            pass
561
556
        else:
562
 
            for l in osutils.split_lines(merges_bytes):
 
557
            for l in merges_file.readlines():
563
558
                revision_id = l.rstrip('\n')
564
559
                parents.append(revision_id)
565
560
        return parents
568
563
    def get_root_id(self):
569
564
        """Return the id of this trees root"""
570
565
        return self._inventory.root.file_id
571
 
 
 
566
        
572
567
    def _get_store_filename(self, file_id):
573
568
        ## XXX: badly named; this is not in the store at all
574
569
        return self.abspath(self.id2path(file_id))
576
571
    @needs_read_lock
577
572
    def clone(self, to_bzrdir, revision_id=None):
578
573
        """Duplicate this working tree into to_bzr, including all state.
579
 
 
 
574
        
580
575
        Specifically modified files are kept as modified, but
581
576
        ignored and unknown files are discarded.
582
577
 
583
578
        If you want to make a new line of development, see bzrdir.sprout()
584
579
 
585
580
        revision
586
 
            If not None, the cloned tree will have its last revision set to
587
 
            revision, and difference between the source trees last revision
 
581
            If not None, the cloned tree will have its last revision set to 
 
582
            revision, and and difference between the source trees last revision
588
583
            and this one merged in.
589
584
        """
590
585
        # assumes the target bzr dir format is compatible.
591
 
        result = to_bzrdir.create_workingtree()
 
586
        result = self._format.initialize(to_bzrdir)
592
587
        self.copy_content_into(result, revision_id)
593
588
        return result
594
589
 
624
619
 
625
620
    def get_file_size(self, file_id):
626
621
        """See Tree.get_file_size"""
627
 
        # XXX: this returns the on-disk size; it should probably return the
628
 
        # canonical size
629
622
        try:
630
623
            return os.path.getsize(self.id2abspath(file_id))
631
624
        except OSError, e:
647
640
 
648
641
    def _is_executable_from_path_and_stat_from_basis(self, path, stat_result):
649
642
        file_id = self.path2id(path)
650
 
        if file_id is None:
651
 
            # For unversioned files on win32, we just assume they are not
652
 
            # executable
653
 
            return False
654
643
        return self._inventory[file_id].executable
655
644
 
656
645
    def _is_executable_from_path_and_stat_from_stat(self, path, stat_result):
678
667
        """See MutableTree._add."""
679
668
        # TODO: Re-adding a file that is removed in the working copy
680
669
        # should probably put it back with the previous ID.
681
 
        # the read and write working inventory should not occur in this
 
670
        # the read and write working inventory should not occur in this 
682
671
        # function - they should be part of lock_write and unlock.
683
672
        inv = self.inventory
684
673
        for f, file_id, kind in zip(files, ids, kinds):
 
674
            assert kind is not None
685
675
            if file_id is None:
686
676
                inv.add_path(f, kind=kind)
687
677
            else:
766
756
            raise
767
757
        kind = _mapper(stat_result.st_mode)
768
758
        if kind == 'file':
769
 
            return self._file_content_summary(path, stat_result)
 
759
            size = stat_result.st_size
 
760
            # try for a stat cache lookup
 
761
            executable = self._is_executable_from_path_and_stat(path, stat_result)
 
762
            return (kind, size, executable, self._sha_from_stat(
 
763
                path, stat_result))
770
764
        elif kind == 'directory':
771
765
            # perhaps it looks like a plain directory, but it's really a
772
766
            # reference.
774
768
                kind = 'tree-reference'
775
769
            return kind, None, None, None
776
770
        elif kind == 'symlink':
777
 
            target = osutils.readlink(abspath)
778
 
            return ('symlink', None, None, target)
 
771
            return ('symlink', None, None, os.readlink(abspath))
779
772
        else:
780
773
            return (kind, None, None, None)
781
774
 
782
 
    def _file_content_summary(self, path, stat_result):
783
 
        size = stat_result.st_size
784
 
        executable = self._is_executable_from_path_and_stat(path, stat_result)
785
 
        # try for a stat cache lookup
786
 
        return ('file', size, executable, self._sha_from_stat(
787
 
            path, stat_result))
 
775
    @deprecated_method(zero_eleven)
 
776
    @needs_read_lock
 
777
    def pending_merges(self):
 
778
        """Return a list of pending merges.
 
779
 
 
780
        These are revisions that have been merged into the working
 
781
        directory but not yet committed.
 
782
 
 
783
        As of 0.11 this is deprecated. Please see WorkingTree.get_parent_ids()
 
784
        instead - which is available on all tree objects.
 
785
        """
 
786
        return self.get_parent_ids()[1:]
788
787
 
789
788
    def _check_parents_for_ghosts(self, revision_ids, allow_leftmost_as_ghost):
790
789
        """Common ghost checking functionality from set_parent_*.
800
799
 
801
800
    def _set_merges_from_parent_ids(self, parent_ids):
802
801
        merges = parent_ids[1:]
803
 
        self._transport.put_bytes('pending-merges', '\n'.join(merges),
804
 
            mode=self.bzrdir._get_file_mode())
805
 
 
806
 
    def _filter_parent_ids_by_ancestry(self, revision_ids):
807
 
        """Check that all merged revisions are proper 'heads'.
808
 
 
809
 
        This will always return the first revision_id, and any merged revisions
810
 
        which are
811
 
        """
812
 
        if len(revision_ids) == 0:
813
 
            return revision_ids
814
 
        graph = self.branch.repository.get_graph()
815
 
        heads = graph.heads(revision_ids)
816
 
        new_revision_ids = revision_ids[:1]
817
 
        for revision_id in revision_ids[1:]:
818
 
            if revision_id in heads and revision_id not in new_revision_ids:
819
 
                new_revision_ids.append(revision_id)
820
 
        if new_revision_ids != revision_ids:
821
 
            trace.mutter('requested to set revision_ids = %s,'
822
 
                         ' but filtered to %s', revision_ids, new_revision_ids)
823
 
        return new_revision_ids
 
802
        self._control_files.put_bytes('pending-merges', '\n'.join(merges))
824
803
 
825
804
    @needs_tree_write_lock
826
805
    def set_parent_ids(self, revision_ids, allow_leftmost_as_ghost=False):
827
806
        """Set the parent ids to revision_ids.
828
 
 
 
807
        
829
808
        See also set_parent_trees. This api will try to retrieve the tree data
830
809
        for each element of revision_ids from the trees repository. If you have
831
810
        tree data already available, it is more efficient to use
840
819
        for revision_id in revision_ids:
841
820
            _mod_revision.check_not_reserved_id(revision_id)
842
821
 
843
 
        revision_ids = self._filter_parent_ids_by_ancestry(revision_ids)
844
 
 
845
822
        if len(revision_ids) > 0:
846
823
            self.set_last_revision(revision_ids[0])
847
824
        else:
859
836
        self._check_parents_for_ghosts(parent_ids,
860
837
            allow_leftmost_as_ghost=allow_leftmost_as_ghost)
861
838
 
862
 
        parent_ids = self._filter_parent_ids_by_ancestry(parent_ids)
863
 
 
864
839
        if len(parent_ids) == 0:
865
840
            leftmost_parent_id = _mod_revision.NULL_REVISION
866
841
            leftmost_parent_tree = None
906
881
    def _put_rio(self, filename, stanzas, header):
907
882
        self._must_be_locked()
908
883
        my_file = rio_file(stanzas, header)
909
 
        self._transport.put_file(filename, my_file,
910
 
            mode=self.bzrdir._get_file_mode())
 
884
        self._control_files.put(filename, my_file)
911
885
 
912
886
    @needs_write_lock # because merge pulls data into the branch.
913
887
    def merge_from_branch(self, branch, to_revision=None, from_revision=None,
914
 
                          merge_type=None, force=False):
 
888
        merge_type=None):
915
889
        """Merge from a branch into this working tree.
916
890
 
917
891
        :param branch: The branch to merge from.
921
895
            branch.last_revision().
922
896
        """
923
897
        from bzrlib.merge import Merger, Merge3Merger
924
 
        merger = Merger(self.branch, this_tree=self)
925
 
        # check that there are no local alterations
926
 
        if not force and self.has_changes():
927
 
            raise errors.UncommittedChanges(self)
928
 
        if to_revision is None:
929
 
            to_revision = _mod_revision.ensure_null(branch.last_revision())
930
 
        merger.other_rev_id = to_revision
931
 
        if _mod_revision.is_null(merger.other_rev_id):
932
 
            raise errors.NoCommits(branch)
933
 
        self.branch.fetch(branch, last_revision=merger.other_rev_id)
934
 
        merger.other_basis = merger.other_rev_id
935
 
        merger.other_tree = self.branch.repository.revision_tree(
936
 
            merger.other_rev_id)
937
 
        merger.other_branch = branch
938
 
        if from_revision is None:
939
 
            merger.find_base()
940
 
        else:
941
 
            merger.set_base_revision(from_revision, branch)
942
 
        if merger.base_rev_id == merger.other_rev_id:
943
 
            raise errors.PointlessMerge
944
 
        merger.backup_files = False
945
 
        if merge_type is None:
946
 
            merger.merge_type = Merge3Merger
947
 
        else:
948
 
            merger.merge_type = merge_type
949
 
        merger.set_interesting_files(None)
950
 
        merger.show_base = False
951
 
        merger.reprocess = False
952
 
        conflicts = merger.do_merge()
953
 
        merger.set_pending()
 
898
        pb = bzrlib.ui.ui_factory.nested_progress_bar()
 
899
        try:
 
900
            merger = Merger(self.branch, this_tree=self, pb=pb)
 
901
            merger.pp = ProgressPhase("Merge phase", 5, pb)
 
902
            merger.pp.next_phase()
 
903
            # check that there are no
 
904
            # local alterations
 
905
            merger.check_basis(check_clean=True, require_commits=False)
 
906
            if to_revision is None:
 
907
                to_revision = _mod_revision.ensure_null(branch.last_revision())
 
908
            merger.other_rev_id = to_revision
 
909
            if _mod_revision.is_null(merger.other_rev_id):
 
910
                raise errors.NoCommits(branch)
 
911
            self.branch.fetch(branch, last_revision=merger.other_rev_id)
 
912
            merger.other_basis = merger.other_rev_id
 
913
            merger.other_tree = self.branch.repository.revision_tree(
 
914
                merger.other_rev_id)
 
915
            merger.other_branch = branch
 
916
            merger.pp.next_phase()
 
917
            if from_revision is None:
 
918
                merger.find_base()
 
919
            else:
 
920
                merger.set_base_revision(from_revision, branch)
 
921
            if merger.base_rev_id == merger.other_rev_id:
 
922
                raise errors.PointlessMerge
 
923
            merger.backup_files = False
 
924
            if merge_type is None:
 
925
                merger.merge_type = Merge3Merger
 
926
            else:
 
927
                merger.merge_type = merge_type
 
928
            merger.set_interesting_files(None)
 
929
            merger.show_base = False
 
930
            merger.reprocess = False
 
931
            conflicts = merger.do_merge()
 
932
            merger.set_pending()
 
933
        finally:
 
934
            pb.finished()
954
935
        return conflicts
955
936
 
956
937
    @needs_read_lock
957
938
    def merge_modified(self):
958
939
        """Return a dictionary of files modified by a merge.
959
940
 
960
 
        The list is initialized by WorkingTree.set_merge_modified, which is
 
941
        The list is initialized by WorkingTree.set_merge_modified, which is 
961
942
        typically called after we make some automatic updates to the tree
962
943
        because of a merge.
963
944
 
965
946
        still in the working inventory and have that text hash.
966
947
        """
967
948
        try:
968
 
            hashfile = self._transport.get('merge-hashes')
 
949
            hashfile = self._control_files.get('merge-hashes')
969
950
        except errors.NoSuchFile:
970
951
            return {}
 
952
        merge_hashes = {}
971
953
        try:
972
 
            merge_hashes = {}
973
 
            try:
974
 
                if hashfile.next() != MERGE_MODIFIED_HEADER_1 + '\n':
975
 
                    raise errors.MergeModifiedFormatError()
976
 
            except StopIteration:
 
954
            if hashfile.next() != MERGE_MODIFIED_HEADER_1 + '\n':
977
955
                raise errors.MergeModifiedFormatError()
978
 
            for s in RioReader(hashfile):
979
 
                # RioReader reads in Unicode, so convert file_ids back to utf8
980
 
                file_id = osutils.safe_file_id(s.get("file_id"), warn=False)
981
 
                if file_id not in self.inventory:
982
 
                    continue
983
 
                text_hash = s.get("hash")
984
 
                if text_hash == self.get_file_sha1(file_id):
985
 
                    merge_hashes[file_id] = text_hash
986
 
            return merge_hashes
987
 
        finally:
988
 
            hashfile.close()
 
956
        except StopIteration:
 
957
            raise errors.MergeModifiedFormatError()
 
958
        for s in RioReader(hashfile):
 
959
            # RioReader reads in Unicode, so convert file_ids back to utf8
 
960
            file_id = osutils.safe_file_id(s.get("file_id"), warn=False)
 
961
            if file_id not in self.inventory:
 
962
                continue
 
963
            text_hash = s.get("hash")
 
964
            if text_hash == self.get_file_sha1(file_id):
 
965
                merge_hashes[file_id] = text_hash
 
966
        return merge_hashes
989
967
 
990
968
    @needs_write_lock
991
969
    def mkdir(self, path, file_id=None):
997
975
        return file_id
998
976
 
999
977
    def get_symlink_target(self, file_id):
1000
 
        abspath = self.id2abspath(file_id)
1001
 
        target = osutils.readlink(abspath)
1002
 
        return target
 
978
        return os.readlink(self.id2abspath(file_id))
1003
979
 
1004
980
    @needs_write_lock
1005
981
    def subsume(self, other_tree):
1055
1031
        return False
1056
1032
 
1057
1033
    def _directory_may_be_tree_reference(self, relpath):
1058
 
        # as a special case, if a directory contains control files then
 
1034
        # as a special case, if a directory contains control files then 
1059
1035
        # it's a tree reference, except that the root of the tree is not
1060
1036
        return relpath and osutils.isdir(self.abspath(relpath) + u"/.bzr")
1061
1037
        # TODO: We could ask all the control formats whether they
1072
1048
    @needs_tree_write_lock
1073
1049
    def extract(self, file_id, format=None):
1074
1050
        """Extract a subtree from this tree.
1075
 
 
 
1051
        
1076
1052
        A new branch will be created, relative to the path for this tree.
1077
1053
        """
1078
1054
        self.flush()
1083
1059
                transport = transport.clone(name)
1084
1060
                transport.ensure_base()
1085
1061
            return transport
1086
 
 
 
1062
            
1087
1063
        sub_path = self.id2path(file_id)
1088
1064
        branch_transport = mkdirs(sub_path)
1089
1065
        if format is None:
1103
1079
        tree_transport = self.bzrdir.root_transport.clone(sub_path)
1104
1080
        if tree_transport.base != branch_transport.base:
1105
1081
            tree_bzrdir = format.initialize_on_transport(tree_transport)
1106
 
            branch.BranchReferenceFormat().initialize(tree_bzrdir,
1107
 
                target_branch=new_branch)
 
1082
            branch.BranchReferenceFormat().initialize(tree_bzrdir, new_branch)
1108
1083
        else:
1109
1084
            tree_bzrdir = branch_bzrdir
1110
 
        wt = tree_bzrdir.create_workingtree(_mod_revision.NULL_REVISION)
 
1085
        wt = tree_bzrdir.create_workingtree(NULL_REVISION)
1111
1086
        wt.set_parent_ids(self.get_parent_ids())
1112
1087
        my_inv = self.inventory
1113
 
        child_inv = inventory.Inventory(root_id=None)
 
1088
        child_inv = Inventory(root_id=None)
1114
1089
        new_root = my_inv[file_id]
1115
1090
        my_inv.remove_recursive_id(file_id)
1116
1091
        new_root.parent_id = None
1134
1109
        sio = StringIO()
1135
1110
        self._serialize(self._inventory, sio)
1136
1111
        sio.seek(0)
1137
 
        self._transport.put_file('inventory', sio,
1138
 
            mode=self.bzrdir._get_file_mode())
 
1112
        self._control_files.put('inventory', sio)
1139
1113
        self._inventory_is_modified = False
1140
1114
 
1141
1115
    def _kind(self, relpath):
1142
1116
        return osutils.file_kind(self.abspath(relpath))
1143
1117
 
1144
 
    def list_files(self, include_root=False, from_dir=None, recursive=True):
1145
 
        """List all files as (path, class, kind, id, entry).
 
1118
    def list_files(self, include_root=False):
 
1119
        """Recursively list all files as (path, class, kind, id, entry).
1146
1120
 
1147
1121
        Lists, but does not descend into unversioned directories.
 
1122
 
1148
1123
        This does not include files that have been deleted in this
1149
 
        tree. Skips the control directory.
 
1124
        tree.
1150
1125
 
1151
 
        :param include_root: if True, return an entry for the root
1152
 
        :param from_dir: start from this directory or None for the root
1153
 
        :param recursive: whether to recurse into subdirectories or not
 
1126
        Skips the control directory.
1154
1127
        """
1155
1128
        # list_files is an iterator, so @needs_read_lock doesn't work properly
1156
1129
        # with it. So callers should be careful to always read_lock the tree.
1158
1131
            raise errors.ObjectNotLocked(self)
1159
1132
 
1160
1133
        inv = self.inventory
1161
 
        if from_dir is None and include_root is True:
 
1134
        if include_root is True:
1162
1135
            yield ('', 'V', 'directory', inv.root.file_id, inv.root)
1163
1136
        # Convert these into local objects to save lookup times
1164
1137
        pathjoin = osutils.pathjoin
1171
1144
        fk_entries = {'directory':TreeDirectory, 'file':TreeFile, 'symlink':TreeLink}
1172
1145
 
1173
1146
        # directory file_id, relative path, absolute path, reverse sorted children
1174
 
        if from_dir is not None:
1175
 
            from_dir_id = inv.path2id(from_dir)
1176
 
            if from_dir_id is None:
1177
 
                # Directory not versioned
1178
 
                return
1179
 
            from_dir_abspath = pathjoin(self.basedir, from_dir)
1180
 
        else:
1181
 
            from_dir_id = inv.root.file_id
1182
 
            from_dir_abspath = self.basedir
1183
 
        children = os.listdir(from_dir_abspath)
 
1147
        children = os.listdir(self.basedir)
1184
1148
        children.sort()
1185
 
        # jam 20060527 The kernel sized tree seems equivalent whether we
 
1149
        # jam 20060527 The kernel sized tree seems equivalent whether we 
1186
1150
        # use a deque and popleft to keep them sorted, or if we use a plain
1187
1151
        # list and just reverse() them.
1188
1152
        children = collections.deque(children)
1189
 
        stack = [(from_dir_id, u'', from_dir_abspath, children)]
 
1153
        stack = [(inv.root.file_id, u'', self.basedir, children)]
1190
1154
        while stack:
1191
1155
            from_dir_id, from_dir_relpath, from_dir_abspath, children = stack[-1]
1192
1156
 
1208
1172
 
1209
1173
                # absolute path
1210
1174
                fap = from_dir_abspath + '/' + f
1211
 
 
 
1175
                
1212
1176
                f_ie = inv.get_child(from_dir_id, f)
1213
1177
                if f_ie:
1214
1178
                    c = 'V'
1246
1210
                    except KeyError:
1247
1211
                        yield fp[1:], c, fk, None, TreeEntry()
1248
1212
                    continue
1249
 
 
 
1213
                
1250
1214
                if fk != 'directory':
1251
1215
                    continue
1252
1216
 
1253
 
                # But do this child first if recursing down
1254
 
                if recursive:
1255
 
                    new_children = os.listdir(fap)
1256
 
                    new_children.sort()
1257
 
                    new_children = collections.deque(new_children)
1258
 
                    stack.append((f_ie.file_id, fp, fap, new_children))
1259
 
                    # Break out of inner loop,
1260
 
                    # so that we start outer loop with child
1261
 
                    break
 
1217
                # But do this child first
 
1218
                new_children = os.listdir(fap)
 
1219
                new_children.sort()
 
1220
                new_children = collections.deque(new_children)
 
1221
                stack.append((f_ie.file_id, fp, fap, new_children))
 
1222
                # Break out of inner loop,
 
1223
                # so that we start outer loop with child
 
1224
                break
1262
1225
            else:
1263
1226
                # if we finished all children, pop it off the stack
1264
1227
                stack.pop()
1270
1233
        to_dir must exist in the inventory.
1271
1234
 
1272
1235
        If to_dir exists and is a directory, the files are moved into
1273
 
        it, keeping their old names.
 
1236
        it, keeping their old names.  
1274
1237
 
1275
1238
        Note that to_dir is only the last component of the new name;
1276
1239
        this doesn't change the directory.
1313
1276
                                       DeprecationWarning)
1314
1277
 
1315
1278
        # check destination directory
1316
 
        if isinstance(from_paths, basestring):
1317
 
            raise ValueError()
 
1279
        assert not isinstance(from_paths, basestring)
1318
1280
        inv = self.inventory
1319
1281
        to_abs = self.abspath(to_dir)
1320
1282
        if not isdir(to_abs):
1404
1366
                only_change_inv = True
1405
1367
            elif self.has_filename(from_rel) and not self.has_filename(to_rel):
1406
1368
                only_change_inv = False
1407
 
            elif (not self.case_sensitive
1408
 
                  and from_rel.lower() == to_rel.lower()
1409
 
                  and self.has_filename(from_rel)):
 
1369
            elif (sys.platform == 'win32'
 
1370
                and from_rel.lower() == to_rel.lower()
 
1371
                and self.has_filename(from_rel)):
1410
1372
                only_change_inv = False
1411
1373
            else:
1412
1374
                # something is wrong, so lets determine what exactly
1442
1404
        inv = self.inventory
1443
1405
        for entry in moved:
1444
1406
            try:
1445
 
                self._move_entry(WorkingTree._RenameEntry(
1446
 
                    entry.to_rel, entry.from_id,
 
1407
                self._move_entry(_RenameEntry(entry.to_rel, entry.from_id,
1447
1408
                    entry.to_tail, entry.to_parent_id, entry.from_rel,
1448
1409
                    entry.from_tail, entry.from_parent_id,
1449
1410
                    entry.only_change_inv))
1500
1461
        from_tail = splitpath(from_rel)[-1]
1501
1462
        from_id = inv.path2id(from_rel)
1502
1463
        if from_id is None:
1503
 
            # if file is missing in the inventory maybe it's in the basis_tree
1504
 
            basis_tree = self.branch.basis_tree()
1505
 
            from_id = basis_tree.path2id(from_rel)
1506
 
            if from_id is None:
1507
 
                raise errors.BzrRenameFailedError(from_rel,to_rel,
1508
 
                    errors.NotVersionedError(path=str(from_rel)))
1509
 
            # put entry back in the inventory so we can rename it
1510
 
            from_entry = basis_tree.inventory[from_id].copy()
1511
 
            inv.add(from_entry)
1512
 
        else:
1513
 
            from_entry = inv[from_id]
 
1464
            raise errors.BzrRenameFailedError(from_rel,to_rel,
 
1465
                errors.NotVersionedError(path=str(from_rel)))
 
1466
        from_entry = inv[from_id]
1514
1467
        from_parent_id = from_entry.parent_id
1515
1468
        to_dir, to_tail = os.path.split(to_rel)
1516
1469
        to_dir_id = inv.path2id(to_dir)
1562
1515
        These are files in the working directory that are not versioned or
1563
1516
        control files or ignored.
1564
1517
        """
1565
 
        # force the extras method to be fully executed before returning, to
 
1518
        # force the extras method to be fully executed before returning, to 
1566
1519
        # prevent race conditions with the lock
1567
1520
        return iter(
1568
1521
            [subp for subp in self.extras() if not self.is_ignored(subp)])
1578
1531
        :raises: NoSuchId if any fileid is not currently versioned.
1579
1532
        """
1580
1533
        for file_id in file_ids:
1581
 
            if file_id not in self._inventory:
1582
 
                raise errors.NoSuchId(self, file_id)
1583
 
        for file_id in file_ids:
1584
1534
            if self._inventory.has_id(file_id):
1585
1535
                self._inventory.remove_recursive_id(file_id)
 
1536
            else:
 
1537
                raise errors.NoSuchId(self, file_id)
1586
1538
        if len(file_ids):
1587
 
            # in the future this should just set a dirty bit to wait for the
 
1539
            # in the future this should just set a dirty bit to wait for the 
1588
1540
            # final unlock. However, until all methods of workingtree start
1589
 
            # with the current in -memory inventory rather than triggering
 
1541
            # with the current in -memory inventory rather than triggering 
1590
1542
            # a read, it is more complex - we need to teach read_inventory
1591
1543
            # to know when to read, and when to not read first... and possibly
1592
1544
            # to save first when the in memory one may be corrupted.
1593
1545
            # so for now, we just only write it if it is indeed dirty.
1594
1546
            # - RBC 20060907
1595
1547
            self._write_inventory(self._inventory)
 
1548
    
 
1549
    @deprecated_method(zero_eight)
 
1550
    def iter_conflicts(self):
 
1551
        """List all files in the tree that have text or content conflicts.
 
1552
        DEPRECATED.  Use conflicts instead."""
 
1553
        return self._iter_conflicts()
1596
1554
 
1597
1555
    def _iter_conflicts(self):
1598
1556
        conflicted = set()
1607
1565
 
1608
1566
    @needs_write_lock
1609
1567
    def pull(self, source, overwrite=False, stop_revision=None,
1610
 
             change_reporter=None, possible_transports=None, local=False):
 
1568
             change_reporter=None, possible_transports=None):
 
1569
        top_pb = bzrlib.ui.ui_factory.nested_progress_bar()
1611
1570
        source.lock_read()
1612
1571
        try:
 
1572
            pp = ProgressPhase("Pull phase", 2, top_pb)
 
1573
            pp.next_phase()
1613
1574
            old_revision_info = self.branch.last_revision_info()
1614
1575
            basis_tree = self.basis_tree()
1615
1576
            count = self.branch.pull(source, overwrite, stop_revision,
1616
 
                                     possible_transports=possible_transports,
1617
 
                                     local=local)
 
1577
                                     possible_transports=possible_transports)
1618
1578
            new_revision_info = self.branch.last_revision_info()
1619
1579
            if new_revision_info != old_revision_info:
 
1580
                pp.next_phase()
1620
1581
                repository = self.branch.repository
 
1582
                pb = bzrlib.ui.ui_factory.nested_progress_bar()
1621
1583
                basis_tree.lock_read()
1622
1584
                try:
1623
1585
                    new_basis_tree = self.branch.basis_tree()
1626
1588
                                new_basis_tree,
1627
1589
                                basis_tree,
1628
1590
                                this_tree=self,
1629
 
                                pb=None,
 
1591
                                pb=pb,
1630
1592
                                change_reporter=change_reporter)
1631
 
                    basis_root_id = basis_tree.get_root_id()
1632
 
                    new_root_id = new_basis_tree.get_root_id()
1633
 
                    if basis_root_id != new_root_id:
1634
 
                        self.set_root_id(new_root_id)
 
1593
                    if (basis_tree.inventory.root is None and
 
1594
                        new_basis_tree.inventory.root is not None):
 
1595
                        self.set_root_id(new_basis_tree.get_root_id())
1635
1596
                finally:
 
1597
                    pb.finished()
1636
1598
                    basis_tree.unlock()
1637
1599
                # TODO - dedup parents list with things merged by pull ?
1638
1600
                # reuse the revisiontree we merged against to set the new
1639
1601
                # tree data.
1640
1602
                parent_trees = [(self.branch.last_revision(), new_basis_tree)]
1641
 
                # we have to pull the merge trees out again, because
1642
 
                # merge_inner has set the ids. - this corner is not yet
 
1603
                # we have to pull the merge trees out again, because 
 
1604
                # merge_inner has set the ids. - this corner is not yet 
1643
1605
                # layered well enough to prevent double handling.
1644
1606
                # XXX TODO: Fix the double handling: telling the tree about
1645
1607
                # the already known parent data is wasteful.
1651
1613
            return count
1652
1614
        finally:
1653
1615
            source.unlock()
 
1616
            top_pb.finished()
1654
1617
 
1655
1618
    @needs_write_lock
1656
1619
    def put_file_bytes_non_atomic(self, file_id, bytes):
1682
1645
 
1683
1646
            fl = []
1684
1647
            for subf in os.listdir(dirabs):
1685
 
                if self.bzrdir.is_control_filename(subf):
 
1648
                if subf == '.bzr':
1686
1649
                    continue
1687
1650
                if subf not in dir_entry.children:
1688
 
                    try:
1689
 
                        (subf_norm,
1690
 
                         can_access) = osutils.normalized_filename(subf)
1691
 
                    except UnicodeDecodeError:
1692
 
                        path_os_enc = path.encode(osutils._fs_enc)
1693
 
                        relpath = path_os_enc + '/' + subf
1694
 
                        raise errors.BadFilenameEncoding(relpath,
1695
 
                                                         osutils._fs_enc)
 
1651
                    subf_norm, can_access = osutils.normalized_filename(subf)
1696
1652
                    if subf_norm != subf and can_access:
1697
1653
                        if subf_norm not in dir_entry.children:
1698
1654
                            fl.append(subf_norm)
1699
1655
                    else:
1700
1656
                        fl.append(subf)
1701
 
 
 
1657
            
1702
1658
            fl.sort()
1703
1659
            for subf in fl:
1704
1660
                subp = pathjoin(path, subf)
1741
1697
        r"""Check whether the filename matches an ignore pattern.
1742
1698
 
1743
1699
        Patterns containing '/' or '\' need to match the whole path;
1744
 
        others match against only the last component.  Patterns starting
1745
 
        with '!' are ignore exceptions.  Exceptions take precedence
1746
 
        over regular patterns and cause the filename to not be ignored.
 
1700
        others match against only the last component.
1747
1701
 
1748
1702
        If the file is ignored, returns the pattern which caused it to
1749
1703
        be ignored, otherwise None.  So this can simply be used as a
1750
1704
        boolean if desired."""
1751
1705
        if getattr(self, '_ignoreglobster', None) is None:
1752
 
            self._ignoreglobster = globbing.ExceptionGlobster(self.get_ignore_list())
 
1706
            self._ignoreglobster = globbing.Globster(self.get_ignore_list())
1753
1707
        return self._ignoreglobster.match(filename)
1754
1708
 
1755
1709
    def kind(self, file_id):
1805
1759
            raise errors.ObjectNotLocked(self)
1806
1760
 
1807
1761
    def lock_read(self):
1808
 
        """Lock the tree for reading.
1809
 
 
1810
 
        This also locks the branch, and can be unlocked via self.unlock().
1811
 
 
1812
 
        :return: A bzrlib.lock.LogicalLockResult.
1813
 
        """
 
1762
        """See Branch.lock_read, and WorkingTree.unlock."""
1814
1763
        if not self.is_locked():
1815
1764
            self._reset_data()
1816
1765
        self.branch.lock_read()
1817
1766
        try:
1818
 
            self._control_files.lock_read()
1819
 
            return LogicalLockResult(self.unlock)
 
1767
            return self._control_files.lock_read()
1820
1768
        except:
1821
1769
            self.branch.unlock()
1822
1770
            raise
1823
1771
 
1824
1772
    def lock_tree_write(self):
1825
 
        """See MutableTree.lock_tree_write, and WorkingTree.unlock.
1826
 
 
1827
 
        :return: A bzrlib.lock.LogicalLockResult.
1828
 
        """
 
1773
        """See MutableTree.lock_tree_write, and WorkingTree.unlock."""
1829
1774
        if not self.is_locked():
1830
1775
            self._reset_data()
1831
1776
        self.branch.lock_read()
1832
1777
        try:
1833
 
            self._control_files.lock_write()
1834
 
            return LogicalLockResult(self.unlock)
 
1778
            return self._control_files.lock_write()
1835
1779
        except:
1836
1780
            self.branch.unlock()
1837
1781
            raise
1838
1782
 
1839
1783
    def lock_write(self):
1840
 
        """See MutableTree.lock_write, and WorkingTree.unlock.
1841
 
 
1842
 
        :return: A bzrlib.lock.LogicalLockResult.
1843
 
        """
 
1784
        """See MutableTree.lock_write, and WorkingTree.unlock."""
1844
1785
        if not self.is_locked():
1845
1786
            self._reset_data()
1846
1787
        self.branch.lock_write()
1847
1788
        try:
1848
 
            self._control_files.lock_write()
1849
 
            return LogicalLockResult(self.unlock)
 
1789
            return self._control_files.lock_write()
1850
1790
        except:
1851
1791
            self.branch.unlock()
1852
1792
            raise
1860
1800
    def _reset_data(self):
1861
1801
        """Reset transient data that cannot be revalidated."""
1862
1802
        self._inventory_is_modified = False
1863
 
        f = self._transport.get('inventory')
1864
 
        try:
1865
 
            result = self._deserialize(f)
1866
 
        finally:
1867
 
            f.close()
 
1803
        result = self._deserialize(self._control_files.get('inventory'))
1868
1804
        self._set_inventory(result, dirty=False)
1869
1805
 
1870
1806
    @needs_tree_write_lock
1875
1811
 
1876
1812
    def _change_last_revision(self, new_revision):
1877
1813
        """Template method part of set_last_revision to perform the change.
1878
 
 
 
1814
        
1879
1815
        This is used to allow WorkingTree3 instances to not affect branch
1880
1816
        when their last revision is set.
1881
1817
        """
1891
1827
 
1892
1828
    def _write_basis_inventory(self, xml):
1893
1829
        """Write the basis inventory XML to the basis-inventory file"""
 
1830
        assert isinstance(xml, str), 'serialised xml must be bytestring.'
1894
1831
        path = self._basis_inventory_name()
1895
1832
        sio = StringIO(xml)
1896
 
        self._transport.put_file(path, sio,
1897
 
            mode=self.bzrdir._get_file_mode())
 
1833
        self._control_files.put(path, sio)
1898
1834
 
1899
1835
    def _create_basis_xml_from_inventory(self, revision_id, inventory):
1900
1836
        """Create the text that will be saved in basis-inventory"""
1907
1843
        # as commit already has that ready-to-use [while the format is the
1908
1844
        # same, that is].
1909
1845
        try:
1910
 
            # this double handles the inventory - unpack and repack -
 
1846
            # this double handles the inventory - unpack and repack - 
1911
1847
            # but is easier to understand. We can/should put a conditional
1912
1848
            # in here based on whether the inventory is in the latest format
1913
1849
            # - perhaps we should repack all inventories on a repository
1914
1850
            # upgrade ?
1915
1851
            # the fast path is to copy the raw xml from the repository. If the
1916
 
            # xml contains 'revision_id="', then we assume the right
 
1852
            # xml contains 'revision_id="', then we assume the right 
1917
1853
            # revision_id is set. We must check for this full string, because a
1918
1854
            # root node id can legitimately look like 'revision_id' but cannot
1919
1855
            # contain a '"'.
1920
 
            xml = self.branch.repository._get_inventory_xml(new_revision)
 
1856
            xml = self.branch.repository.get_inventory_xml(new_revision)
1921
1857
            firstline = xml.split('\n', 1)[0]
1922
 
            if (not 'revision_id="' in firstline or
 
1858
            if (not 'revision_id="' in firstline or 
1923
1859
                'format="7"' not in firstline):
1924
 
                inv = self.branch.repository._serializer.read_inventory_from_string(
1925
 
                    xml, new_revision)
 
1860
                inv = self.branch.repository.deserialise_inventory(
 
1861
                    new_revision, xml)
1926
1862
                xml = self._create_basis_xml_from_inventory(new_revision, inv)
1927
1863
            self._write_basis_inventory(xml)
1928
1864
        except (errors.NoSuchRevision, errors.RevisionNotPresent):
1931
1867
    def read_basis_inventory(self):
1932
1868
        """Read the cached basis inventory."""
1933
1869
        path = self._basis_inventory_name()
1934
 
        return self._transport.get_bytes(path)
1935
 
 
 
1870
        return self._control_files.get(path).read()
 
1871
        
1936
1872
    @needs_read_lock
1937
1873
    def read_working_inventory(self):
1938
1874
        """Read the working inventory.
1939
 
 
 
1875
        
1940
1876
        :raises errors.InventoryModified: read_working_inventory will fail
1941
1877
            when the current in memory inventory has been modified.
1942
1878
        """
1943
 
        # conceptually this should be an implementation detail of the tree.
 
1879
        # conceptually this should be an implementation detail of the tree. 
1944
1880
        # XXX: Deprecate this.
1945
1881
        # ElementTree does its own conversion from UTF-8, so open in
1946
1882
        # binary.
1947
1883
        if self._inventory_is_modified:
1948
1884
            raise errors.InventoryModified(self)
1949
 
        f = self._transport.get('inventory')
1950
 
        try:
1951
 
            result = self._deserialize(f)
1952
 
        finally:
1953
 
            f.close()
 
1885
        result = self._deserialize(self._control_files.get('inventory'))
1954
1886
        self._set_inventory(result, dirty=False)
1955
1887
        return result
1956
1888
 
1971
1903
 
1972
1904
        new_files=set()
1973
1905
        unknown_nested_files=set()
1974
 
        if to_file is None:
1975
 
            to_file = sys.stdout
1976
1906
 
1977
1907
        def recurse_directory_to_add_files(directory):
1978
1908
            # Recurse directory and add all files
1979
1909
            # so we can check if they have changed.
1980
 
            for parent_info, file_infos in self.walkdirs(directory):
1981
 
                for relpath, basename, kind, lstat, fileid, kind in file_infos:
 
1910
            for parent_info, file_infos in\
 
1911
                osutils.walkdirs(self.abspath(directory),
 
1912
                    directory):
 
1913
                for relpath, basename, kind, lstat, abspath in file_infos:
1982
1914
                    # Is it versioned or ignored?
1983
1915
                    if self.path2id(relpath) or self.is_ignored(relpath):
1984
1916
                        # Add nested content for deletion.
1994
1926
            filename = self.relpath(abspath)
1995
1927
            if len(filename) > 0:
1996
1928
                new_files.add(filename)
1997
 
                recurse_directory_to_add_files(filename)
 
1929
                if osutils.isdir(abspath):
 
1930
                    recurse_directory_to_add_files(filename)
1998
1931
 
1999
1932
        files = list(new_files)
2000
1933
 
2018
1951
                            # ... but not ignored
2019
1952
                            has_changed_files = True
2020
1953
                            break
2021
 
                    elif (content_change and (kind[1] is not None) and
2022
 
                            osutils.is_inside_any(files, path[1])):
2023
 
                        # Versioned and changed, but not deleted, and still
2024
 
                        # in one of the dirs to be deleted.
 
1954
                    elif content_change and (kind[1] != None):
 
1955
                        # Versioned and changed, but not deleted
2025
1956
                        has_changed_files = True
2026
1957
                        break
2027
1958
 
2035
1966
                        tree_delta.unversioned.extend((unknown_file,))
2036
1967
                raise errors.BzrRemoveChangedFilesError(tree_delta)
2037
1968
 
2038
 
        # Build inv_delta and delete files where applicable,
 
1969
        # Build inv_delta and delete files where applicaple,
2039
1970
        # do this before any modifications to inventory.
2040
1971
        for f in files:
2041
1972
            fid = self.path2id(f)
2049
1980
                        new_status = 'I'
2050
1981
                    else:
2051
1982
                        new_status = '?'
2052
 
                    # XXX: Really should be a more abstract reporter interface
2053
 
                    kind_ch = osutils.kind_marker(self.kind(fid))
2054
 
                    to_file.write(new_status + '       ' + f + kind_ch + '\n')
 
1983
                    textui.show_status(new_status, self.kind(fid), f,
 
1984
                                       to_file=to_file)
2055
1985
                # Unversion file
2056
1986
                inv_delta.append((f, None, fid, None))
2057
1987
                message = "removed %s" % (f,)
2080
2010
 
2081
2011
    @needs_tree_write_lock
2082
2012
    def revert(self, filenames=None, old_tree=None, backups=True,
2083
 
               pb=None, report_changes=False):
 
2013
               pb=DummyProgress(), report_changes=False):
2084
2014
        from bzrlib.conflicts import resolve
2085
2015
        if filenames == []:
2086
2016
            filenames = None
2099
2029
            if filenames is None and len(self.get_parent_ids()) > 1:
2100
2030
                parent_trees = []
2101
2031
                last_revision = self.last_revision()
2102
 
                if last_revision != _mod_revision.NULL_REVISION:
 
2032
                if last_revision != NULL_REVISION:
2103
2033
                    if basis_tree is None:
2104
2034
                        basis_tree = self.basis_tree()
2105
2035
                        basis_tree.lock_read()
2143
2073
    def set_inventory(self, new_inventory_list):
2144
2074
        from bzrlib.inventory import (Inventory,
2145
2075
                                      InventoryDirectory,
 
2076
                                      InventoryEntry,
2146
2077
                                      InventoryFile,
2147
2078
                                      InventoryLink)
2148
2079
        inv = Inventory(self.get_root_id())
2150
2081
            name = os.path.basename(path)
2151
2082
            if name == "":
2152
2083
                continue
2153
 
            # fixme, there should be a factory function inv,add_??
 
2084
            # fixme, there should be a factory function inv,add_?? 
2154
2085
            if kind == 'directory':
2155
2086
                inv.add(InventoryDirectory(file_id, name, parent))
2156
2087
            elif kind == 'file':
2164
2095
    @needs_tree_write_lock
2165
2096
    def set_root_id(self, file_id):
2166
2097
        """Set the root id for this tree."""
2167
 
        # for compatability
 
2098
        # for compatability 
2168
2099
        if file_id is None:
2169
 
            raise ValueError(
2170
 
                'WorkingTree.set_root_id with fileid=None')
2171
 
        file_id = osutils.safe_file_id(file_id)
 
2100
            symbol_versioning.warn(symbol_versioning.zero_twelve
 
2101
                % 'WorkingTree.set_root_id with fileid=None',
 
2102
                DeprecationWarning,
 
2103
                stacklevel=3)
 
2104
            file_id = ROOT_ID
 
2105
        else:
 
2106
            file_id = osutils.safe_file_id(file_id)
2172
2107
        self._set_root_id(file_id)
2173
2108
 
2174
2109
    def _set_root_id(self, file_id):
2175
2110
        """Set the root id for this tree, in a format specific manner.
2176
2111
 
2177
 
        :param file_id: The file id to assign to the root. It must not be
 
2112
        :param file_id: The file id to assign to the root. It must not be 
2178
2113
            present in the current inventory or an error will occur. It must
2179
2114
            not be None, but rather a valid file id.
2180
2115
        """
2199
2134
 
2200
2135
    def unlock(self):
2201
2136
        """See Branch.unlock.
2202
 
 
 
2137
        
2203
2138
        WorkingTree locking just uses the Branch locking facilities.
2204
2139
        This is current because all working trees have an embedded branch
2205
2140
        within them. IF in the future, we were to make branch data shareable
2206
 
        between multiple working trees, i.e. via shared storage, then we
 
2141
        between multiple working trees, i.e. via shared storage, then we 
2207
2142
        would probably want to lock both the local tree, and the branch.
2208
2143
        """
2209
2144
        raise NotImplementedError(self.unlock)
2210
2145
 
2211
 
    _marker = object()
2212
 
 
2213
 
    def update(self, change_reporter=None, possible_transports=None,
2214
 
               revision=None, old_tip=_marker):
 
2146
    def update(self, change_reporter=None, possible_transports=None):
2215
2147
        """Update a working tree along its branch.
2216
2148
 
2217
2149
        This will update the branch if its bound too, which means we have
2235
2167
        - Merge current state -> basis tree of the master w.r.t. the old tree
2236
2168
          basis.
2237
2169
        - Do a 'normal' merge of the old branch basis if it is relevant.
2238
 
 
2239
 
        :param revision: The target revision to update to. Must be in the
2240
 
            revision history.
2241
 
        :param old_tip: If branch.update() has already been run, the value it
2242
 
            returned (old tip of the branch or None). _marker is used
2243
 
            otherwise.
2244
2170
        """
2245
2171
        if self.branch.get_bound_location() is not None:
2246
2172
            self.lock_write()
2247
 
            update_branch = (old_tip is self._marker)
 
2173
            update_branch = True
2248
2174
        else:
2249
2175
            self.lock_tree_write()
2250
2176
            update_branch = False
2252
2178
            if update_branch:
2253
2179
                old_tip = self.branch.update(possible_transports)
2254
2180
            else:
2255
 
                if old_tip is self._marker:
2256
 
                    old_tip = None
2257
 
            return self._update_tree(old_tip, change_reporter, revision)
 
2181
                old_tip = None
 
2182
            return self._update_tree(old_tip, change_reporter)
2258
2183
        finally:
2259
2184
            self.unlock()
2260
2185
 
2261
2186
    @needs_tree_write_lock
2262
 
    def _update_tree(self, old_tip=None, change_reporter=None, revision=None):
 
2187
    def _update_tree(self, old_tip=None, change_reporter=None):
2263
2188
        """Update a tree to the master branch.
2264
2189
 
2265
2190
        :param old_tip: if supplied, the previous tip revision the branch,
2271
2196
        # cant set that until we update the working trees last revision to be
2272
2197
        # one from the new branch, because it will just get absorbed by the
2273
2198
        # parent de-duplication logic.
2274
 
        #
 
2199
        # 
2275
2200
        # We MUST save it even if an error occurs, because otherwise the users
2276
2201
        # local work is unreferenced and will appear to have been lost.
2277
 
        #
2278
 
        nb_conflicts = 0
 
2202
        # 
 
2203
        result = 0
2279
2204
        try:
2280
2205
            last_rev = self.get_parent_ids()[0]
2281
2206
        except IndexError:
2282
2207
            last_rev = _mod_revision.NULL_REVISION
2283
 
        if revision is None:
2284
 
            revision = self.branch.last_revision()
2285
 
 
2286
 
        old_tip = old_tip or _mod_revision.NULL_REVISION
2287
 
 
2288
 
        if not _mod_revision.is_null(old_tip) and old_tip != last_rev:
2289
 
            # the branch we are bound to was updated
2290
 
            # merge those changes in first
2291
 
            base_tree  = self.basis_tree()
2292
 
            other_tree = self.branch.repository.revision_tree(old_tip)
2293
 
            nb_conflicts = merge.merge_inner(self.branch, other_tree,
2294
 
                                             base_tree, this_tree=self,
2295
 
                                             change_reporter=change_reporter)
2296
 
            if nb_conflicts:
2297
 
                self.add_parent_tree((old_tip, other_tree))
2298
 
                trace.note('Rerun update after fixing the conflicts.')
2299
 
                return nb_conflicts
2300
 
 
2301
 
        if last_rev != _mod_revision.ensure_null(revision):
2302
 
            # the working tree is up to date with the branch
2303
 
            # we can merge the specified revision from master
2304
 
            to_tree = self.branch.repository.revision_tree(revision)
2305
 
            to_root_id = to_tree.get_root_id()
2306
 
 
 
2208
        if last_rev != _mod_revision.ensure_null(self.branch.last_revision()):
 
2209
            # merge tree state up to new branch tip.
2307
2210
            basis = self.basis_tree()
2308
2211
            basis.lock_read()
2309
2212
            try:
2310
 
                if (basis.inventory.root is None
2311
 
                    or basis.inventory.root.file_id != to_root_id):
2312
 
                    self.set_root_id(to_root_id)
 
2213
                to_tree = self.branch.basis_tree()
 
2214
                if basis.inventory.root is None:
 
2215
                    self.set_root_id(to_tree.get_root_id())
2313
2216
                    self.flush()
 
2217
                result += merge.merge_inner(
 
2218
                                      self.branch,
 
2219
                                      to_tree,
 
2220
                                      basis,
 
2221
                                      this_tree=self,
 
2222
                                      change_reporter=change_reporter)
2314
2223
            finally:
2315
2224
                basis.unlock()
2316
 
 
2317
 
            # determine the branch point
2318
 
            graph = self.branch.repository.get_graph()
2319
 
            base_rev_id = graph.find_unique_lca(self.branch.last_revision(),
2320
 
                                                last_rev)
2321
 
            base_tree = self.branch.repository.revision_tree(base_rev_id)
2322
 
 
2323
 
            nb_conflicts = merge.merge_inner(self.branch, to_tree, base_tree,
2324
 
                                             this_tree=self,
2325
 
                                             change_reporter=change_reporter)
2326
 
            self.set_last_revision(revision)
2327
2225
            # TODO - dedup parents list with things merged by pull ?
2328
2226
            # reuse the tree we've updated to to set the basis:
2329
 
            parent_trees = [(revision, to_tree)]
 
2227
            parent_trees = [(self.branch.last_revision(), to_tree)]
2330
2228
            merges = self.get_parent_ids()[1:]
2331
2229
            # Ideally we ask the tree for the trees here, that way the working
2332
 
            # tree can decide whether to give us the entire tree or give us a
 
2230
            # tree can decide whether to give us teh entire tree or give us a
2333
2231
            # lazy initialised tree. dirstate for instance will have the trees
2334
2232
            # in ram already, whereas a last-revision + basis-inventory tree
2335
2233
            # will not, but also does not need them when setting parents.
2336
2234
            for parent in merges:
2337
2235
                parent_trees.append(
2338
2236
                    (parent, self.branch.repository.revision_tree(parent)))
2339
 
            if not _mod_revision.is_null(old_tip):
 
2237
            if (old_tip is not None and not _mod_revision.is_null(old_tip)):
2340
2238
                parent_trees.append(
2341
2239
                    (old_tip, self.branch.repository.revision_tree(old_tip)))
2342
2240
            self.set_parent_trees(parent_trees)
2343
2241
            last_rev = parent_trees[0][0]
2344
 
        return nb_conflicts
 
2242
        else:
 
2243
            # the working tree had the same last-revision as the master
 
2244
            # branch did. We may still have pivot local work from the local
 
2245
            # branch into old_tip:
 
2246
            if (old_tip is not None and not _mod_revision.is_null(old_tip)):
 
2247
                self.add_parent_tree_id(old_tip)
 
2248
        if (old_tip is not None and not _mod_revision.is_null(old_tip)
 
2249
            and old_tip != last_rev):
 
2250
            # our last revision was not the prior branch last revision
 
2251
            # and we have converted that last revision to a pending merge.
 
2252
            # base is somewhere between the branch tip now
 
2253
            # and the now pending merge
 
2254
 
 
2255
            # Since we just modified the working tree and inventory, flush out
 
2256
            # the current state, before we modify it again.
 
2257
            # TODO: jam 20070214 WorkingTree3 doesn't require this, dirstate
 
2258
            #       requires it only because TreeTransform directly munges the
 
2259
            #       inventory and calls tree._write_inventory(). Ultimately we
 
2260
            #       should be able to remove this extra flush.
 
2261
            self.flush()
 
2262
            graph = self.branch.repository.get_graph()
 
2263
            base_rev_id = graph.find_unique_lca(self.branch.last_revision(),
 
2264
                                                old_tip)
 
2265
            base_tree = self.branch.repository.revision_tree(base_rev_id)
 
2266
            other_tree = self.branch.repository.revision_tree(old_tip)
 
2267
            result += merge.merge_inner(
 
2268
                                  self.branch,
 
2269
                                  other_tree,
 
2270
                                  base_tree,
 
2271
                                  this_tree=self,
 
2272
                                  change_reporter=change_reporter)
 
2273
        return result
2345
2274
 
2346
2275
    def _write_hashcache_if_dirty(self):
2347
2276
        """Write out the hashcache if it is dirty."""
2446
2375
                    # value.
2447
2376
                    bzrdir_loc = bisect_left(cur_disk_dir_content,
2448
2377
                        ('.bzr', '.bzr'))
2449
 
                    if (bzrdir_loc < len(cur_disk_dir_content)
2450
 
                        and self.bzrdir.is_control_filename(
2451
 
                            cur_disk_dir_content[bzrdir_loc][0])):
 
2378
                    if cur_disk_dir_content[bzrdir_loc][0] == '.bzr':
2452
2379
                        # we dont yield the contents of, or, .bzr itself.
2453
2380
                        del cur_disk_dir_content[bzrdir_loc]
2454
2381
            if inv_finished:
2544
2471
                relroot = ""
2545
2472
            # FIXME: stash the node in pending
2546
2473
            entry = inv[top_id]
2547
 
            if entry.kind == 'directory':
2548
 
                for name, child in entry.sorted_children():
2549
 
                    dirblock.append((relroot + name, name, child.kind, None,
2550
 
                        child.file_id, child.kind
2551
 
                        ))
 
2474
            for name, child in entry.sorted_children():
 
2475
                dirblock.append((relroot + name, name, child.kind, None,
 
2476
                    child.file_id, child.kind
 
2477
                    ))
2552
2478
            yield (currentdir[0], entry.file_id), dirblock
2553
2479
            # push the user specified dirs from dirblock
2554
2480
            for dir in reversed(dirblock):
2587
2513
        self.set_conflicts(un_resolved)
2588
2514
        return un_resolved, resolved
2589
2515
 
2590
 
    @needs_read_lock
2591
 
    def _check(self, references):
2592
 
        """Check the tree for consistency.
2593
 
 
2594
 
        :param references: A dict with keys matching the items returned by
2595
 
            self._get_check_refs(), and values from looking those keys up in
2596
 
            the repository.
2597
 
        """
2598
 
        tree_basis = self.basis_tree()
2599
 
        tree_basis.lock_read()
2600
 
        try:
2601
 
            repo_basis = references[('trees', self.last_revision())]
2602
 
            if len(list(repo_basis.iter_changes(tree_basis))) > 0:
2603
 
                raise errors.BzrCheckError(
2604
 
                    "Mismatched basis inventory content.")
2605
 
            self._validate()
2606
 
        finally:
2607
 
            tree_basis.unlock()
2608
 
 
2609
2516
    def _validate(self):
2610
2517
        """Validate internal structures.
2611
2518
 
2617
2524
        """
2618
2525
        return
2619
2526
 
2620
 
    def _get_rules_searcher(self, default_searcher):
2621
 
        """See Tree._get_rules_searcher."""
2622
 
        if self._rules_searcher is None:
2623
 
            self._rules_searcher = super(WorkingTree,
2624
 
                self)._get_rules_searcher(default_searcher)
2625
 
        return self._rules_searcher
2626
 
 
2627
 
    def get_shelf_manager(self):
2628
 
        """Return the ShelfManager for this WorkingTree."""
2629
 
        from bzrlib.shelf import ShelfManager
2630
 
        return ShelfManager(self, self._transport)
2631
 
 
2632
2527
 
2633
2528
class WorkingTree2(WorkingTree):
2634
2529
    """This is the Format 2 working tree.
2635
2530
 
2636
 
    This was the first weave based working tree.
 
2531
    This was the first weave based working tree. 
2637
2532
     - uses os locks for locking.
2638
2533
     - uses the branch last-revision.
2639
2534
    """
2649
2544
        if self._inventory is None:
2650
2545
            self.read_working_inventory()
2651
2546
 
2652
 
    def _get_check_refs(self):
2653
 
        """Return the references needed to perform a check of this tree."""
2654
 
        return [('trees', self.last_revision())]
2655
 
 
2656
2547
    def lock_tree_write(self):
2657
2548
        """See WorkingTree.lock_tree_write().
2658
2549
 
2659
2550
        In Format2 WorkingTrees we have a single lock for the branch and tree
2660
2551
        so lock_tree_write() degrades to lock_write().
2661
 
 
2662
 
        :return: An object with an unlock method which will release the lock
2663
 
            obtained.
2664
2552
        """
2665
2553
        self.branch.lock_write()
2666
2554
        try:
2667
 
            self._control_files.lock_write()
2668
 
            return self
 
2555
            return self._control_files.lock_write()
2669
2556
        except:
2670
2557
            self.branch.unlock()
2671
2558
            raise
2680
2567
            if self._inventory_is_modified:
2681
2568
                self.flush()
2682
2569
            self._write_hashcache_if_dirty()
2683
 
 
 
2570
                    
2684
2571
        # reverse order of locking.
2685
2572
        try:
2686
2573
            return self._control_files.unlock()
2702
2589
    def _last_revision(self):
2703
2590
        """See Mutable.last_revision."""
2704
2591
        try:
2705
 
            return self._transport.get_bytes('last-revision')
 
2592
            return self._control_files.get('last-revision').read()
2706
2593
        except errors.NoSuchFile:
2707
2594
            return _mod_revision.NULL_REVISION
2708
2595
 
2709
2596
    def _change_last_revision(self, revision_id):
2710
2597
        """See WorkingTree._change_last_revision."""
2711
 
        if revision_id is None or revision_id == _mod_revision.NULL_REVISION:
 
2598
        if revision_id is None or revision_id == NULL_REVISION:
2712
2599
            try:
2713
 
                self._transport.delete('last-revision')
 
2600
                self._control_files._transport.delete('last-revision')
2714
2601
            except errors.NoSuchFile:
2715
2602
                pass
2716
2603
            return False
2717
2604
        else:
2718
 
            self._transport.put_bytes('last-revision', revision_id,
2719
 
                mode=self.bzrdir._get_file_mode())
 
2605
            self._control_files.put_bytes('last-revision', revision_id)
2720
2606
            return True
2721
2607
 
2722
 
    def _get_check_refs(self):
2723
 
        """Return the references needed to perform a check of this tree."""
2724
 
        return [('trees', self.last_revision())]
2725
 
 
2726
2608
    @needs_tree_write_lock
2727
2609
    def set_conflicts(self, conflicts):
2728
 
        self._put_rio('conflicts', conflicts.to_stanzas(),
 
2610
        self._put_rio('conflicts', conflicts.to_stanzas(), 
2729
2611
                      CONFLICT_HEADER_1)
2730
2612
 
2731
2613
    @needs_tree_write_lock
2738
2620
    @needs_read_lock
2739
2621
    def conflicts(self):
2740
2622
        try:
2741
 
            confile = self._transport.get('conflicts')
 
2623
            confile = self._control_files.get('conflicts')
2742
2624
        except errors.NoSuchFile:
2743
2625
            return _mod_conflicts.ConflictList()
2744
2626
        try:
2745
 
            try:
2746
 
                if confile.next() != CONFLICT_HEADER_1 + '\n':
2747
 
                    raise errors.ConflictFormatError()
2748
 
            except StopIteration:
 
2627
            if confile.next() != CONFLICT_HEADER_1 + '\n':
2749
2628
                raise errors.ConflictFormatError()
2750
 
            return _mod_conflicts.ConflictList.from_stanzas(RioReader(confile))
2751
 
        finally:
2752
 
            confile.close()
 
2629
        except StopIteration:
 
2630
            raise errors.ConflictFormatError()
 
2631
        return _mod_conflicts.ConflictList.from_stanzas(RioReader(confile))
2753
2632
 
2754
2633
    def unlock(self):
2755
2634
        # do non-implementation specific cleanup
2772
2651
            return path[:-len(suffix)]
2773
2652
 
2774
2653
 
 
2654
@deprecated_function(zero_eight)
 
2655
def is_control_file(filename):
 
2656
    """See WorkingTree.is_control_filename(filename)."""
 
2657
    ## FIXME: better check
 
2658
    filename = normpath(filename)
 
2659
    while filename != '':
 
2660
        head, tail = os.path.split(filename)
 
2661
        ## mutter('check %r for control file' % ((head, tail),))
 
2662
        if tail == '.bzr':
 
2663
            return True
 
2664
        if filename == head:
 
2665
            break
 
2666
        filename = head
 
2667
    return False
 
2668
 
 
2669
 
2775
2670
class WorkingTreeFormat(object):
2776
2671
    """An encapsulation of the initialization and open routines for a format.
2777
2672
 
2780
2675
     * a format string,
2781
2676
     * an open routine.
2782
2677
 
2783
 
    Formats are placed in an dict by their format string for reference
 
2678
    Formats are placed in an dict by their format string for reference 
2784
2679
    during workingtree opening. Its not required that these be instances, they
2785
 
    can be classes themselves with class methods - it simply depends on
 
2680
    can be classes themselves with class methods - it simply depends on 
2786
2681
    whether state is needed for a given format or not.
2787
2682
 
2788
2683
    Once a format is deprecated, just deprecate the initialize and open
2789
 
    methods on the format class. Do not deprecate the object, as the
 
2684
    methods on the format class. Do not deprecate the object, as the 
2790
2685
    object will be created every time regardless.
2791
2686
    """
2792
2687
 
2805
2700
        """Return the format for the working tree object in a_bzrdir."""
2806
2701
        try:
2807
2702
            transport = a_bzrdir.get_workingtree_transport(None)
2808
 
            format_string = transport.get_bytes("format")
 
2703
            format_string = transport.get("format").read()
2809
2704
            return klass._formats[format_string]
2810
2705
        except errors.NoSuchFile:
2811
2706
            raise errors.NoWorkingTree(base=transport.base)
2836
2731
        """Is this format supported?
2837
2732
 
2838
2733
        Supported formats can be initialized and opened.
2839
 
        Unsupported formats may not support initialization or committing or
 
2734
        Unsupported formats may not support initialization or committing or 
2840
2735
        some other features depending on the reason for not being supported.
2841
2736
        """
2842
2737
        return True
2843
2738
 
2844
 
    def supports_content_filtering(self):
2845
 
        """True if this format supports content filtering."""
2846
 
        return False
2847
 
 
2848
 
    def supports_views(self):
2849
 
        """True if this format supports stored views."""
2850
 
        return False
2851
 
 
2852
2739
    @classmethod
2853
2740
    def register_format(klass, format):
2854
2741
        klass._formats[format.get_format_string()] = format
2859
2746
 
2860
2747
    @classmethod
2861
2748
    def unregister_format(klass, format):
 
2749
        assert klass._formats[format.get_format_string()] is format
2862
2750
        del klass._formats[format.get_format_string()]
2863
2751
 
2864
2752
 
2865
2753
class WorkingTreeFormat2(WorkingTreeFormat):
2866
 
    """The second working tree format.
 
2754
    """The second working tree format. 
2867
2755
 
2868
2756
    This format modified the hash cache from the format 1 hash cache.
2869
2757
    """
2874
2762
        """See WorkingTreeFormat.get_format_description()."""
2875
2763
        return "Working tree format 2"
2876
2764
 
2877
 
    def _stub_initialize_on_transport(self, transport, file_mode):
2878
 
        """Workaround: create control files for a remote working tree.
2879
 
 
 
2765
    def stub_initialize_remote(self, control_files):
 
2766
        """As a special workaround create critical control files for a remote working tree
 
2767
        
2880
2768
        This ensures that it can later be updated and dealt with locally,
2881
 
        since BzrDirFormat6 and BzrDirFormat5 cannot represent dirs with
 
2769
        since BzrDirFormat6 and BzrDirFormat5 cannot represent dirs with 
2882
2770
        no working tree.  (See bug #43064).
2883
2771
        """
2884
2772
        sio = StringIO()
2885
 
        inv = inventory.Inventory()
 
2773
        inv = Inventory()
2886
2774
        xml5.serializer_v5.write_inventory(inv, sio, working=True)
2887
2775
        sio.seek(0)
2888
 
        transport.put_file('inventory', sio, file_mode)
2889
 
        transport.put_bytes('pending-merges', '', file_mode)
 
2776
        control_files.put('inventory', sio)
 
2777
 
 
2778
        control_files.put_bytes('pending-merges', '')
 
2779
        
2890
2780
 
2891
2781
    def initialize(self, a_bzrdir, revision_id=None, from_branch=None,
2892
2782
                   accelerator_tree=None, hardlink=False):
2904
2794
            branch.generate_revision_history(revision_id)
2905
2795
        finally:
2906
2796
            branch.unlock()
2907
 
        inv = inventory.Inventory()
 
2797
        inv = Inventory()
2908
2798
        wt = WorkingTree2(a_bzrdir.root_transport.local_abspath('.'),
2909
2799
                         branch,
2910
2800
                         inv,
2955
2845
        - is new in bzr 0.8
2956
2846
        - uses a LockDir to guard access for writes.
2957
2847
    """
2958
 
 
 
2848
    
2959
2849
    upgrade_recommended = True
2960
2850
 
2961
2851
    def get_format_string(self):
2978
2868
 
2979
2869
    def _open_control_files(self, a_bzrdir):
2980
2870
        transport = a_bzrdir.get_workingtree_transport(None)
2981
 
        return LockableFiles(transport, self._lock_file_name,
 
2871
        return LockableFiles(transport, self._lock_file_name, 
2982
2872
                             self._lock_class)
2983
2873
 
2984
2874
    def initialize(self, a_bzrdir, revision_id=None, from_branch=None,
2985
2875
                   accelerator_tree=None, hardlink=False):
2986
2876
        """See WorkingTreeFormat.initialize().
2987
 
 
 
2877
        
2988
2878
        :param revision_id: if supplied, create a working tree at a different
2989
2879
            revision than the branch is at.
2990
2880
        :param accelerator_tree: A tree which can be used for retrieving file
3000
2890
        control_files = self._open_control_files(a_bzrdir)
3001
2891
        control_files.create_lock()
3002
2892
        control_files.lock_write()
3003
 
        transport.put_bytes('format', self.get_format_string(),
3004
 
            mode=a_bzrdir._get_file_mode())
 
2893
        control_files.put_utf8('format', self.get_format_string())
3005
2894
        if from_branch is not None:
3006
2895
            branch = from_branch
3007
2896
        else:
3027
2916
            # only set an explicit root id if there is one to set.
3028
2917
            if basis_tree.inventory.root is not None:
3029
2918
                wt.set_root_id(basis_tree.get_root_id())
3030
 
            if revision_id == _mod_revision.NULL_REVISION:
 
2919
            if revision_id == NULL_REVISION:
3031
2920
                wt.set_parent_trees([])
3032
2921
            else:
3033
2922
                wt.set_parent_trees([(revision_id, basis_tree)])
3040
2929
        return wt
3041
2930
 
3042
2931
    def _initial_inventory(self):
3043
 
        return inventory.Inventory()
 
2932
        return Inventory()
3044
2933
 
3045
2934
    def __init__(self):
3046
2935
        super(WorkingTreeFormat3, self).__init__()
3061
2950
 
3062
2951
    def _open(self, a_bzrdir, control_files):
3063
2952
        """Open the tree itself.
3064
 
 
 
2953
        
3065
2954
        :param a_bzrdir: the dir for the tree.
3066
2955
        :param control_files: the control files for the tree.
3067
2956
        """
3075
2964
        return self.get_format_string()
3076
2965
 
3077
2966
 
3078
 
__default_format = WorkingTreeFormat6()
 
2967
__default_format = WorkingTreeFormat4()
3079
2968
WorkingTreeFormat.register_format(__default_format)
3080
 
WorkingTreeFormat.register_format(WorkingTreeFormat5())
3081
 
WorkingTreeFormat.register_format(WorkingTreeFormat4())
3082
2969
WorkingTreeFormat.register_format(WorkingTreeFormat3())
3083
2970
WorkingTreeFormat.set_default_format(__default_format)
3084
2971
# formats which have no format string are not discoverable