~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/merge.py

  • Committer: Florian Dorn
  • Date: 2012-04-03 14:49:22 UTC
  • mto: This revision was merged to the branch mainline in revision 6546.
  • Revision ID: florian.dorn@boku.ac.at-20120403144922-b8y59csy8l1rzs5u
updated developer docs

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005, 2006, 2008 Canonical Ltd
 
1
# Copyright (C) 2005-2011 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
 
 
17
 
 
18
 
import errno
19
 
from itertools import chain
20
 
import os
 
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
16
 
21
17
import warnings
22
18
 
 
19
from bzrlib.lazy_import import lazy_import
 
20
lazy_import(globals(), """
23
21
from bzrlib import (
 
22
    branch as _mod_branch,
 
23
    cleanup,
 
24
    conflicts as _mod_conflicts,
24
25
    debug,
25
 
    errors,
 
26
    generate_ids,
26
27
    graph as _mod_graph,
 
28
    merge3,
27
29
    osutils,
28
30
    patiencediff,
29
 
    registry,
30
31
    revision as _mod_revision,
 
32
    textfile,
 
33
    trace,
 
34
    transform,
 
35
    tree as _mod_tree,
31
36
    tsort,
32
 
    )
33
 
from bzrlib.branch import Branch
34
 
from bzrlib.conflicts import ConflictList, Conflict
35
 
from bzrlib.errors import (BzrCommandError,
36
 
                           BzrError,
37
 
                           NoCommonAncestor,
38
 
                           NoCommits,
39
 
                           NoSuchRevision,
40
 
                           NoSuchFile,
41
 
                           NotBranchError,
42
 
                           NotVersionedError,
43
 
                           UnrelatedBranches,
44
 
                           UnsupportedOperation,
45
 
                           WorkingTreeNotRevision,
46
 
                           BinaryFile,
47
 
                           )
48
 
from bzrlib.graph import Graph
49
 
from bzrlib.merge3 import Merge3
50
 
from bzrlib.osutils import rename, pathjoin
51
 
from progress import DummyProgress, ProgressPhase
52
 
from bzrlib.revision import (NULL_REVISION, ensure_null)
53
 
from bzrlib.textfile import check_text_lines
54
 
from bzrlib.trace import mutter, warning, note, is_quiet
55
 
from bzrlib.transform import (TransformPreview, TreeTransform,
56
 
                              resolve_conflicts, cook_conflicts,
57
 
                              conflict_pass, FinalPaths, create_by_entry,
58
 
                              unique_add, ROOT_PARENT)
59
 
from bzrlib.versionedfile import PlanWeaveMerge
60
 
from bzrlib import ui
61
 
 
 
37
    ui,
 
38
    versionedfile,
 
39
    workingtree,
 
40
    )
 
41
""")
 
42
from bzrlib import (
 
43
    decorators,
 
44
    errors,
 
45
    hooks,
 
46
    )
 
47
from bzrlib.symbol_versioning import (
 
48
    deprecated_in,
 
49
    deprecated_method,
 
50
    )
62
51
# TODO: Report back as changes are merged in
63
52
 
64
53
 
65
54
def transform_tree(from_tree, to_tree, interesting_ids=None):
66
 
    merge_inner(from_tree.branch, to_tree, from_tree, ignore_zero=True,
67
 
                interesting_ids=interesting_ids, this_tree=from_tree)
 
55
    from_tree.lock_tree_write()
 
56
    operation = cleanup.OperationWithCleanups(merge_inner)
 
57
    operation.add_cleanup(from_tree.unlock)
 
58
    operation.run_simple(from_tree.branch, to_tree, from_tree,
 
59
        ignore_zero=True, interesting_ids=interesting_ids, this_tree=from_tree)
 
60
 
 
61
 
 
62
class MergeHooks(hooks.Hooks):
 
63
 
 
64
    def __init__(self):
 
65
        hooks.Hooks.__init__(self, "bzrlib.merge", "Merger.hooks")
 
66
        self.add_hook('merge_file_content',
 
67
            "Called with a bzrlib.merge.Merger object to create a per file "
 
68
            "merge object when starting a merge. "
 
69
            "Should return either None or a subclass of "
 
70
            "``bzrlib.merge.AbstractPerFileMerger``. "
 
71
            "Such objects will then be called per file "
 
72
            "that needs to be merged (including when one "
 
73
            "side has deleted the file and the other has changed it). "
 
74
            "See the AbstractPerFileMerger API docs for details on how it is "
 
75
            "used by merge.",
 
76
            (2, 1))
 
77
 
 
78
 
 
79
class AbstractPerFileMerger(object):
 
80
    """PerFileMerger objects are used by plugins extending merge for bzrlib.
 
81
 
 
82
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
 
83
    
 
84
    :ivar merger: The Merge3Merger performing the merge.
 
85
    """
 
86
 
 
87
    def __init__(self, merger):
 
88
        """Create a PerFileMerger for use with merger."""
 
89
        self.merger = merger
 
90
 
 
91
    def merge_contents(self, merge_params):
 
92
        """Attempt to merge the contents of a single file.
 
93
        
 
94
        :param merge_params: A bzrlib.merge.MergeHookParams
 
95
        :return: A tuple of (status, chunks), where status is one of
 
96
            'not_applicable', 'success', 'conflicted', or 'delete'.  If status
 
97
            is 'success' or 'conflicted', then chunks should be an iterable of
 
98
            strings for the new file contents.
 
99
        """
 
100
        return ('not applicable', None)
 
101
 
 
102
 
 
103
class PerFileMerger(AbstractPerFileMerger):
 
104
    """Merge individual files when self.file_matches returns True.
 
105
 
 
106
    This class is intended to be subclassed.  The file_matches and
 
107
    merge_matching methods should be overridden with concrete implementations.
 
108
    """
 
109
 
 
110
    def file_matches(self, params):
 
111
        """Return True if merge_matching should be called on this file.
 
112
 
 
113
        Only called with merges of plain files with no clear winner.
 
114
 
 
115
        Subclasses must override this.
 
116
        """
 
117
        raise NotImplementedError(self.file_matches)
 
118
 
 
119
    def get_filename(self, params, tree):
 
120
        """Lookup the filename (i.e. basename, not path), given a Tree (e.g.
 
121
        self.merger.this_tree) and a MergeHookParams.
 
122
        """
 
123
        return osutils.basename(tree.id2path(params.file_id))
 
124
 
 
125
    def get_filepath(self, params, tree):
 
126
        """Calculate the path to the file in a tree.
 
127
 
 
128
        :param params: A MergeHookParams describing the file to merge
 
129
        :param tree: a Tree, e.g. self.merger.this_tree.
 
130
        """
 
131
        return tree.id2path(params.file_id)
 
132
 
 
133
    def merge_contents(self, params):
 
134
        """Merge the contents of a single file."""
 
135
        # Check whether this custom merge logic should be used.
 
136
        if (
 
137
            # OTHER is a straight winner, rely on default merge.
 
138
            params.winner == 'other' or
 
139
            # THIS and OTHER aren't both files.
 
140
            not params.is_file_merge() or
 
141
            # The filename doesn't match *.xml
 
142
            not self.file_matches(params)):
 
143
            return 'not_applicable', None
 
144
        return self.merge_matching(params)
 
145
 
 
146
    def merge_matching(self, params):
 
147
        """Merge the contents of a single file that has matched the criteria
 
148
        in PerFileMerger.merge_contents (is a conflict, is a file,
 
149
        self.file_matches is True).
 
150
 
 
151
        Subclasses must override this.
 
152
        """
 
153
        raise NotImplementedError(self.merge_matching)
 
154
 
 
155
 
 
156
class ConfigurableFileMerger(PerFileMerger):
 
157
    """Merge individual files when configured via a .conf file.
 
158
 
 
159
    This is a base class for concrete custom file merging logic. Concrete
 
160
    classes should implement ``merge_text``.
 
161
 
 
162
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
 
163
    
 
164
    :ivar affected_files: The configured file paths to merge.
 
165
 
 
166
    :cvar name_prefix: The prefix to use when looking up configuration
 
167
        details. <name_prefix>_merge_files describes the files targeted by the
 
168
        hook for example.
 
169
        
 
170
    :cvar default_files: The default file paths to merge when no configuration
 
171
        is present.
 
172
    """
 
173
 
 
174
    name_prefix = None
 
175
    default_files = None
 
176
 
 
177
    def __init__(self, merger):
 
178
        super(ConfigurableFileMerger, self).__init__(merger)
 
179
        self.affected_files = None
 
180
        self.default_files = self.__class__.default_files or []
 
181
        self.name_prefix = self.__class__.name_prefix
 
182
        if self.name_prefix is None:
 
183
            raise ValueError("name_prefix must be set.")
 
184
 
 
185
    def file_matches(self, params):
 
186
        """Check whether the file should call the merge hook.
 
187
 
 
188
        <name_prefix>_merge_files configuration variable is a list of files
 
189
        that should use the hook.
 
190
        """
 
191
        affected_files = self.affected_files
 
192
        if affected_files is None:
 
193
            config = self.merger.this_branch.get_config()
 
194
            # Until bzr provides a better policy for caching the config, we
 
195
            # just add the part we're interested in to the params to avoid
 
196
            # reading the config files repeatedly (bazaar.conf, location.conf,
 
197
            # branch.conf).
 
198
            config_key = self.name_prefix + '_merge_files'
 
199
            affected_files = config.get_user_option_as_list(config_key)
 
200
            if affected_files is None:
 
201
                # If nothing was specified in the config, use the default.
 
202
                affected_files = self.default_files
 
203
            self.affected_files = affected_files
 
204
        if affected_files:
 
205
            filepath = self.get_filepath(params, self.merger.this_tree)
 
206
            if filepath in affected_files:
 
207
                return True
 
208
        return False
 
209
 
 
210
    def merge_matching(self, params):
 
211
        return self.merge_text(params)
 
212
 
 
213
    def merge_text(self, params):
 
214
        """Merge the byte contents of a single file.
 
215
 
 
216
        This is called after checking that the merge should be performed in
 
217
        merge_contents, and it should behave as per
 
218
        ``bzrlib.merge.AbstractPerFileMerger.merge_contents``.
 
219
        """
 
220
        raise NotImplementedError(self.merge_text)
 
221
 
 
222
 
 
223
class MergeHookParams(object):
 
224
    """Object holding parameters passed to merge_file_content hooks.
 
225
 
 
226
    There are some fields hooks can access:
 
227
 
 
228
    :ivar file_id: the file ID of the file being merged
 
229
    :ivar trans_id: the transform ID for the merge of this file
 
230
    :ivar this_kind: kind of file_id in 'this' tree
 
231
    :ivar other_kind: kind of file_id in 'other' tree
 
232
    :ivar winner: one of 'this', 'other', 'conflict'
 
233
    """
 
234
 
 
235
    def __init__(self, merger, file_id, trans_id, this_kind, other_kind,
 
236
            winner):
 
237
        self._merger = merger
 
238
        self.file_id = file_id
 
239
        self.trans_id = trans_id
 
240
        self.this_kind = this_kind
 
241
        self.other_kind = other_kind
 
242
        self.winner = winner
 
243
 
 
244
    def is_file_merge(self):
 
245
        """True if this_kind and other_kind are both 'file'."""
 
246
        return self.this_kind == 'file' and self.other_kind == 'file'
 
247
 
 
248
    @decorators.cachedproperty
 
249
    def base_lines(self):
 
250
        """The lines of the 'base' version of the file."""
 
251
        return self._merger.get_lines(self._merger.base_tree, self.file_id)
 
252
 
 
253
    @decorators.cachedproperty
 
254
    def this_lines(self):
 
255
        """The lines of the 'this' version of the file."""
 
256
        return self._merger.get_lines(self._merger.this_tree, self.file_id)
 
257
 
 
258
    @decorators.cachedproperty
 
259
    def other_lines(self):
 
260
        """The lines of the 'other' version of the file."""
 
261
        return self._merger.get_lines(self._merger.other_tree, self.file_id)
68
262
 
69
263
 
70
264
class Merger(object):
 
265
 
 
266
    hooks = MergeHooks()
 
267
 
71
268
    def __init__(self, this_branch, other_tree=None, base_tree=None,
72
 
                 this_tree=None, pb=DummyProgress(), change_reporter=None,
 
269
                 this_tree=None, pb=None, change_reporter=None,
73
270
                 recurse='down', revision_graph=None):
74
271
        object.__init__(self)
75
272
        self.this_branch = this_branch
88
285
        self.interesting_files = None
89
286
        self.show_base = False
90
287
        self.reprocess = False
91
 
        self._pb = pb
 
288
        if pb is not None:
 
289
            warnings.warn("pb parameter to Merger() is deprecated and ignored")
92
290
        self.pp = None
93
291
        self.recurse = recurse
94
292
        self.change_reporter = change_reporter
96
294
        self._revision_graph = revision_graph
97
295
        self._base_is_ancestor = None
98
296
        self._base_is_other_ancestor = None
 
297
        self._is_criss_cross = None
 
298
        self._lca_trees = None
 
299
 
 
300
    def cache_trees_with_revision_ids(self, trees):
 
301
        """Cache any tree in trees if it has a revision_id."""
 
302
        for maybe_tree in trees:
 
303
            if maybe_tree is None:
 
304
                continue
 
305
            try:
 
306
                rev_id = maybe_tree.get_revision_id()
 
307
            except AttributeError:
 
308
                continue
 
309
            self._cached_trees[rev_id] = maybe_tree
99
310
 
100
311
    @property
101
312
    def revision_graph(self):
129
340
                                      _set_base_is_other_ancestor)
130
341
 
131
342
    @staticmethod
132
 
    def from_uncommitted(tree, other_tree, pb):
 
343
    def from_uncommitted(tree, other_tree, pb=None, base_tree=None):
133
344
        """Return a Merger for uncommitted changes in other_tree.
134
345
 
135
346
        :param tree: The tree to merge into
136
347
        :param other_tree: The tree to get uncommitted changes from
137
348
        :param pb: A progress indicator
 
349
        :param base_tree: The basis to use for the merge.  If unspecified,
 
350
            other_tree.basis_tree() will be used.
138
351
        """
139
 
        merger = Merger(tree.branch, other_tree, other_tree.basis_tree(), tree,
140
 
                        pb)
 
352
        if base_tree is None:
 
353
            base_tree = other_tree.basis_tree()
 
354
        merger = Merger(tree.branch, other_tree, base_tree, tree, pb)
141
355
        merger.base_rev_id = merger.base_tree.get_revision_id()
142
356
        merger.other_rev_id = None
143
357
        merger.other_basis = merger.base_rev_id
161
375
                base_revision_id, tree.branch.last_revision())):
162
376
                base_revision_id = None
163
377
            else:
164
 
                warning('Performing cherrypick')
 
378
                trace.warning('Performing cherrypick')
165
379
        merger = klass.from_revision_ids(pb, tree, other_revision_id,
166
380
                                         base_revision_id, revision_graph=
167
381
                                         revision_graph)
169
383
 
170
384
    @staticmethod
171
385
    def from_revision_ids(pb, tree, other, base=None, other_branch=None,
172
 
                          base_branch=None, revision_graph=None):
 
386
                          base_branch=None, revision_graph=None,
 
387
                          tree_branch=None):
173
388
        """Return a Merger for revision-ids.
174
389
 
 
390
        :param pb: A progress indicator
175
391
        :param tree: The tree to merge changes into
176
392
        :param other: The revision-id to use as OTHER
177
393
        :param base: The revision-id to use as BASE.  If not specified, will
182
398
            not supplied, other_branch or tree.branch will be used.
183
399
        :param revision_graph: If you have a revision_graph precomputed, pass
184
400
            it in, otherwise it will be created for you.
185
 
        :param pb: A progress indicator
 
401
        :param tree_branch: The branch associated with tree.  If not supplied,
 
402
            tree.branch will be used.
186
403
        """
187
 
        merger = Merger(tree.branch, this_tree=tree, pb=pb,
 
404
        if tree_branch is None:
 
405
            tree_branch = tree.branch
 
406
        merger = Merger(tree_branch, this_tree=tree, pb=pb,
188
407
                        revision_graph=revision_graph)
189
408
        if other_branch is None:
190
409
            other_branch = tree.branch
209
428
        return self._cached_trees[revision_id]
210
429
 
211
430
    def _get_tree(self, treespec, possible_transports=None):
212
 
        from bzrlib import workingtree
213
431
        location, revno = treespec
214
432
        if revno is None:
215
433
            tree = workingtree.WorkingTree.open_containing(location)[0]
216
434
            return tree.branch, tree
217
 
        branch = Branch.open_containing(location, possible_transports)[0]
 
435
        branch = _mod_branch.Branch.open_containing(
 
436
            location, possible_transports)[0]
218
437
        if revno == -1:
219
438
            revision_id = branch.last_revision()
220
439
        else:
221
440
            revision_id = branch.get_rev_id(revno)
222
 
        revision_id = ensure_null(revision_id)
 
441
        revision_id = _mod_revision.ensure_null(revision_id)
223
442
        return branch, self.revision_tree(revision_id, branch)
224
443
 
 
444
    @deprecated_method(deprecated_in((2, 1, 0)))
225
445
    def ensure_revision_trees(self):
226
446
        if self.this_revision_tree is None:
227
447
            self.this_basis_tree = self.revision_tree(self.this_basis)
230
450
 
231
451
        if self.other_rev_id is None:
232
452
            other_basis_tree = self.revision_tree(self.other_basis)
233
 
            changes = other_basis_tree.changes_from(self.other_tree)
234
 
            if changes.has_changed():
235
 
                raise WorkingTreeNotRevision(self.this_tree)
 
453
            if other_basis_tree.has_changes(self.other_tree):
 
454
                raise errors.WorkingTreeNotRevision(self.this_tree)
236
455
            other_rev_id = self.other_basis
237
456
            self.other_tree = other_basis_tree
238
457
 
 
458
    @deprecated_method(deprecated_in((2, 1, 0)))
239
459
    def file_revisions(self, file_id):
240
460
        self.ensure_revision_trees()
241
 
        def get_id(tree, file_id):
242
 
            revision_id = tree.inventory[file_id].revision
243
 
            return revision_id
244
461
        if self.this_rev_id is None:
245
462
            if self.this_basis_tree.get_file_sha1(file_id) != \
246
463
                self.this_tree.get_file_sha1(file_id):
247
 
                raise WorkingTreeNotRevision(self.this_tree)
 
464
                raise errors.WorkingTreeNotRevision(self.this_tree)
248
465
 
249
466
        trees = (self.this_basis_tree, self.other_tree)
250
 
        return [get_id(tree, file_id) for tree in trees]
 
467
        return [tree.get_file_revision(file_id) for tree in trees]
251
468
 
 
469
    @deprecated_method(deprecated_in((2, 1, 0)))
252
470
    def check_basis(self, check_clean, require_commits=True):
253
471
        if self.this_basis is None and require_commits is True:
254
 
            raise BzrCommandError("This branch has no commits."
255
 
                                  " (perhaps you would prefer 'bzr pull')")
 
472
            raise errors.BzrCommandError(
 
473
                "This branch has no commits."
 
474
                " (perhaps you would prefer 'bzr pull')")
256
475
        if check_clean:
257
476
            self.compare_basis()
258
477
            if self.this_basis != self.this_rev_id:
259
478
                raise errors.UncommittedChanges(self.this_tree)
260
479
 
 
480
    @deprecated_method(deprecated_in((2, 1, 0)))
261
481
    def compare_basis(self):
262
482
        try:
263
483
            basis_tree = self.revision_tree(self.this_tree.last_revision())
264
484
        except errors.NoSuchRevision:
265
485
            basis_tree = self.this_tree.basis_tree()
266
 
        changes = self.this_tree.changes_from(basis_tree)
267
 
        if not changes.has_changed():
 
486
        if not self.this_tree.has_changes(basis_tree):
268
487
            self.this_rev_id = self.this_basis
269
488
 
270
489
    def set_interesting_files(self, file_list):
271
490
        self.interesting_files = file_list
272
491
 
273
492
    def set_pending(self):
274
 
        if not self.base_is_ancestor or not self.base_is_other_ancestor or self.other_rev_id is None:
 
493
        if (not self.base_is_ancestor or not self.base_is_other_ancestor
 
494
            or self.other_rev_id is None):
275
495
            return
276
496
        self._add_parent()
277
497
 
278
498
    def _add_parent(self):
279
499
        new_parents = self.this_tree.get_parent_ids() + [self.other_rev_id]
280
500
        new_parent_trees = []
 
501
        operation = cleanup.OperationWithCleanups(
 
502
            self.this_tree.set_parent_trees)
281
503
        for revision_id in new_parents:
282
504
            try:
283
505
                tree = self.revision_tree(revision_id)
285
507
                tree = None
286
508
            else:
287
509
                tree.lock_read()
 
510
                operation.add_cleanup(tree.unlock)
288
511
            new_parent_trees.append((revision_id, tree))
289
 
        try:
290
 
            self.this_tree.set_parent_trees(new_parent_trees,
291
 
                                            allow_leftmost_as_ghost=True)
292
 
        finally:
293
 
            for _revision_id, tree in new_parent_trees:
294
 
                if tree is not None:
295
 
                    tree.unlock()
 
512
        operation.run_simple(new_parent_trees, allow_leftmost_as_ghost=True)
296
513
 
297
514
    def set_other(self, other_revision, possible_transports=None):
298
515
        """Set the revision and tree to merge from.
307
524
            self.other_rev_id = _mod_revision.ensure_null(
308
525
                self.other_branch.last_revision())
309
526
            if _mod_revision.is_null(self.other_rev_id):
310
 
                raise NoCommits(self.other_branch)
 
527
                raise errors.NoCommits(self.other_branch)
311
528
            self.other_basis = self.other_rev_id
312
529
        elif other_revision[1] is not None:
313
530
            self.other_rev_id = self.other_branch.get_rev_id(other_revision[1])
316
533
            self.other_rev_id = None
317
534
            self.other_basis = self.other_branch.last_revision()
318
535
            if self.other_basis is None:
319
 
                raise NoCommits(self.other_branch)
 
536
                raise errors.NoCommits(self.other_branch)
320
537
        if self.other_rev_id is not None:
321
538
            self._cached_trees[self.other_rev_id] = self.other_tree
322
539
        self._maybe_fetch(self.other_branch,self.this_branch, self.other_basis)
349
566
            target.fetch(source, revision_id)
350
567
 
351
568
    def find_base(self):
352
 
        revisions = [ensure_null(self.this_basis),
353
 
                     ensure_null(self.other_basis)]
354
 
        if NULL_REVISION in revisions:
355
 
            self.base_rev_id = NULL_REVISION
 
569
        revisions = [_mod_revision.ensure_null(self.this_basis),
 
570
                     _mod_revision.ensure_null(self.other_basis)]
 
571
        if _mod_revision.NULL_REVISION in revisions:
 
572
            self.base_rev_id = _mod_revision.NULL_REVISION
 
573
            self.base_tree = self.revision_tree(self.base_rev_id)
 
574
            self._is_criss_cross = False
356
575
        else:
357
 
            self.base_rev_id, steps = self.revision_graph.find_unique_lca(
358
 
                revisions[0], revisions[1], count_steps=True)
359
 
            if self.base_rev_id == NULL_REVISION:
360
 
                raise UnrelatedBranches()
361
 
            if steps > 1:
362
 
                warning('Warning: criss-cross merge encountered.  See bzr'
363
 
                        ' help criss-cross.')
364
 
        self.base_tree = self.revision_tree(self.base_rev_id)
 
576
            lcas = self.revision_graph.find_lca(revisions[0], revisions[1])
 
577
            self._is_criss_cross = False
 
578
            if len(lcas) == 0:
 
579
                self.base_rev_id = _mod_revision.NULL_REVISION
 
580
            elif len(lcas) == 1:
 
581
                self.base_rev_id = list(lcas)[0]
 
582
            else: # len(lcas) > 1
 
583
                self._is_criss_cross = True
 
584
                if len(lcas) > 2:
 
585
                    # find_unique_lca can only handle 2 nodes, so we have to
 
586
                    # start back at the beginning. It is a shame to traverse
 
587
                    # the graph again, but better than re-implementing
 
588
                    # find_unique_lca.
 
589
                    self.base_rev_id = self.revision_graph.find_unique_lca(
 
590
                                            revisions[0], revisions[1])
 
591
                else:
 
592
                    self.base_rev_id = self.revision_graph.find_unique_lca(
 
593
                                            *lcas)
 
594
                sorted_lca_keys = self.revision_graph.find_merge_order(                
 
595
                    revisions[0], lcas)
 
596
                if self.base_rev_id == _mod_revision.NULL_REVISION:
 
597
                    self.base_rev_id = sorted_lca_keys[0]
 
598
                
 
599
            if self.base_rev_id == _mod_revision.NULL_REVISION:
 
600
                raise errors.UnrelatedBranches()
 
601
            if self._is_criss_cross:
 
602
                trace.warning('Warning: criss-cross merge encountered.  See bzr'
 
603
                              ' help criss-cross.')
 
604
                trace.mutter('Criss-cross lcas: %r' % lcas)
 
605
                if self.base_rev_id in lcas:
 
606
                    trace.mutter('Unable to find unique lca. '
 
607
                                 'Fallback %r as best option.' % self.base_rev_id)
 
608
                interesting_revision_ids = set(lcas)
 
609
                interesting_revision_ids.add(self.base_rev_id)
 
610
                interesting_trees = dict((t.get_revision_id(), t)
 
611
                    for t in self.this_branch.repository.revision_trees(
 
612
                        interesting_revision_ids))
 
613
                self._cached_trees.update(interesting_trees)
 
614
                if self.base_rev_id in lcas:
 
615
                    self.base_tree = interesting_trees[self.base_rev_id]
 
616
                else:
 
617
                    self.base_tree = interesting_trees.pop(self.base_rev_id)
 
618
                self._lca_trees = [interesting_trees[key]
 
619
                                   for key in sorted_lca_keys]
 
620
            else:
 
621
                self.base_tree = self.revision_tree(self.base_rev_id)
365
622
        self.base_is_ancestor = True
366
623
        self.base_is_other_ancestor = True
 
624
        trace.mutter('Base revid: %r' % self.base_rev_id)
367
625
 
368
626
    def set_base(self, base_revision):
369
627
        """Set the base revision to use for the merge.
370
628
 
371
629
        :param base_revision: A 2-list containing a path and revision number.
372
630
        """
373
 
        mutter("doing merge() with no base_revision specified")
 
631
        trace.mutter("doing merge() with no base_revision specified")
374
632
        if base_revision == [None, None]:
375
633
            self.find_base()
376
634
        else:
389
647
                  'other_tree': self.other_tree,
390
648
                  'interesting_ids': self.interesting_ids,
391
649
                  'interesting_files': self.interesting_files,
392
 
                  'pp': self.pp,
 
650
                  'this_branch': self.this_branch,
393
651
                  'do_merge': False}
394
652
        if self.merge_type.requires_base:
395
653
            kwargs['base_tree'] = self.base_tree
396
654
        if self.merge_type.supports_reprocess:
397
655
            kwargs['reprocess'] = self.reprocess
398
656
        elif self.reprocess:
399
 
            raise BzrError("Conflict reduction is not supported for merge"
400
 
                                  " type %s." % self.merge_type)
 
657
            raise errors.BzrError(
 
658
                "Conflict reduction is not supported for merge"
 
659
                " type %s." % self.merge_type)
401
660
        if self.merge_type.supports_show_base:
402
661
            kwargs['show_base'] = self.show_base
403
662
        elif self.show_base:
404
 
            raise BzrError("Showing base is not supported for this"
405
 
                           " merge type. %s" % self.merge_type)
 
663
            raise errors.BzrError("Showing base is not supported for this"
 
664
                                  " merge type. %s" % self.merge_type)
406
665
        if (not getattr(self.merge_type, 'supports_reverse_cherrypick', True)
407
666
            and not self.base_is_other_ancestor):
408
667
            raise errors.CannotReverseCherrypick()
409
668
        if self.merge_type.supports_cherrypick:
410
669
            kwargs['cherrypick'] = (not self.base_is_ancestor or
411
670
                                    not self.base_is_other_ancestor)
412
 
        return self.merge_type(pb=self._pb,
 
671
        if self._is_criss_cross and getattr(self.merge_type,
 
672
                                            'supports_lca_trees', False):
 
673
            kwargs['lca_trees'] = self._lca_trees
 
674
        return self.merge_type(pb=None,
413
675
                               change_reporter=self.change_reporter,
414
676
                               **kwargs)
415
677
 
 
678
    def _do_merge_to(self):
 
679
        merge = self.make_merger()
 
680
        if self.other_branch is not None:
 
681
            self.other_branch.update_references(self.this_branch)
 
682
        merge.do_merge()
 
683
        if self.recurse == 'down':
 
684
            for relpath, file_id in self.this_tree.iter_references():
 
685
                sub_tree = self.this_tree.get_nested_tree(file_id, relpath)
 
686
                other_revision = self.other_tree.get_reference_revision(
 
687
                    file_id, relpath)
 
688
                if  other_revision == sub_tree.last_revision():
 
689
                    continue
 
690
                sub_merge = Merger(sub_tree.branch, this_tree=sub_tree)
 
691
                sub_merge.merge_type = self.merge_type
 
692
                other_branch = self.other_branch.reference_parent(file_id, relpath)
 
693
                sub_merge.set_other_revision(other_revision, other_branch)
 
694
                base_revision = self.base_tree.get_reference_revision(file_id)
 
695
                sub_merge.base_tree = \
 
696
                    sub_tree.branch.repository.revision_tree(base_revision)
 
697
                sub_merge.base_rev_id = base_revision
 
698
                sub_merge.do_merge()
 
699
        return merge
 
700
 
416
701
    def do_merge(self):
 
702
        operation = cleanup.OperationWithCleanups(self._do_merge_to)
417
703
        self.this_tree.lock_tree_write()
 
704
        operation.add_cleanup(self.this_tree.unlock)
418
705
        if self.base_tree is not None:
419
706
            self.base_tree.lock_read()
 
707
            operation.add_cleanup(self.base_tree.unlock)
420
708
        if self.other_tree is not None:
421
709
            self.other_tree.lock_read()
422
 
        try:
423
 
            merge = self.make_merger()
424
 
            merge.do_merge()
425
 
            if self.recurse == 'down':
426
 
                for relpath, file_id in self.this_tree.iter_references():
427
 
                    sub_tree = self.this_tree.get_nested_tree(file_id, relpath)
428
 
                    other_revision = self.other_tree.get_reference_revision(
429
 
                        file_id, relpath)
430
 
                    if  other_revision == sub_tree.last_revision():
431
 
                        continue
432
 
                    sub_merge = Merger(sub_tree.branch, this_tree=sub_tree)
433
 
                    sub_merge.merge_type = self.merge_type
434
 
                    other_branch = self.other_branch.reference_parent(file_id, relpath)
435
 
                    sub_merge.set_other_revision(other_revision, other_branch)
436
 
                    base_revision = self.base_tree.get_reference_revision(file_id)
437
 
                    sub_merge.base_tree = \
438
 
                        sub_tree.branch.repository.revision_tree(base_revision)
439
 
                    sub_merge.base_rev_id = base_revision
440
 
                    sub_merge.do_merge()
441
 
 
442
 
        finally:
443
 
            if self.other_tree is not None:
444
 
                self.other_tree.unlock()
445
 
            if self.base_tree is not None:
446
 
                self.base_tree.unlock()
447
 
            self.this_tree.unlock()
 
710
            operation.add_cleanup(self.other_tree.unlock)
 
711
        merge = operation.run_simple()
448
712
        if len(merge.cooked_conflicts) == 0:
449
 
            if not self.ignore_zero and not is_quiet():
450
 
                note("All changes applied successfully.")
 
713
            if not self.ignore_zero and not trace.is_quiet():
 
714
                trace.note("All changes applied successfully.")
451
715
        else:
452
 
            note("%d conflicts encountered." % len(merge.cooked_conflicts))
 
716
            trace.note("%d conflicts encountered."
 
717
                       % len(merge.cooked_conflicts))
453
718
 
454
719
        return len(merge.cooked_conflicts)
455
720
 
456
721
 
 
722
class _InventoryNoneEntry(object):
 
723
    """This represents an inventory entry which *isn't there*.
 
724
 
 
725
    It simplifies the merging logic if we always have an InventoryEntry, even
 
726
    if it isn't actually present
 
727
    """
 
728
    executable = None
 
729
    kind = None
 
730
    name = None
 
731
    parent_id = None
 
732
    revision = None
 
733
    symlink_target = None
 
734
    text_sha1 = None
 
735
 
 
736
_none_entry = _InventoryNoneEntry()
 
737
 
 
738
 
457
739
class Merge3Merger(object):
458
740
    """Three-way merger that uses the merge3 text merger"""
459
741
    requires_base = True
463
745
    supports_cherrypick = True
464
746
    supports_reverse_cherrypick = True
465
747
    winner_idx = {"this": 2, "other": 1, "conflict": 1}
 
748
    supports_lca_trees = True
466
749
 
467
 
    def __init__(self, working_tree, this_tree, base_tree, other_tree, 
 
750
    def __init__(self, working_tree, this_tree, base_tree, other_tree,
468
751
                 interesting_ids=None, reprocess=False, show_base=False,
469
 
                 pb=DummyProgress(), pp=None, change_reporter=None,
 
752
                 pb=None, pp=None, change_reporter=None,
470
753
                 interesting_files=None, do_merge=True,
471
 
                 cherrypick=False):
 
754
                 cherrypick=False, lca_trees=None, this_branch=None):
472
755
        """Initialize the merger object and perform the merge.
473
756
 
474
757
        :param working_tree: The working tree to apply the merge to
475
758
        :param this_tree: The local tree in the merge operation
476
759
        :param base_tree: The common tree in the merge operation
477
 
        :param other_tree: The other other tree to merge changes from
 
760
        :param other_tree: The other tree to merge changes from
 
761
        :param this_branch: The branch associated with this_tree.  Defaults to
 
762
            this_tree.branch if not supplied.
478
763
        :param interesting_ids: The file_ids of files that should be
479
764
            participate in the merge.  May not be combined with
480
765
            interesting_files.
481
766
        :param: reprocess If True, perform conflict-reduction processing.
482
767
        :param show_base: If True, show the base revision in text conflicts.
483
768
            (incompatible with reprocess)
484
 
        :param pb: A Progress bar
 
769
        :param pb: ignored
485
770
        :param pp: A ProgressPhase object
486
771
        :param change_reporter: An object that should report changes made
487
772
        :param interesting_files: The tree-relative paths of files that should
490
775
            be combined with interesting_ids.  If neither interesting_files nor
491
776
            interesting_ids is specified, all files may participate in the
492
777
            merge.
 
778
        :param lca_trees: Can be set to a dictionary of {revision_id:rev_tree}
 
779
            if the ancestry was found to include a criss-cross merge.
 
780
            Otherwise should be None.
493
781
        """
494
782
        object.__init__(self)
495
783
        if interesting_files is not None and interesting_ids is not None:
496
784
            raise ValueError(
497
785
                'specify either interesting_ids or interesting_files')
 
786
        if this_branch is None:
 
787
            this_branch = this_tree.branch
498
788
        self.interesting_ids = interesting_ids
499
789
        self.interesting_files = interesting_files
500
790
        self.this_tree = working_tree
501
791
        self.base_tree = base_tree
502
792
        self.other_tree = other_tree
 
793
        self.this_branch = this_branch
503
794
        self._raw_conflicts = []
504
795
        self.cooked_conflicts = []
505
796
        self.reprocess = reprocess
506
797
        self.show_base = show_base
507
 
        self.pb = pb
508
 
        self.pp = pp
 
798
        self._lca_trees = lca_trees
 
799
        # Uncommenting this will change the default algorithm to always use
 
800
        # _entries_lca. This can be useful for running the test suite and
 
801
        # making sure we haven't missed any corner cases.
 
802
        # if lca_trees is None:
 
803
        #     self._lca_trees = [self.base_tree]
509
804
        self.change_reporter = change_reporter
510
805
        self.cherrypick = cherrypick
511
 
        if self.pp is None:
512
 
            self.pp = ProgressPhase("Merge phase", 3, self.pb)
513
806
        if do_merge:
514
807
            self.do_merge()
 
808
        if pp is not None:
 
809
            warnings.warn("pp argument to Merge3Merger is deprecated")
 
810
        if pb is not None:
 
811
            warnings.warn("pb argument to Merge3Merger is deprecated")
515
812
 
516
813
    def do_merge(self):
 
814
        operation = cleanup.OperationWithCleanups(self._do_merge)
517
815
        self.this_tree.lock_tree_write()
 
816
        operation.add_cleanup(self.this_tree.unlock)
518
817
        self.base_tree.lock_read()
 
818
        operation.add_cleanup(self.base_tree.unlock)
519
819
        self.other_tree.lock_read()
520
 
        self.tt = TreeTransform(self.this_tree, self.pb)
 
820
        operation.add_cleanup(self.other_tree.unlock)
 
821
        operation.run()
 
822
 
 
823
    def _do_merge(self, operation):
 
824
        self.tt = transform.TreeTransform(self.this_tree, None)
 
825
        operation.add_cleanup(self.tt.finalize)
 
826
        self._compute_transform()
 
827
        results = self.tt.apply(no_conflicts=True)
 
828
        self.write_modified(results)
521
829
        try:
522
 
            self.pp.next_phase()
523
 
            self._compute_transform()
524
 
            self.pp.next_phase()
525
 
            results = self.tt.apply(no_conflicts=True)
526
 
            self.write_modified(results)
527
 
            try:
528
 
                self.this_tree.add_conflicts(self.cooked_conflicts)
529
 
            except UnsupportedOperation:
530
 
                pass
531
 
        finally:
532
 
            self.tt.finalize()
533
 
            self.other_tree.unlock()
534
 
            self.base_tree.unlock()
535
 
            self.this_tree.unlock()
536
 
            self.pb.clear()
 
830
            self.this_tree.add_conflicts(self.cooked_conflicts)
 
831
        except errors.UnsupportedOperation:
 
832
            pass
537
833
 
538
834
    def make_preview_transform(self):
 
835
        operation = cleanup.OperationWithCleanups(self._make_preview_transform)
539
836
        self.base_tree.lock_read()
 
837
        operation.add_cleanup(self.base_tree.unlock)
540
838
        self.other_tree.lock_read()
541
 
        self.tt = TransformPreview(self.this_tree)
542
 
        try:
543
 
            self.pp.next_phase()
544
 
            self._compute_transform()
545
 
            self.pp.next_phase()
546
 
        finally:
547
 
            self.other_tree.unlock()
548
 
            self.base_tree.unlock()
549
 
            self.pb.clear()
 
839
        operation.add_cleanup(self.other_tree.unlock)
 
840
        return operation.run_simple()
 
841
 
 
842
    def _make_preview_transform(self):
 
843
        self.tt = transform.TransformPreview(self.this_tree)
 
844
        self._compute_transform()
550
845
        return self.tt
551
846
 
552
847
    def _compute_transform(self):
553
 
        entries = self._entries3()
 
848
        if self._lca_trees is None:
 
849
            entries = self._entries3()
 
850
            resolver = self._three_way
 
851
        else:
 
852
            entries = self._entries_lca()
 
853
            resolver = self._lca_multi_way
554
854
        child_pb = ui.ui_factory.nested_progress_bar()
555
855
        try:
 
856
            factories = Merger.hooks['merge_file_content']
 
857
            hooks = [factory(self) for factory in factories] + [self]
 
858
            self.active_hooks = [hook for hook in hooks if hook is not None]
556
859
            for num, (file_id, changed, parents3, names3,
557
860
                      executable3) in enumerate(entries):
558
861
                child_pb.update('Preparing file merge', num, len(entries))
559
 
                self._merge_names(file_id, parents3, names3)
 
862
                self._merge_names(file_id, parents3, names3, resolver=resolver)
560
863
                if changed:
561
 
                    file_status = self.merge_contents(file_id)
 
864
                    file_status = self._do_merge_contents(file_id)
562
865
                else:
563
866
                    file_status = 'unmodified'
564
867
                self._merge_executable(file_id,
565
 
                    executable3, file_status)
 
868
                    executable3, file_status, resolver=resolver)
566
869
        finally:
567
870
            child_pb.finished()
568
871
        self.fix_root()
569
 
        self.pp.next_phase()
 
872
        self._finish_computing_transform()
 
873
 
 
874
    def _finish_computing_transform(self):
 
875
        """Finalize the transform and report the changes.
 
876
 
 
877
        This is the second half of _compute_transform.
 
878
        """
570
879
        child_pb = ui.ui_factory.nested_progress_bar()
571
880
        try:
572
 
            fs_conflicts = resolve_conflicts(self.tt, child_pb,
573
 
                lambda t, c: conflict_pass(t, c, self.other_tree))
 
881
            fs_conflicts = transform.resolve_conflicts(self.tt, child_pb,
 
882
                lambda t, c: transform.conflict_pass(t, c, self.other_tree))
574
883
        finally:
575
884
            child_pb.finished()
576
885
        if self.change_reporter is not None:
579
888
                self.tt.iter_changes(), self.change_reporter)
580
889
        self.cook_conflicts(fs_conflicts)
581
890
        for conflict in self.cooked_conflicts:
582
 
            warning(conflict)
 
891
            trace.warning(unicode(conflict))
583
892
 
584
893
    def _entries3(self):
585
894
        """Gather data about files modified between three trees.
592
901
        """
593
902
        result = []
594
903
        iterator = self.other_tree.iter_changes(self.base_tree,
595
 
                include_unchanged=True, specific_files=self.interesting_files,
 
904
                specific_files=self.interesting_files,
596
905
                extra_trees=[self.this_tree])
 
906
        this_entries = dict((e.file_id, e) for p, e in
 
907
                            self.this_tree.iter_entries_by_dir(
 
908
                            self.interesting_ids))
597
909
        for (file_id, paths, changed, versioned, parents, names, kind,
598
910
             executable) in iterator:
599
911
            if (self.interesting_ids is not None and
600
912
                file_id not in self.interesting_ids):
601
913
                continue
602
 
            if file_id in self.this_tree.inventory:
603
 
                entry = self.this_tree.inventory[file_id]
 
914
            entry = this_entries.get(file_id)
 
915
            if entry is not None:
604
916
                this_name = entry.name
605
917
                this_parent = entry.parent_id
606
918
                this_executable = entry.executable
614
926
            result.append((file_id, changed, parents3, names3, executable3))
615
927
        return result
616
928
 
 
929
    def _entries_lca(self):
 
930
        """Gather data about files modified between multiple trees.
 
931
 
 
932
        This compares OTHER versus all LCA trees, and for interesting entries,
 
933
        it then compares with THIS and BASE.
 
934
 
 
935
        For the multi-valued entries, the format will be (BASE, [lca1, lca2])
 
936
 
 
937
        :return: [(file_id, changed, parents, names, executable)], where:
 
938
 
 
939
            * file_id: Simple file_id of the entry
 
940
            * changed: Boolean, True if the kind or contents changed else False
 
941
            * parents: ((base, [parent_id, in, lcas]), parent_id_other,
 
942
                        parent_id_this)
 
943
            * names:   ((base, [name, in, lcas]), name_in_other, name_in_this)
 
944
            * executable: ((base, [exec, in, lcas]), exec_in_other,
 
945
                        exec_in_this)
 
946
        """
 
947
        if self.interesting_files is not None:
 
948
            lookup_trees = [self.this_tree, self.base_tree]
 
949
            lookup_trees.extend(self._lca_trees)
 
950
            # I think we should include the lca trees as well
 
951
            interesting_ids = self.other_tree.paths2ids(self.interesting_files,
 
952
                                                        lookup_trees)
 
953
        else:
 
954
            interesting_ids = self.interesting_ids
 
955
        result = []
 
956
        walker = _mod_tree.MultiWalker(self.other_tree, self._lca_trees)
 
957
 
 
958
        base_inventory = self.base_tree.inventory
 
959
        this_inventory = self.this_tree.inventory
 
960
        for path, file_id, other_ie, lca_values in walker.iter_all():
 
961
            # Is this modified at all from any of the other trees?
 
962
            if other_ie is None:
 
963
                other_ie = _none_entry
 
964
            if interesting_ids is not None and file_id not in interesting_ids:
 
965
                continue
 
966
 
 
967
            # If other_revision is found in any of the lcas, that means this
 
968
            # node is uninteresting. This is because when merging, if there are
 
969
            # multiple heads(), we have to create a new node. So if we didn't,
 
970
            # we know that the ancestry is linear, and that OTHER did not
 
971
            # modify anything
 
972
            # See doc/developers/lca_merge_resolution.txt for details
 
973
            other_revision = other_ie.revision
 
974
            if other_revision is not None:
 
975
                # We can't use this shortcut when other_revision is None,
 
976
                # because it may be None because things are WorkingTrees, and
 
977
                # not because it is *actually* None.
 
978
                is_unmodified = False
 
979
                for lca_path, ie in lca_values:
 
980
                    if ie is not None and ie.revision == other_revision:
 
981
                        is_unmodified = True
 
982
                        break
 
983
                if is_unmodified:
 
984
                    continue
 
985
 
 
986
            lca_entries = []
 
987
            for lca_path, lca_ie in lca_values:
 
988
                if lca_ie is None:
 
989
                    lca_entries.append(_none_entry)
 
990
                else:
 
991
                    lca_entries.append(lca_ie)
 
992
 
 
993
            if file_id in base_inventory:
 
994
                base_ie = base_inventory[file_id]
 
995
            else:
 
996
                base_ie = _none_entry
 
997
 
 
998
            if file_id in this_inventory:
 
999
                this_ie = this_inventory[file_id]
 
1000
            else:
 
1001
                this_ie = _none_entry
 
1002
 
 
1003
            lca_kinds = []
 
1004
            lca_parent_ids = []
 
1005
            lca_names = []
 
1006
            lca_executable = []
 
1007
            for lca_ie in lca_entries:
 
1008
                lca_kinds.append(lca_ie.kind)
 
1009
                lca_parent_ids.append(lca_ie.parent_id)
 
1010
                lca_names.append(lca_ie.name)
 
1011
                lca_executable.append(lca_ie.executable)
 
1012
 
 
1013
            kind_winner = self._lca_multi_way(
 
1014
                (base_ie.kind, lca_kinds),
 
1015
                other_ie.kind, this_ie.kind)
 
1016
            parent_id_winner = self._lca_multi_way(
 
1017
                (base_ie.parent_id, lca_parent_ids),
 
1018
                other_ie.parent_id, this_ie.parent_id)
 
1019
            name_winner = self._lca_multi_way(
 
1020
                (base_ie.name, lca_names),
 
1021
                other_ie.name, this_ie.name)
 
1022
 
 
1023
            content_changed = True
 
1024
            if kind_winner == 'this':
 
1025
                # No kind change in OTHER, see if there are *any* changes
 
1026
                if other_ie.kind == 'directory':
 
1027
                    if parent_id_winner == 'this' and name_winner == 'this':
 
1028
                        # No change for this directory in OTHER, skip
 
1029
                        continue
 
1030
                    content_changed = False
 
1031
                elif other_ie.kind is None or other_ie.kind == 'file':
 
1032
                    def get_sha1(ie, tree):
 
1033
                        if ie.kind != 'file':
 
1034
                            return None
 
1035
                        return tree.get_file_sha1(file_id)
 
1036
                    base_sha1 = get_sha1(base_ie, self.base_tree)
 
1037
                    lca_sha1s = [get_sha1(ie, tree) for ie, tree
 
1038
                                 in zip(lca_entries, self._lca_trees)]
 
1039
                    this_sha1 = get_sha1(this_ie, self.this_tree)
 
1040
                    other_sha1 = get_sha1(other_ie, self.other_tree)
 
1041
                    sha1_winner = self._lca_multi_way(
 
1042
                        (base_sha1, lca_sha1s), other_sha1, this_sha1,
 
1043
                        allow_overriding_lca=False)
 
1044
                    exec_winner = self._lca_multi_way(
 
1045
                        (base_ie.executable, lca_executable),
 
1046
                        other_ie.executable, this_ie.executable)
 
1047
                    if (parent_id_winner == 'this' and name_winner == 'this'
 
1048
                        and sha1_winner == 'this' and exec_winner == 'this'):
 
1049
                        # No kind, parent, name, exec, or content change for
 
1050
                        # OTHER, so this node is not considered interesting
 
1051
                        continue
 
1052
                    if sha1_winner == 'this':
 
1053
                        content_changed = False
 
1054
                elif other_ie.kind == 'symlink':
 
1055
                    def get_target(ie, tree):
 
1056
                        if ie.kind != 'symlink':
 
1057
                            return None
 
1058
                        return tree.get_symlink_target(file_id)
 
1059
                    base_target = get_target(base_ie, self.base_tree)
 
1060
                    lca_targets = [get_target(ie, tree) for ie, tree
 
1061
                                   in zip(lca_entries, self._lca_trees)]
 
1062
                    this_target = get_target(this_ie, self.this_tree)
 
1063
                    other_target = get_target(other_ie, self.other_tree)
 
1064
                    target_winner = self._lca_multi_way(
 
1065
                        (base_target, lca_targets),
 
1066
                        other_target, this_target)
 
1067
                    if (parent_id_winner == 'this' and name_winner == 'this'
 
1068
                        and target_winner == 'this'):
 
1069
                        # No kind, parent, name, or symlink target change
 
1070
                        # not interesting
 
1071
                        continue
 
1072
                    if target_winner == 'this':
 
1073
                        content_changed = False
 
1074
                elif other_ie.kind == 'tree-reference':
 
1075
                    # The 'changed' information seems to be handled at a higher
 
1076
                    # level. At least, _entries3 returns False for content
 
1077
                    # changed, even when at a new revision_id.
 
1078
                    content_changed = False
 
1079
                    if (parent_id_winner == 'this' and name_winner == 'this'):
 
1080
                        # Nothing interesting
 
1081
                        continue
 
1082
                else:
 
1083
                    raise AssertionError('unhandled kind: %s' % other_ie.kind)
 
1084
 
 
1085
            # If we have gotten this far, that means something has changed
 
1086
            result.append((file_id, content_changed,
 
1087
                           ((base_ie.parent_id, lca_parent_ids),
 
1088
                            other_ie.parent_id, this_ie.parent_id),
 
1089
                           ((base_ie.name, lca_names),
 
1090
                            other_ie.name, this_ie.name),
 
1091
                           ((base_ie.executable, lca_executable),
 
1092
                            other_ie.executable, this_ie.executable)
 
1093
                          ))
 
1094
        return result
 
1095
 
617
1096
    def fix_root(self):
618
 
        try:
619
 
            self.tt.final_kind(self.tt.root)
620
 
        except NoSuchFile:
 
1097
        if self.tt.final_kind(self.tt.root) is None:
621
1098
            self.tt.cancel_deletion(self.tt.root)
622
1099
        if self.tt.final_file_id(self.tt.root) is None:
623
 
            self.tt.version_file(self.tt.tree_file_id(self.tt.root), 
 
1100
            self.tt.version_file(self.tt.tree_file_id(self.tt.root),
624
1101
                                 self.tt.root)
625
 
        if self.other_tree.inventory.root is None:
626
 
            return
627
1102
        other_root_file_id = self.other_tree.get_root_id()
 
1103
        if other_root_file_id is None:
 
1104
            return
628
1105
        other_root = self.tt.trans_id_file_id(other_root_file_id)
629
1106
        if other_root == self.tt.root:
630
1107
            return
631
 
        try:
632
 
            self.tt.final_kind(other_root)
633
 
        except NoSuchFile:
634
 
            return
635
1108
        if self.other_tree.inventory.root.file_id in self.this_tree.inventory:
636
 
            # the other tree's root is a non-root in the current tree
 
1109
            # the other tree's root is a non-root in the current tree (as when
 
1110
            # a previously unrelated branch is merged into another)
637
1111
            return
638
 
        self.reparent_children(self.other_tree.inventory.root, self.tt.root)
639
 
        self.tt.cancel_creation(other_root)
640
 
        self.tt.cancel_versioning(other_root)
641
 
 
642
 
    def reparent_children(self, ie, target):
643
 
        for thing, child in ie.children.iteritems():
 
1112
        if self.tt.final_kind(other_root) is not None:
 
1113
            other_root_is_present = True
 
1114
        else:
 
1115
            # other_root doesn't have a physical representation. We still need
 
1116
            # to move any references to the actual root of the tree.
 
1117
            other_root_is_present = False
 
1118
        # 'other_tree.inventory.root' is not present in this tree. We are
 
1119
        # calling adjust_path for children which *want* to be present with a
 
1120
        # correct place to go.
 
1121
        for _, child in self.other_tree.inventory.root.children.iteritems():
644
1122
            trans_id = self.tt.trans_id_file_id(child.file_id)
645
 
            self.tt.adjust_path(self.tt.final_name(trans_id), target, trans_id)
 
1123
            if not other_root_is_present:
 
1124
                if self.tt.final_kind(trans_id) is not None:
 
1125
                    # The item exist in the final tree and has a defined place
 
1126
                    # to go already.
 
1127
                    continue
 
1128
            # Move the item into the root
 
1129
            try:
 
1130
                final_name = self.tt.final_name(trans_id)
 
1131
            except errors.NoFinalPath:
 
1132
                # This file is not present anymore, ignore it.
 
1133
                continue
 
1134
            self.tt.adjust_path(final_name, self.tt.root, trans_id)
 
1135
        if other_root_is_present:
 
1136
            self.tt.cancel_creation(other_root)
 
1137
            self.tt.cancel_versioning(other_root)
646
1138
 
647
1139
    def write_modified(self, results):
648
1140
        modified_hashes = {}
669
1161
        if entry is None:
670
1162
            return None
671
1163
        return entry.name
672
 
    
 
1164
 
673
1165
    @staticmethod
674
1166
    def contents_sha1(tree, file_id):
675
1167
        """Determine the sha1 of the file contents (used as a key method)."""
680
1172
    @staticmethod
681
1173
    def executable(tree, file_id):
682
1174
        """Determine the executability of a file-id (used as a key method)."""
683
 
        if file_id not in tree:
 
1175
        if not tree.has_id(file_id):
684
1176
            return None
685
1177
        if tree.kind(file_id) != "file":
686
1178
            return False
689
1181
    @staticmethod
690
1182
    def kind(tree, file_id):
691
1183
        """Determine the kind of a file-id (used as a key method)."""
692
 
        if file_id not in tree:
 
1184
        if not tree.has_id(file_id):
693
1185
            return None
694
1186
        return tree.kind(file_id)
695
1187
 
696
1188
    @staticmethod
697
1189
    def _three_way(base, other, this):
698
 
        #if base == other, either they all agree, or only THIS has changed.
699
1190
        if base == other:
 
1191
            # if 'base == other', either they all agree, or only 'this' has
 
1192
            # changed.
700
1193
            return 'this'
701
1194
        elif this not in (base, other):
 
1195
            # 'this' is neither 'base' nor 'other', so both sides changed
702
1196
            return 'conflict'
703
 
        # "Ambiguous clean merge" -- both sides have made the same change.
704
1197
        elif this == other:
 
1198
            # "Ambiguous clean merge" -- both sides have made the same change.
705
1199
            return "this"
706
 
        # this == base: only other has changed.
707
1200
        else:
 
1201
            # this == base: only other has changed.
708
1202
            return "other"
709
1203
 
710
1204
    @staticmethod
 
1205
    def _lca_multi_way(bases, other, this, allow_overriding_lca=True):
 
1206
        """Consider LCAs when determining whether a change has occurred.
 
1207
 
 
1208
        If LCAS are all identical, this is the same as a _three_way comparison.
 
1209
 
 
1210
        :param bases: value in (BASE, [LCAS])
 
1211
        :param other: value in OTHER
 
1212
        :param this: value in THIS
 
1213
        :param allow_overriding_lca: If there is more than one unique lca
 
1214
            value, allow OTHER to override THIS if it has a new value, and
 
1215
            THIS only has an lca value, or vice versa. This is appropriate for
 
1216
            truly scalar values, not as much for non-scalars.
 
1217
        :return: 'this', 'other', or 'conflict' depending on whether an entry
 
1218
            changed or not.
 
1219
        """
 
1220
        # See doc/developers/lca_tree_merging.txt for details about this
 
1221
        # algorithm.
 
1222
        if other == this:
 
1223
            # Either Ambiguously clean, or nothing was actually changed. We
 
1224
            # don't really care
 
1225
            return 'this'
 
1226
        base_val, lca_vals = bases
 
1227
        # Remove 'base_val' from the lca_vals, because it is not interesting
 
1228
        filtered_lca_vals = [lca_val for lca_val in lca_vals
 
1229
                                      if lca_val != base_val]
 
1230
        if len(filtered_lca_vals) == 0:
 
1231
            return Merge3Merger._three_way(base_val, other, this)
 
1232
 
 
1233
        unique_lca_vals = set(filtered_lca_vals)
 
1234
        if len(unique_lca_vals) == 1:
 
1235
            return Merge3Merger._three_way(unique_lca_vals.pop(), other, this)
 
1236
 
 
1237
        if allow_overriding_lca:
 
1238
            if other in unique_lca_vals:
 
1239
                if this in unique_lca_vals:
 
1240
                    # Each side picked a different lca, conflict
 
1241
                    return 'conflict'
 
1242
                else:
 
1243
                    # This has a value which supersedes both lca values, and
 
1244
                    # other only has an lca value
 
1245
                    return 'this'
 
1246
            elif this in unique_lca_vals:
 
1247
                # OTHER has a value which supersedes both lca values, and this
 
1248
                # only has an lca value
 
1249
                return 'other'
 
1250
 
 
1251
        # At this point, the lcas disagree, and the tip disagree
 
1252
        return 'conflict'
 
1253
 
 
1254
    @staticmethod
 
1255
    @deprecated_method(deprecated_in((2, 2, 0)))
711
1256
    def scalar_three_way(this_tree, base_tree, other_tree, file_id, key):
712
1257
        """Do a three-way test on a scalar.
713
1258
        Return "this", "other" or "conflict", depending whether a value wins.
728
1273
 
729
1274
    def merge_names(self, file_id):
730
1275
        def get_entry(tree):
731
 
            if file_id in tree.inventory:
 
1276
            if tree.has_id(file_id):
732
1277
                return tree.inventory[file_id]
733
1278
            else:
734
1279
                return None
745
1290
            else:
746
1291
                names.append(entry.name)
747
1292
                parents.append(entry.parent_id)
748
 
        return self._merge_names(file_id, parents, names)
 
1293
        return self._merge_names(file_id, parents, names,
 
1294
                                 resolver=self._three_way)
749
1295
 
750
 
    def _merge_names(self, file_id, parents, names):
 
1296
    def _merge_names(self, file_id, parents, names, resolver):
751
1297
        """Perform a merge on file_id names and parents"""
752
1298
        base_name, other_name, this_name = names
753
1299
        base_parent, other_parent, this_parent = parents
754
1300
 
755
 
        name_winner = self._three_way(*names)
 
1301
        name_winner = resolver(*names)
756
1302
 
757
 
        parent_id_winner = self._three_way(*parents)
 
1303
        parent_id_winner = resolver(*parents)
758
1304
        if this_name is None:
759
1305
            if name_winner == "this":
760
1306
                name_winner = "other"
762
1308
                parent_id_winner = "other"
763
1309
        if name_winner == "this" and parent_id_winner == "this":
764
1310
            return
765
 
        if name_winner == "conflict":
766
 
            trans_id = self.tt.trans_id_file_id(file_id)
767
 
            self._raw_conflicts.append(('name conflict', trans_id, 
768
 
                                        this_name, other_name))
769
 
        if parent_id_winner == "conflict":
770
 
            trans_id = self.tt.trans_id_file_id(file_id)
771
 
            self._raw_conflicts.append(('parent conflict', trans_id, 
772
 
                                        this_parent, other_parent))
 
1311
        if name_winner == 'conflict' or parent_id_winner == 'conflict':
 
1312
            # Creating helpers (.OTHER or .THIS) here cause problems down the
 
1313
            # road if a ContentConflict needs to be created so we should not do
 
1314
            # that
 
1315
            trans_id = self.tt.trans_id_file_id(file_id)
 
1316
            self._raw_conflicts.append(('path conflict', trans_id, file_id,
 
1317
                                        this_parent, this_name,
 
1318
                                        other_parent, other_name))
773
1319
        if other_name is None:
774
 
            # it doesn't matter whether the result was 'other' or 
 
1320
            # it doesn't matter whether the result was 'other' or
775
1321
            # 'conflict'-- if there's no 'other', we leave it alone.
776
1322
            return
777
 
        # if we get here, name_winner and parent_winner are set to safe values.
778
 
        trans_id = self.tt.trans_id_file_id(file_id)
779
1323
        parent_id = parents[self.winner_idx[parent_id_winner]]
780
1324
        if parent_id is not None:
781
 
            parent_trans_id = self.tt.trans_id_file_id(parent_id)
 
1325
            # if we get here, name_winner and parent_winner are set to safe
 
1326
            # values.
782
1327
            self.tt.adjust_path(names[self.winner_idx[name_winner]],
783
 
                                parent_trans_id, trans_id)
 
1328
                                self.tt.trans_id_file_id(parent_id),
 
1329
                                self.tt.trans_id_file_id(file_id))
784
1330
 
785
 
    def merge_contents(self, file_id):
786
 
        """Performa a merge on file_id contents."""
 
1331
    def _do_merge_contents(self, file_id):
 
1332
        """Performs a merge on file_id contents."""
787
1333
        def contents_pair(tree):
788
1334
            if file_id not in tree:
789
1335
                return (None, None)
796
1342
                contents = None
797
1343
            return kind, contents
798
1344
 
799
 
        def contents_conflict():
800
 
            trans_id = self.tt.trans_id_file_id(file_id)
801
 
            name = self.tt.final_name(trans_id)
802
 
            parent_id = self.tt.final_parent(trans_id)
803
 
            if file_id in self.this_tree.inventory:
804
 
                self.tt.unversion_file(trans_id)
805
 
                if file_id in self.this_tree:
806
 
                    self.tt.delete_contents(trans_id)
807
 
            file_group = self._dump_conflicts(name, parent_id, file_id, 
808
 
                                              set_version=True)
809
 
            self._raw_conflicts.append(('contents conflict', file_group))
810
 
 
811
1345
        # See SPOT run.  run, SPOT, run.
812
1346
        # So we're not QUITE repeating ourselves; we do tricky things with
813
1347
        # file kind...
814
1348
        base_pair = contents_pair(self.base_tree)
815
1349
        other_pair = contents_pair(self.other_tree)
816
 
        if base_pair == other_pair:
817
 
            # OTHER introduced no changes
818
 
            return "unmodified"
819
 
        this_pair = contents_pair(self.this_tree)
820
 
        if this_pair == other_pair:
821
 
            # THIS and OTHER introduced the same changes
822
 
            return "unmodified"
823
 
        else:
824
 
            trans_id = self.tt.trans_id_file_id(file_id)
825
 
            if this_pair == base_pair:
826
 
                # only OTHER introduced changes
827
 
                if file_id in self.this_tree:
828
 
                    # Remove any existing contents
829
 
                    self.tt.delete_contents(trans_id)
830
 
                if file_id in self.other_tree:
831
 
                    # OTHER changed the file
832
 
                    create_by_entry(self.tt, 
833
 
                                    self.other_tree.inventory[file_id], 
834
 
                                    self.other_tree, trans_id)
835
 
                    if file_id not in self.this_tree.inventory:
836
 
                        self.tt.version_file(file_id, trans_id)
837
 
                    return "modified"
838
 
                elif file_id in self.this_tree.inventory:
839
 
                    # OTHER deleted the file
840
 
                    self.tt.unversion_file(trans_id)
841
 
                    return "deleted"
842
 
            #BOTH THIS and OTHER introduced changes; scalar conflict
843
 
            elif this_pair[0] == "file" and other_pair[0] == "file":
844
 
                # THIS and OTHER are both files, so text merge.  Either
845
 
                # BASE is a file, or both converted to files, so at least we
846
 
                # have agreement that output should be a file.
847
 
                try:
848
 
                    self.text_merge(file_id, trans_id)
849
 
                except BinaryFile:
850
 
                    return contents_conflict()
851
 
                if file_id not in self.this_tree.inventory:
852
 
                    self.tt.version_file(file_id, trans_id)
853
 
                try:
854
 
                    self.tt.tree_kind(trans_id)
855
 
                    self.tt.delete_contents(trans_id)
856
 
                except NoSuchFile:
857
 
                    pass
858
 
                return "modified"
859
 
            else:
860
 
                # Scalar conflict, can't text merge.  Dump conflicts
861
 
                return contents_conflict()
 
1350
        if self._lca_trees:
 
1351
            this_pair = contents_pair(self.this_tree)
 
1352
            lca_pairs = [contents_pair(tree) for tree in self._lca_trees]
 
1353
            winner = self._lca_multi_way((base_pair, lca_pairs), other_pair,
 
1354
                                         this_pair, allow_overriding_lca=False)
 
1355
        else:
 
1356
            if base_pair == other_pair:
 
1357
                winner = 'this'
 
1358
            else:
 
1359
                # We delayed evaluating this_pair as long as we can to avoid
 
1360
                # unnecessary sha1 calculation
 
1361
                this_pair = contents_pair(self.this_tree)
 
1362
                winner = self._three_way(base_pair, other_pair, this_pair)
 
1363
        if winner == 'this':
 
1364
            # No interesting changes introduced by OTHER
 
1365
            return "unmodified"
 
1366
        # We have a hypothetical conflict, but if we have files, then we
 
1367
        # can try to merge the content
 
1368
        trans_id = self.tt.trans_id_file_id(file_id)
 
1369
        params = MergeHookParams(self, file_id, trans_id, this_pair[0],
 
1370
            other_pair[0], winner)
 
1371
        hooks = self.active_hooks
 
1372
        hook_status = 'not_applicable'
 
1373
        for hook in hooks:
 
1374
            hook_status, lines = hook.merge_contents(params)
 
1375
            if hook_status != 'not_applicable':
 
1376
                # Don't try any more hooks, this one applies.
 
1377
                break
 
1378
        result = "modified"
 
1379
        if hook_status == 'not_applicable':
 
1380
            # This is a contents conflict, because none of the available
 
1381
            # functions could merge it.
 
1382
            result = None
 
1383
            name = self.tt.final_name(trans_id)
 
1384
            parent_id = self.tt.final_parent(trans_id)
 
1385
            if self.this_tree.has_id(file_id):
 
1386
                self.tt.unversion_file(trans_id)
 
1387
            file_group = self._dump_conflicts(name, parent_id, file_id,
 
1388
                                              set_version=True)
 
1389
            self._raw_conflicts.append(('contents conflict', file_group))
 
1390
        elif hook_status == 'success':
 
1391
            self.tt.create_file(lines, trans_id)
 
1392
        elif hook_status == 'conflicted':
 
1393
            # XXX: perhaps the hook should be able to provide
 
1394
            # the BASE/THIS/OTHER files?
 
1395
            self.tt.create_file(lines, trans_id)
 
1396
            self._raw_conflicts.append(('text conflict', trans_id))
 
1397
            name = self.tt.final_name(trans_id)
 
1398
            parent_id = self.tt.final_parent(trans_id)
 
1399
            self._dump_conflicts(name, parent_id, file_id)
 
1400
        elif hook_status == 'delete':
 
1401
            self.tt.unversion_file(trans_id)
 
1402
            result = "deleted"
 
1403
        elif hook_status == 'done':
 
1404
            # The hook function did whatever it needs to do directly, no
 
1405
            # further action needed here.
 
1406
            pass
 
1407
        else:
 
1408
            raise AssertionError('unknown hook_status: %r' % (hook_status,))
 
1409
        if not self.this_tree.has_id(file_id) and result == "modified":
 
1410
            self.tt.version_file(file_id, trans_id)
 
1411
        # The merge has been performed, so the old contents should not be
 
1412
        # retained.
 
1413
        self.tt.delete_contents(trans_id)
 
1414
        return result
 
1415
 
 
1416
    def _default_other_winner_merge(self, merge_hook_params):
 
1417
        """Replace this contents with other."""
 
1418
        file_id = merge_hook_params.file_id
 
1419
        trans_id = merge_hook_params.trans_id
 
1420
        file_in_this = self.this_tree.has_id(file_id)
 
1421
        if self.other_tree.has_id(file_id):
 
1422
            # OTHER changed the file
 
1423
            wt = self.this_tree
 
1424
            if wt.supports_content_filtering():
 
1425
                # We get the path from the working tree if it exists.
 
1426
                # That fails though when OTHER is adding a file, so
 
1427
                # we fall back to the other tree to find the path if
 
1428
                # it doesn't exist locally.
 
1429
                try:
 
1430
                    filter_tree_path = wt.id2path(file_id)
 
1431
                except errors.NoSuchId:
 
1432
                    filter_tree_path = self.other_tree.id2path(file_id)
 
1433
            else:
 
1434
                # Skip the id2path lookup for older formats
 
1435
                filter_tree_path = None
 
1436
            transform.create_from_tree(self.tt, trans_id,
 
1437
                             self.other_tree, file_id,
 
1438
                             filter_tree_path=filter_tree_path)
 
1439
            return 'done', None
 
1440
        elif file_in_this:
 
1441
            # OTHER deleted the file
 
1442
            return 'delete', None
 
1443
        else:
 
1444
            raise AssertionError(
 
1445
                'winner is OTHER, but file_id %r not in THIS or OTHER tree'
 
1446
                % (file_id,))
 
1447
 
 
1448
    def merge_contents(self, merge_hook_params):
 
1449
        """Fallback merge logic after user installed hooks."""
 
1450
        # This function is used in merge hooks as the fallback instance.
 
1451
        # Perhaps making this function and the functions it calls be a 
 
1452
        # a separate class would be better.
 
1453
        if merge_hook_params.winner == 'other':
 
1454
            # OTHER is a straight winner, so replace this contents with other
 
1455
            return self._default_other_winner_merge(merge_hook_params)
 
1456
        elif merge_hook_params.is_file_merge():
 
1457
            # THIS and OTHER are both files, so text merge.  Either
 
1458
            # BASE is a file, or both converted to files, so at least we
 
1459
            # have agreement that output should be a file.
 
1460
            try:
 
1461
                self.text_merge(merge_hook_params.file_id,
 
1462
                    merge_hook_params.trans_id)
 
1463
            except errors.BinaryFile:
 
1464
                return 'not_applicable', None
 
1465
            return 'done', None
 
1466
        else:
 
1467
            return 'not_applicable', None
862
1468
 
863
1469
    def get_lines(self, tree, file_id):
864
1470
        """Return the lines in a file, or an empty list."""
865
 
        if file_id in tree:
866
 
            return tree.get_file(file_id).readlines()
 
1471
        if tree.has_id(file_id):
 
1472
            return tree.get_file_lines(file_id)
867
1473
        else:
868
1474
            return []
869
1475
 
871
1477
        """Perform a three-way text merge on a file_id"""
872
1478
        # it's possible that we got here with base as a different type.
873
1479
        # if so, we just want two-way text conflicts.
874
 
        if file_id in self.base_tree and \
 
1480
        if self.base_tree.has_id(file_id) and \
875
1481
            self.base_tree.kind(file_id) == "file":
876
1482
            base_lines = self.get_lines(self.base_tree, file_id)
877
1483
        else:
878
1484
            base_lines = []
879
1485
        other_lines = self.get_lines(self.other_tree, file_id)
880
1486
        this_lines = self.get_lines(self.this_tree, file_id)
881
 
        m3 = Merge3(base_lines, this_lines, other_lines,
882
 
                    is_cherrypick=self.cherrypick)
 
1487
        m3 = merge3.Merge3(base_lines, this_lines, other_lines,
 
1488
                           is_cherrypick=self.cherrypick)
883
1489
        start_marker = "!START OF MERGE CONFLICT!" + "I HOPE THIS IS UNIQUE"
884
1490
        if self.show_base is True:
885
1491
            base_marker = '|' * 7
888
1494
 
889
1495
        def iter_merge3(retval):
890
1496
            retval["text_conflicts"] = False
891
 
            for line in m3.merge_lines(name_a = "TREE", 
892
 
                                       name_b = "MERGE-SOURCE", 
 
1497
            for line in m3.merge_lines(name_a = "TREE",
 
1498
                                       name_b = "MERGE-SOURCE",
893
1499
                                       name_base = "BASE-REVISION",
894
 
                                       start_marker=start_marker, 
 
1500
                                       start_marker=start_marker,
895
1501
                                       base_marker=base_marker,
896
1502
                                       reprocess=self.reprocess):
897
1503
                if line.startswith(start_marker):
906
1512
            self._raw_conflicts.append(('text conflict', trans_id))
907
1513
            name = self.tt.final_name(trans_id)
908
1514
            parent_id = self.tt.final_parent(trans_id)
909
 
            file_group = self._dump_conflicts(name, parent_id, file_id, 
 
1515
            file_group = self._dump_conflicts(name, parent_id, file_id,
910
1516
                                              this_lines, base_lines,
911
1517
                                              other_lines)
912
1518
            file_group.append(trans_id)
913
1519
 
914
 
    def _dump_conflicts(self, name, parent_id, file_id, this_lines=None, 
 
1520
    def _dump_conflicts(self, name, parent_id, file_id, this_lines=None,
915
1521
                        base_lines=None, other_lines=None, set_version=False,
916
1522
                        no_base=False):
917
1523
        """Emit conflict files.
919
1525
        determined automatically.  If set_version is true, the .OTHER, .THIS
920
1526
        or .BASE (in that order) will be created as versioned files.
921
1527
        """
922
 
        data = [('OTHER', self.other_tree, other_lines), 
 
1528
        data = [('OTHER', self.other_tree, other_lines),
923
1529
                ('THIS', self.this_tree, this_lines)]
924
1530
        if not no_base:
925
1531
            data.append(('BASE', self.base_tree, base_lines))
 
1532
 
 
1533
        # We need to use the actual path in the working tree of the file here,
 
1534
        # ignoring the conflict suffixes
 
1535
        wt = self.this_tree
 
1536
        if wt.supports_content_filtering():
 
1537
            try:
 
1538
                filter_tree_path = wt.id2path(file_id)
 
1539
            except errors.NoSuchId:
 
1540
                # file has been deleted
 
1541
                filter_tree_path = None
 
1542
        else:
 
1543
            # Skip the id2path lookup for older formats
 
1544
            filter_tree_path = None
 
1545
 
926
1546
        versioned = False
927
1547
        file_group = []
928
1548
        for suffix, tree, lines in data:
929
 
            if file_id in tree:
 
1549
            if tree.has_id(file_id):
930
1550
                trans_id = self._conflict_file(name, parent_id, tree, file_id,
931
 
                                               suffix, lines)
 
1551
                                               suffix, lines, filter_tree_path)
932
1552
                file_group.append(trans_id)
933
1553
                if set_version and not versioned:
934
1554
                    self.tt.version_file(file_id, trans_id)
935
1555
                    versioned = True
936
1556
        return file_group
937
 
           
938
 
    def _conflict_file(self, name, parent_id, tree, file_id, suffix, 
939
 
                       lines=None):
 
1557
 
 
1558
    def _conflict_file(self, name, parent_id, tree, file_id, suffix,
 
1559
                       lines=None, filter_tree_path=None):
940
1560
        """Emit a single conflict file."""
941
1561
        name = name + '.' + suffix
942
1562
        trans_id = self.tt.create_path(name, parent_id)
943
 
        entry = tree.inventory[file_id]
944
 
        create_by_entry(self.tt, entry, tree, trans_id, lines)
 
1563
        transform.create_from_tree(self.tt, trans_id, tree, file_id, lines,
 
1564
            filter_tree_path)
945
1565
        return trans_id
946
1566
 
947
1567
    def merge_executable(self, file_id, file_status):
948
1568
        """Perform a merge on the execute bit."""
949
1569
        executable = [self.executable(t, file_id) for t in (self.base_tree,
950
1570
                      self.other_tree, self.this_tree)]
951
 
        self._merge_executable(file_id, executable, file_status)
 
1571
        self._merge_executable(file_id, executable, file_status,
 
1572
                               resolver=self._three_way)
952
1573
 
953
 
    def _merge_executable(self, file_id, executable, file_status):
 
1574
    def _merge_executable(self, file_id, executable, file_status,
 
1575
                          resolver):
954
1576
        """Perform a merge on the execute bit."""
955
1577
        base_executable, other_executable, this_executable = executable
956
1578
        if file_status == "deleted":
957
1579
            return
958
 
        winner = self._three_way(*executable)
 
1580
        winner = resolver(*executable)
959
1581
        if winner == "conflict":
960
1582
        # There must be a None in here, if we have a conflict, but we
961
1583
        # need executability since file status was not deleted.
966
1588
        if winner == 'this' and file_status != "modified":
967
1589
            return
968
1590
        trans_id = self.tt.trans_id_file_id(file_id)
969
 
        try:
970
 
            if self.tt.final_kind(trans_id) != "file":
971
 
                return
972
 
        except NoSuchFile:
 
1591
        if self.tt.final_kind(trans_id) != "file":
973
1592
            return
974
1593
        if winner == "this":
975
1594
            executability = this_executable
976
1595
        else:
977
 
            if file_id in self.other_tree:
 
1596
            if self.other_tree.has_id(file_id):
978
1597
                executability = other_executable
979
 
            elif file_id in self.this_tree:
 
1598
            elif self.this_tree.has_id(file_id):
980
1599
                executability = this_executable
981
 
            elif file_id in self.base_tree:
 
1600
            elif self.base_tree_has_id(file_id):
982
1601
                executability = base_executable
983
1602
        if executability is not None:
984
1603
            trans_id = self.tt.trans_id_file_id(file_id)
986
1605
 
987
1606
    def cook_conflicts(self, fs_conflicts):
988
1607
        """Convert all conflicts into a form that doesn't depend on trans_id"""
989
 
        from conflicts import Conflict
990
 
        name_conflicts = {}
991
 
        self.cooked_conflicts.extend(cook_conflicts(fs_conflicts, self.tt))
992
 
        fp = FinalPaths(self.tt)
 
1608
        self.cooked_conflicts.extend(transform.cook_conflicts(
 
1609
                fs_conflicts, self.tt))
 
1610
        fp = transform.FinalPaths(self.tt)
993
1611
        for conflict in self._raw_conflicts:
994
1612
            conflict_type = conflict[0]
995
 
            if conflict_type in ('name conflict', 'parent conflict'):
996
 
                trans_id = conflict[1]
997
 
                conflict_args = conflict[2:]
998
 
                if trans_id not in name_conflicts:
999
 
                    name_conflicts[trans_id] = {}
1000
 
                unique_add(name_conflicts[trans_id], conflict_type, 
1001
 
                           conflict_args)
1002
 
            if conflict_type == 'contents conflict':
 
1613
            if conflict_type == 'path conflict':
 
1614
                (trans_id, file_id,
 
1615
                this_parent, this_name,
 
1616
                other_parent, other_name) = conflict[1:]
 
1617
                if this_parent is None or this_name is None:
 
1618
                    this_path = '<deleted>'
 
1619
                else:
 
1620
                    parent_path =  fp.get_path(
 
1621
                        self.tt.trans_id_file_id(this_parent))
 
1622
                    this_path = osutils.pathjoin(parent_path, this_name)
 
1623
                if other_parent is None or other_name is None:
 
1624
                    other_path = '<deleted>'
 
1625
                else:
 
1626
                    parent_path =  fp.get_path(
 
1627
                        self.tt.trans_id_file_id(other_parent))
 
1628
                    other_path = osutils.pathjoin(parent_path, other_name)
 
1629
                c = _mod_conflicts.Conflict.factory(
 
1630
                    'path conflict', path=this_path,
 
1631
                    conflict_path=other_path,
 
1632
                    file_id=file_id)
 
1633
            elif conflict_type == 'contents conflict':
1003
1634
                for trans_id in conflict[1]:
1004
1635
                    file_id = self.tt.final_file_id(trans_id)
1005
1636
                    if file_id is not None:
1009
1640
                    if path.endswith(suffix):
1010
1641
                        path = path[:-len(suffix)]
1011
1642
                        break
1012
 
                c = Conflict.factory(conflict_type, path=path, file_id=file_id)
1013
 
                self.cooked_conflicts.append(c)
1014
 
            if conflict_type == 'text conflict':
 
1643
                c = _mod_conflicts.Conflict.factory(conflict_type,
 
1644
                                                    path=path, file_id=file_id)
 
1645
            elif conflict_type == 'text conflict':
1015
1646
                trans_id = conflict[1]
1016
1647
                path = fp.get_path(trans_id)
1017
1648
                file_id = self.tt.final_file_id(trans_id)
1018
 
                c = Conflict.factory(conflict_type, path=path, file_id=file_id)
1019
 
                self.cooked_conflicts.append(c)
1020
 
 
1021
 
        for trans_id, conflicts in name_conflicts.iteritems():
1022
 
            try:
1023
 
                this_parent, other_parent = conflicts['parent conflict']
1024
 
                if this_parent == other_parent:
1025
 
                    raise AssertionError()
1026
 
            except KeyError:
1027
 
                this_parent = other_parent = \
1028
 
                    self.tt.final_file_id(self.tt.final_parent(trans_id))
1029
 
            try:
1030
 
                this_name, other_name = conflicts['name conflict']
1031
 
                if this_name == other_name:
1032
 
                    raise AssertionError()
1033
 
            except KeyError:
1034
 
                this_name = other_name = self.tt.final_name(trans_id)
1035
 
            other_path = fp.get_path(trans_id)
1036
 
            if this_parent is not None and this_name is not None:
1037
 
                this_parent_path = \
1038
 
                    fp.get_path(self.tt.trans_id_file_id(this_parent))
1039
 
                this_path = pathjoin(this_parent_path, this_name)
 
1649
                c = _mod_conflicts.Conflict.factory(conflict_type,
 
1650
                                                    path=path, file_id=file_id)
1040
1651
            else:
1041
 
                this_path = "<deleted>"
1042
 
            file_id = self.tt.final_file_id(trans_id)
1043
 
            c = Conflict.factory('path conflict', path=this_path,
1044
 
                                 conflict_path=other_path, file_id=file_id)
 
1652
                raise AssertionError('bad conflict type: %r' % (conflict,))
1045
1653
            self.cooked_conflicts.append(c)
1046
 
        self.cooked_conflicts.sort(key=Conflict.sort_key)
 
1654
        self.cooked_conflicts.sort(key=_mod_conflicts.Conflict.sort_key)
1047
1655
 
1048
1656
 
1049
1657
class WeaveMerger(Merge3Merger):
1053
1661
    supports_reverse_cherrypick = False
1054
1662
    history_based = True
1055
1663
 
1056
 
    def _merged_lines(self, file_id):
1057
 
        """Generate the merged lines.
1058
 
        There is no distinction between lines that are meant to contain <<<<<<<
1059
 
        and conflicts.
1060
 
        """
1061
 
        if self.cherrypick:
1062
 
            base = self.base_tree
1063
 
        else:
1064
 
            base = None
1065
 
        plan = self.this_tree.plan_file_merge(file_id, self.other_tree,
 
1664
    def _generate_merge_plan(self, file_id, base):
 
1665
        return self.this_tree.plan_file_merge(file_id, self.other_tree,
1066
1666
                                              base=base)
 
1667
 
 
1668
    def _merged_lines(self, file_id):
 
1669
        """Generate the merged lines.
 
1670
        There is no distinction between lines that are meant to contain <<<<<<<
 
1671
        and conflicts.
 
1672
        """
 
1673
        if self.cherrypick:
 
1674
            base = self.base_tree
 
1675
        else:
 
1676
            base = None
 
1677
        plan = self._generate_merge_plan(file_id, base)
1067
1678
        if 'merge' in debug.debug_flags:
1068
1679
            plan = list(plan)
1069
1680
            trans_id = self.tt.trans_id_file_id(file_id)
1070
1681
            name = self.tt.final_name(trans_id) + '.plan'
1071
 
            contents = ('%10s|%s' % l for l in plan)
 
1682
            contents = ('%11s|%s' % l for l in plan)
1072
1683
            self.tt.new_file(name, self.tt.final_parent(trans_id), contents)
1073
 
        textmerge = PlanWeaveMerge(plan, '<<<<<<< TREE\n',
1074
 
            '>>>>>>> MERGE-SOURCE\n')
1075
 
        return textmerge.merge_lines(self.reprocess)
 
1684
        textmerge = versionedfile.PlanWeaveMerge(plan, '<<<<<<< TREE\n',
 
1685
                                                 '>>>>>>> MERGE-SOURCE\n')
 
1686
        lines, conflicts = textmerge.merge_lines(self.reprocess)
 
1687
        if conflicts:
 
1688
            base_lines = textmerge.base_from_plan()
 
1689
        else:
 
1690
            base_lines = None
 
1691
        return lines, base_lines
1076
1692
 
1077
1693
    def text_merge(self, file_id, trans_id):
1078
1694
        """Perform a (weave) text merge for a given file and file-id.
1079
1695
        If conflicts are encountered, .THIS and .OTHER files will be emitted,
1080
1696
        and a conflict will be noted.
1081
1697
        """
1082
 
        lines, conflicts = self._merged_lines(file_id)
 
1698
        lines, base_lines = self._merged_lines(file_id)
1083
1699
        lines = list(lines)
1084
 
        # Note we're checking whether the OUTPUT is binary in this case, 
 
1700
        # Note we're checking whether the OUTPUT is binary in this case,
1085
1701
        # because we don't want to get into weave merge guts.
1086
 
        check_text_lines(lines)
 
1702
        textfile.check_text_lines(lines)
1087
1703
        self.tt.create_file(lines, trans_id)
1088
 
        if conflicts:
 
1704
        if base_lines is not None:
 
1705
            # Conflict
1089
1706
            self._raw_conflicts.append(('text conflict', trans_id))
1090
1707
            name = self.tt.final_name(trans_id)
1091
1708
            parent_id = self.tt.final_parent(trans_id)
1092
 
            file_group = self._dump_conflicts(name, parent_id, file_id, 
1093
 
                                              no_base=True)
 
1709
            file_group = self._dump_conflicts(name, parent_id, file_id,
 
1710
                                              no_base=False,
 
1711
                                              base_lines=base_lines)
1094
1712
            file_group.append(trans_id)
1095
1713
 
1096
1714
 
1097
1715
class LCAMerger(WeaveMerger):
1098
1716
 
1099
 
    def _merged_lines(self, file_id):
1100
 
        """Generate the merged lines.
1101
 
        There is no distinction between lines that are meant to contain <<<<<<<
1102
 
        and conflicts.
1103
 
        """
1104
 
        if self.cherrypick:
1105
 
            base = self.base_tree
1106
 
        else:
1107
 
            base = None
1108
 
        plan = self.this_tree.plan_file_lca_merge(file_id, self.other_tree,
 
1717
    def _generate_merge_plan(self, file_id, base):
 
1718
        return self.this_tree.plan_file_lca_merge(file_id, self.other_tree,
1109
1719
                                                  base=base)
1110
 
        if 'merge' in debug.debug_flags:
1111
 
            plan = list(plan)
1112
 
            trans_id = self.tt.trans_id_file_id(file_id)
1113
 
            name = self.tt.final_name(trans_id) + '.plan'
1114
 
            contents = ('%10s|%s' % l for l in plan)
1115
 
            self.tt.new_file(name, self.tt.final_parent(trans_id), contents)
1116
 
        textmerge = PlanWeaveMerge(plan, '<<<<<<< TREE\n',
1117
 
            '>>>>>>> MERGE-SOURCE\n')
1118
 
        return textmerge.merge_lines(self.reprocess)
1119
 
 
1120
1720
 
1121
1721
class Diff3Merger(Merge3Merger):
1122
1722
    """Three-way merger using external diff3 for text merging"""
1123
1723
 
1124
1724
    def dump_file(self, temp_dir, name, tree, file_id):
1125
 
        out_path = pathjoin(temp_dir, name)
 
1725
        out_path = osutils.pathjoin(temp_dir, name)
1126
1726
        out_file = open(out_path, "wb")
1127
1727
        try:
1128
1728
            in_file = tree.get_file(file_id)
1140
1740
        import bzrlib.patch
1141
1741
        temp_dir = osutils.mkdtemp(prefix="bzr-")
1142
1742
        try:
1143
 
            new_file = pathjoin(temp_dir, "new")
 
1743
            new_file = osutils.pathjoin(temp_dir, "new")
1144
1744
            this = self.dump_file(temp_dir, "this", self.this_tree, file_id)
1145
1745
            base = self.dump_file(temp_dir, "base", self.base_tree, file_id)
1146
1746
            other = self.dump_file(temp_dir, "other", self.other_tree, file_id)
1147
1747
            status = bzrlib.patch.diff3(new_file, this, base, other)
1148
1748
            if status not in (0, 1):
1149
 
                raise BzrError("Unhandled diff3 exit code")
 
1749
                raise errors.BzrError("Unhandled diff3 exit code")
1150
1750
            f = open(new_file, 'rb')
1151
1751
            try:
1152
1752
                self.tt.create_file(f, trans_id)
1161
1761
            osutils.rmtree(temp_dir)
1162
1762
 
1163
1763
 
 
1764
class PathNotInTree(errors.BzrError):
 
1765
 
 
1766
    _fmt = """Merge-into failed because %(tree)s does not contain %(path)s."""
 
1767
 
 
1768
    def __init__(self, path, tree):
 
1769
        errors.BzrError.__init__(self, path=path, tree=tree)
 
1770
 
 
1771
 
 
1772
class MergeIntoMerger(Merger):
 
1773
    """Merger that understands other_tree will be merged into a subdir.
 
1774
 
 
1775
    This also changes the Merger api so that it uses real Branch, revision_id,
 
1776
    and RevisonTree objects, rather than using revision specs.
 
1777
    """
 
1778
 
 
1779
    def __init__(self, this_tree, other_branch, other_tree, target_subdir,
 
1780
            source_subpath, other_rev_id=None):
 
1781
        """Create a new MergeIntoMerger object.
 
1782
 
 
1783
        source_subpath in other_tree will be effectively copied to
 
1784
        target_subdir in this_tree.
 
1785
 
 
1786
        :param this_tree: The tree that we will be merging into.
 
1787
        :param other_branch: The Branch we will be merging from.
 
1788
        :param other_tree: The RevisionTree object we want to merge.
 
1789
        :param target_subdir: The relative path where we want to merge
 
1790
            other_tree into this_tree
 
1791
        :param source_subpath: The relative path specifying the subtree of
 
1792
            other_tree to merge into this_tree.
 
1793
        """
 
1794
        # It is assumed that we are merging a tree that is not in our current
 
1795
        # ancestry, which means we are using the "EmptyTree" as our basis.
 
1796
        null_ancestor_tree = this_tree.branch.repository.revision_tree(
 
1797
                                _mod_revision.NULL_REVISION)
 
1798
        super(MergeIntoMerger, self).__init__(
 
1799
            this_branch=this_tree.branch,
 
1800
            this_tree=this_tree,
 
1801
            other_tree=other_tree,
 
1802
            base_tree=null_ancestor_tree,
 
1803
            )
 
1804
        self._target_subdir = target_subdir
 
1805
        self._source_subpath = source_subpath
 
1806
        self.other_branch = other_branch
 
1807
        if other_rev_id is None:
 
1808
            other_rev_id = other_tree.get_revision_id()
 
1809
        self.other_rev_id = self.other_basis = other_rev_id
 
1810
        self.base_is_ancestor = True
 
1811
        self.backup_files = True
 
1812
        self.merge_type = Merge3Merger
 
1813
        self.show_base = False
 
1814
        self.reprocess = False
 
1815
        self.interesting_ids = None
 
1816
        self.merge_type = _MergeTypeParameterizer(MergeIntoMergeType,
 
1817
              target_subdir=self._target_subdir,
 
1818
              source_subpath=self._source_subpath)
 
1819
        if self._source_subpath != '':
 
1820
            # If this isn't a partial merge make sure the revisions will be
 
1821
            # present.
 
1822
            self._maybe_fetch(self.other_branch, self.this_branch,
 
1823
                self.other_basis)
 
1824
 
 
1825
    def set_pending(self):
 
1826
        if self._source_subpath != '':
 
1827
            return
 
1828
        Merger.set_pending(self)
 
1829
 
 
1830
 
 
1831
class _MergeTypeParameterizer(object):
 
1832
    """Wrap a merge-type class to provide extra parameters.
 
1833
    
 
1834
    This is hack used by MergeIntoMerger to pass some extra parameters to its
 
1835
    merge_type.  Merger.do_merge() sets up its own set of parameters to pass to
 
1836
    the 'merge_type' member.  It is difficult override do_merge without
 
1837
    re-writing the whole thing, so instead we create a wrapper which will pass
 
1838
    the extra parameters.
 
1839
    """
 
1840
 
 
1841
    def __init__(self, merge_type, **kwargs):
 
1842
        self._extra_kwargs = kwargs
 
1843
        self._merge_type = merge_type
 
1844
 
 
1845
    def __call__(self, *args, **kwargs):
 
1846
        kwargs.update(self._extra_kwargs)
 
1847
        return self._merge_type(*args, **kwargs)
 
1848
 
 
1849
    def __getattr__(self, name):
 
1850
        return getattr(self._merge_type, name)
 
1851
 
 
1852
 
 
1853
class MergeIntoMergeType(Merge3Merger):
 
1854
    """Merger that incorporates a tree (or part of a tree) into another."""
 
1855
 
 
1856
    def __init__(self, *args, **kwargs):
 
1857
        """Initialize the merger object.
 
1858
 
 
1859
        :param args: See Merge3Merger.__init__'s args.
 
1860
        :param kwargs: See Merge3Merger.__init__'s keyword args, except for
 
1861
            source_subpath and target_subdir.
 
1862
        :keyword source_subpath: The relative path specifying the subtree of
 
1863
            other_tree to merge into this_tree.
 
1864
        :keyword target_subdir: The relative path where we want to merge
 
1865
            other_tree into this_tree
 
1866
        """
 
1867
        # All of the interesting work happens during Merge3Merger.__init__(),
 
1868
        # so we have have to hack in to get our extra parameters set.
 
1869
        self._source_subpath = kwargs.pop('source_subpath')
 
1870
        self._target_subdir = kwargs.pop('target_subdir')
 
1871
        super(MergeIntoMergeType, self).__init__(*args, **kwargs)
 
1872
 
 
1873
    def _compute_transform(self):
 
1874
        child_pb = ui.ui_factory.nested_progress_bar()
 
1875
        try:
 
1876
            entries = self._entries_to_incorporate()
 
1877
            entries = list(entries)
 
1878
            for num, (entry, parent_id) in enumerate(entries):
 
1879
                child_pb.update('Preparing file merge', num, len(entries))
 
1880
                parent_trans_id = self.tt.trans_id_file_id(parent_id)
 
1881
                trans_id = transform.new_by_entry(self.tt, entry,
 
1882
                    parent_trans_id, self.other_tree)
 
1883
        finally:
 
1884
            child_pb.finished()
 
1885
        self._finish_computing_transform()
 
1886
 
 
1887
    def _entries_to_incorporate(self):
 
1888
        """Yields pairs of (inventory_entry, new_parent)."""
 
1889
        other_inv = self.other_tree.inventory
 
1890
        subdir_id = other_inv.path2id(self._source_subpath)
 
1891
        if subdir_id is None:
 
1892
            # XXX: The error would be clearer if it gave the URL of the source
 
1893
            # branch, but we don't have a reference to that here.
 
1894
            raise PathNotInTree(self._source_subpath, "Source tree")
 
1895
        subdir = other_inv[subdir_id]
 
1896
        parent_in_target = osutils.dirname(self._target_subdir)
 
1897
        target_id = self.this_tree.inventory.path2id(parent_in_target)
 
1898
        if target_id is None:
 
1899
            raise PathNotInTree(self._target_subdir, "Target tree")
 
1900
        name_in_target = osutils.basename(self._target_subdir)
 
1901
        merge_into_root = subdir.copy()
 
1902
        merge_into_root.name = name_in_target
 
1903
        if merge_into_root.file_id in self.this_tree.inventory:
 
1904
            # Give the root a new file-id.
 
1905
            # This can happen fairly easily if the directory we are
 
1906
            # incorporating is the root, and both trees have 'TREE_ROOT' as
 
1907
            # their root_id.  Users will expect this to Just Work, so we
 
1908
            # change the file-id here.
 
1909
            # Non-root file-ids could potentially conflict too.  That's really
 
1910
            # an edge case, so we don't do anything special for those.  We let
 
1911
            # them cause conflicts.
 
1912
            merge_into_root.file_id = generate_ids.gen_file_id(name_in_target)
 
1913
        yield (merge_into_root, target_id)
 
1914
        if subdir.kind != 'directory':
 
1915
            # No children, so we are done.
 
1916
            return
 
1917
        for ignored_path, entry in other_inv.iter_entries_by_dir(subdir_id):
 
1918
            parent_id = entry.parent_id
 
1919
            if parent_id == subdir.file_id:
 
1920
                # The root's parent ID has changed, so make sure children of
 
1921
                # the root refer to the new ID.
 
1922
                parent_id = merge_into_root.file_id
 
1923
            yield (entry, parent_id)
 
1924
 
 
1925
 
1164
1926
def merge_inner(this_branch, other_tree, base_tree, ignore_zero=False,
1165
1927
                backup_files=False,
1166
1928
                merge_type=Merge3Merger,
1170
1932
                other_rev_id=None,
1171
1933
                interesting_files=None,
1172
1934
                this_tree=None,
1173
 
                pb=DummyProgress(),
 
1935
                pb=None,
1174
1936
                change_reporter=None):
1175
 
    """Primary interface for merging. 
1176
 
 
1177
 
        typical use is probably 
1178
 
        'merge_inner(branch, branch.get_revision_tree(other_revision),
1179
 
                     branch.get_revision_tree(base_revision))'
1180
 
        """
 
1937
    """Primary interface for merging.
 
1938
 
 
1939
    Typical use is probably::
 
1940
 
 
1941
        merge_inner(branch, branch.get_revision_tree(other_revision),
 
1942
                    branch.get_revision_tree(base_revision))
 
1943
    """
1181
1944
    if this_tree is None:
1182
 
        raise BzrError("bzrlib.merge.merge_inner requires a this_tree "
1183
 
            "parameter as of bzrlib version 0.8.")
 
1945
        raise errors.BzrError("bzrlib.merge.merge_inner requires a this_tree "
 
1946
                              "parameter as of bzrlib version 0.8.")
1184
1947
    merger = Merger(this_branch, other_tree, base_tree, this_tree=this_tree,
1185
1948
                    pb=pb, change_reporter=change_reporter)
1186
1949
    merger.backup_files = backup_files
1199
1962
    get_revision_id = getattr(base_tree, 'get_revision_id', None)
1200
1963
    if get_revision_id is None:
1201
1964
        get_revision_id = base_tree.last_revision
 
1965
    merger.cache_trees_with_revision_ids([other_tree, base_tree, this_tree])
1202
1966
    merger.set_base_revision(get_revision_id(), this_branch)
1203
1967
    return merger.do_merge()
1204
1968
 
1272
2036
 
1273
2037
    def get_lines(self, revisions):
1274
2038
        """Get lines for revisions from the backing VersionedFiles.
1275
 
        
 
2039
 
1276
2040
        :raises RevisionNotPresent: on absent texts.
1277
2041
        """
1278
2042
        keys = [(self._key_prefix + (rev,)) for rev in revisions]
1280
2044
        for record in self.vf.get_record_stream(keys, 'unordered', True):
1281
2045
            if record.storage_kind == 'absent':
1282
2046
                raise errors.RevisionNotPresent(record.key, self.vf)
1283
 
            result[record.key[-1]] = osutils.split_lines(
1284
 
                record.get_bytes_as('fulltext'))
 
2047
            result[record.key[-1]] = osutils.chunks_to_lines(
 
2048
                record.get_bytes_as('chunked'))
1285
2049
        return result
1286
2050
 
1287
2051
    def plan_merge(self):
1403
2167
        super(_PlanMerge, self).__init__(a_rev, b_rev, vf, key_prefix)
1404
2168
        self.a_key = self._key_prefix + (self.a_rev,)
1405
2169
        self.b_key = self._key_prefix + (self.b_rev,)
1406
 
        self.graph = Graph(self.vf)
 
2170
        self.graph = _mod_graph.Graph(self.vf)
1407
2171
        heads = self.graph.heads((self.a_key, self.b_key))
1408
2172
        if len(heads) == 1:
1409
2173
            # one side dominates, so we can just return its values, yay for
1414
2178
                other = b_rev
1415
2179
            else:
1416
2180
                other = a_rev
1417
 
            mutter('found dominating revision for %s\n%s > %s', self.vf,
1418
 
                   self._head_key[-1], other)
 
2181
            trace.mutter('found dominating revision for %s\n%s > %s', self.vf,
 
2182
                         self._head_key[-1], other)
1419
2183
            self._weave = None
1420
2184
        else:
1421
2185
            self._head_key = None
1435
2199
        while True:
1436
2200
            next_lcas = self.graph.find_lca(*cur_ancestors)
1437
2201
            # Map a plain NULL_REVISION to a simple no-ancestors
1438
 
            if next_lcas == set([NULL_REVISION]):
 
2202
            if next_lcas == set([_mod_revision.NULL_REVISION]):
1439
2203
                next_lcas = ()
1440
2204
            # Order the lca's based on when they were merged into the tip
1441
2205
            # While the actual merge portion of weave merge uses a set() of
1453
2217
            elif len(next_lcas) > 2:
1454
2218
                # More than 2 lca's, fall back to grabbing all nodes between
1455
2219
                # this and the unique lca.
1456
 
                mutter('More than 2 LCAs, falling back to all nodes for:'
1457
 
                       ' %s, %s\n=> %s', self.a_key, self.b_key, cur_ancestors)
 
2220
                trace.mutter('More than 2 LCAs, falling back to all nodes for:'
 
2221
                             ' %s, %s\n=> %s',
 
2222
                             self.a_key, self.b_key, cur_ancestors)
1458
2223
                cur_lcas = next_lcas
1459
2224
                while len(cur_lcas) > 1:
1460
2225
                    cur_lcas = self.graph.find_lca(*cur_lcas)
1463
2228
                    unique_lca = None
1464
2229
                else:
1465
2230
                    unique_lca = list(cur_lcas)[0]
1466
 
                    if unique_lca == NULL_REVISION:
 
2231
                    if unique_lca == _mod_revision.NULL_REVISION:
1467
2232
                        # find_lca will return a plain 'NULL_REVISION' rather
1468
2233
                        # than a key tuple when there is no common ancestor, we
1469
2234
                        # prefer to just use None, because it doesn't confuse
1477
2242
 
1478
2243
    def _find_unique_parents(self, tip_keys, base_key):
1479
2244
        """Find ancestors of tip that aren't ancestors of base.
1480
 
        
 
2245
 
1481
2246
        :param tip_keys: Nodes that are interesting
1482
2247
        :param base_key: Cull all ancestors of this node
1483
2248
        :return: The parent map for all revisions between tip_keys and
1492
2257
            # We remove NULL_REVISION because it isn't a proper tuple key, and
1493
2258
            # thus confuses things like _get_interesting_texts, and our logic
1494
2259
            # to add the texts into the memory weave.
1495
 
            if NULL_REVISION in parent_map:
1496
 
                parent_map.pop(NULL_REVISION)
 
2260
            if _mod_revision.NULL_REVISION in parent_map:
 
2261
                parent_map.pop(_mod_revision.NULL_REVISION)
1497
2262
        else:
1498
2263
            interesting = set()
1499
2264
            for tip in tip_keys:
1543
2308
    @staticmethod
1544
2309
    def _prune_tails(parent_map, child_map, tails_to_remove):
1545
2310
        """Remove tails from the parent map.
1546
 
        
 
2311
 
1547
2312
        This will remove the supplied revisions until no more children have 0
1548
2313
        parents.
1549
2314
 
1638
2403
class _PlanLCAMerge(_PlanMergeBase):
1639
2404
    """
1640
2405
    This merge algorithm differs from _PlanMerge in that:
 
2406
 
1641
2407
    1. comparisons are done against LCAs only
1642
2408
    2. cases where a contested line is new versus one LCA but old versus
1643
2409
       another are marked as conflicts, by emitting the line as conflicted-a
1651
2417
        lcas = graph.find_lca(key_prefix + (a_rev,), key_prefix + (b_rev,))
1652
2418
        self.lcas = set()
1653
2419
        for lca in lcas:
1654
 
            if lca == NULL_REVISION:
 
2420
            if lca == _mod_revision.NULL_REVISION:
1655
2421
                self.lcas.add(lca)
1656
2422
            else:
1657
2423
                self.lcas.add(lca[-1])
1684
2450
 
1685
2451
        If a line is killed and new, this indicates that the two merge
1686
2452
        revisions contain differing conflict resolutions.
 
2453
 
1687
2454
        :param revision_id: The id of the revision in which the lines are
1688
2455
            unique
1689
2456
        :param unique_line_numbers: The line numbers of unique lines.
1690
 
        :return a tuple of (new_this, killed_other):
 
2457
        :return: a tuple of (new_this, killed_other)
1691
2458
        """
1692
2459
        new = set()
1693
2460
        killed = set()