~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/merge.py

  • Committer: Robert Collins
  • Date: 2010-04-08 04:34:03 UTC
  • mfrom: (5138 +trunk)
  • mto: This revision was merged to the branch mainline in revision 5139.
  • Revision ID: robertc@robertcollins.net-20100408043403-56z0d07vdqrx7f3t
Update bugfix for 528114 to trunk.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005, 2006 Canonical Ltd
 
1
# Copyright (C) 2005-2010 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
 
 
17
 
 
18
 
import os
19
 
import errno
 
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
16
 
20
17
import warnings
21
18
 
22
19
from bzrlib import (
 
20
    branch as _mod_branch,
 
21
    conflicts as _mod_conflicts,
23
22
    debug,
 
23
    decorators,
24
24
    errors,
 
25
    graph as _mod_graph,
 
26
    hooks,
 
27
    merge3,
25
28
    osutils,
26
29
    patiencediff,
27
 
    registry,
28
30
    revision as _mod_revision,
29
 
    )
30
 
from bzrlib.branch import Branch
31
 
from bzrlib.conflicts import ConflictList, Conflict
32
 
from bzrlib.errors import (BzrCommandError,
33
 
                           BzrError,
34
 
                           NoCommonAncestor,
35
 
                           NoCommits,
36
 
                           NoSuchRevision,
37
 
                           NoSuchFile,
38
 
                           NotBranchError,
39
 
                           NotVersionedError,
40
 
                           UnrelatedBranches,
41
 
                           UnsupportedOperation,
42
 
                           WorkingTreeNotRevision,
43
 
                           BinaryFile,
44
 
                           )
45
 
from bzrlib.merge3 import Merge3
46
 
from bzrlib.osutils import rename, pathjoin
47
 
from progress import DummyProgress, ProgressPhase
48
 
from bzrlib.revision import (NULL_REVISION, ensure_null)
49
 
from bzrlib.textfile import check_text_lines
50
 
from bzrlib.trace import mutter, warning, note, is_quiet
51
 
from bzrlib.transform import (TransformPreview, TreeTransform,
52
 
                              resolve_conflicts, cook_conflicts,
53
 
                              conflict_pass, FinalPaths, create_by_entry,
54
 
                              unique_add, ROOT_PARENT)
55
 
from bzrlib.versionedfile import PlanWeaveMerge
56
 
from bzrlib import ui
57
 
 
 
31
    textfile,
 
32
    trace,
 
33
    transform,
 
34
    tree as _mod_tree,
 
35
    tsort,
 
36
    ui,
 
37
    versionedfile
 
38
    )
 
39
from bzrlib.cleanup import OperationWithCleanups
 
40
from bzrlib.symbol_versioning import (
 
41
    deprecated_in,
 
42
    deprecated_method,
 
43
    )
58
44
# TODO: Report back as changes are merged in
59
45
 
60
46
 
61
47
def transform_tree(from_tree, to_tree, interesting_ids=None):
62
 
    merge_inner(from_tree.branch, to_tree, from_tree, ignore_zero=True,
63
 
                interesting_ids=interesting_ids, this_tree=from_tree)
 
48
    from_tree.lock_tree_write()
 
49
    operation = OperationWithCleanups(merge_inner)
 
50
    operation.add_cleanup(from_tree.unlock)
 
51
    operation.run_simple(from_tree.branch, to_tree, from_tree,
 
52
        ignore_zero=True, interesting_ids=interesting_ids, this_tree=from_tree)
 
53
 
 
54
 
 
55
class MergeHooks(hooks.Hooks):
 
56
 
 
57
    def __init__(self):
 
58
        hooks.Hooks.__init__(self)
 
59
        self.create_hook(hooks.HookPoint('merge_file_content',
 
60
            "Called with a bzrlib.merge.Merger object to create a per file "
 
61
            "merge object when starting a merge. "
 
62
            "Should return either None or a subclass of "
 
63
            "``bzrlib.merge.AbstractPerFileMerger``. "
 
64
            "Such objects will then be called per file "
 
65
            "that needs to be merged (including when one "
 
66
            "side has deleted the file and the other has changed it). "
 
67
            "See the AbstractPerFileMerger API docs for details on how it is "
 
68
            "used by merge.",
 
69
            (2, 1), None))
 
70
 
 
71
 
 
72
class AbstractPerFileMerger(object):
 
73
    """PerFileMerger objects are used by plugins extending merge for bzrlib.
 
74
 
 
75
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
 
76
    
 
77
    :ivar merger: The Merge3Merger performing the merge.
 
78
    """
 
79
 
 
80
    def __init__(self, merger):
 
81
        """Create a PerFileMerger for use with merger."""
 
82
        self.merger = merger
 
83
 
 
84
    def merge_contents(self, merge_params):
 
85
        """Attempt to merge the contents of a single file.
 
86
        
 
87
        :param merge_params: A bzrlib.merge.MergeHookParams
 
88
        :return : A tuple of (status, chunks), where status is one of
 
89
            'not_applicable', 'success', 'conflicted', or 'delete'.  If status
 
90
            is 'success' or 'conflicted', then chunks should be an iterable of
 
91
            strings for the new file contents.
 
92
        """
 
93
        return ('not applicable', None)
 
94
 
 
95
 
 
96
class ConfigurableFileMerger(AbstractPerFileMerger):
 
97
    """Merge individual files when configured via a .conf file.
 
98
 
 
99
    This is a base class for concrete custom file merging logic. Concrete
 
100
    classes should implement ``merge_text``.
 
101
 
 
102
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
 
103
    
 
104
    :ivar affected_files: The configured file paths to merge.
 
105
 
 
106
    :cvar name_prefix: The prefix to use when looking up configuration
 
107
        details. <name_prefix>_merge_files describes the files targeted by the
 
108
        hook for example.
 
109
        
 
110
    :cvar default_files: The default file paths to merge when no configuration
 
111
        is present.
 
112
    """
 
113
 
 
114
    name_prefix = None
 
115
    default_files = None
 
116
 
 
117
    def __init__(self, merger):
 
118
        super(ConfigurableFileMerger, self).__init__(merger)
 
119
        self.affected_files = None
 
120
        self.default_files = self.__class__.default_files or []
 
121
        self.name_prefix = self.__class__.name_prefix
 
122
        if self.name_prefix is None:
 
123
            raise ValueError("name_prefix must be set.")
 
124
 
 
125
    def filename_matches_config(self, params):
 
126
        """Check whether the file should call the merge hook.
 
127
 
 
128
        <name_prefix>_merge_files configuration variable is a list of files
 
129
        that should use the hook.
 
130
        """
 
131
        affected_files = self.affected_files
 
132
        if affected_files is None:
 
133
            config = self.merger.this_branch.get_config()
 
134
            # Until bzr provides a better policy for caching the config, we
 
135
            # just add the part we're interested in to the params to avoid
 
136
            # reading the config files repeatedly (bazaar.conf, location.conf,
 
137
            # branch.conf).
 
138
            config_key = self.name_prefix + '_merge_files'
 
139
            affected_files = config.get_user_option_as_list(config_key)
 
140
            if affected_files is None:
 
141
                # If nothing was specified in the config, use the default.
 
142
                affected_files = self.default_files
 
143
            self.affected_files = affected_files
 
144
        if affected_files:
 
145
            filename = self.merger.this_tree.id2path(params.file_id)
 
146
            if filename in affected_files:
 
147
                return True
 
148
        return False
 
149
 
 
150
    def merge_contents(self, params):
 
151
        """Merge the contents of a single file."""
 
152
        # First, check whether this custom merge logic should be used.  We
 
153
        # expect most files should not be merged by this handler.
 
154
        if (
 
155
            # OTHER is a straight winner, rely on default merge.
 
156
            params.winner == 'other' or
 
157
            # THIS and OTHER aren't both files.
 
158
            not params.is_file_merge() or
 
159
            # The filename isn't listed in the 'NAME_merge_files' config
 
160
            # option.
 
161
            not self.filename_matches_config(params)):
 
162
            return 'not_applicable', None
 
163
        return self.merge_text(params)
 
164
 
 
165
    def merge_text(self, params):
 
166
        """Merge the byte contents of a single file.
 
167
 
 
168
        This is called after checking that the merge should be performed in
 
169
        merge_contents, and it should behave as per
 
170
        ``bzrlib.merge.AbstractPerFileMerger.merge_contents``.
 
171
        """
 
172
        raise NotImplementedError(self.merge_text)
 
173
 
 
174
 
 
175
class MergeHookParams(object):
 
176
    """Object holding parameters passed to merge_file_content hooks.
 
177
 
 
178
    There are some fields hooks can access:
 
179
 
 
180
    :ivar file_id: the file ID of the file being merged
 
181
    :ivar trans_id: the transform ID for the merge of this file
 
182
    :ivar this_kind: kind of file_id in 'this' tree
 
183
    :ivar other_kind: kind of file_id in 'other' tree
 
184
    :ivar winner: one of 'this', 'other', 'conflict'
 
185
    """
 
186
 
 
187
    def __init__(self, merger, file_id, trans_id, this_kind, other_kind,
 
188
            winner):
 
189
        self._merger = merger
 
190
        self.file_id = file_id
 
191
        self.trans_id = trans_id
 
192
        self.this_kind = this_kind
 
193
        self.other_kind = other_kind
 
194
        self.winner = winner
 
195
 
 
196
    def is_file_merge(self):
 
197
        """True if this_kind and other_kind are both 'file'."""
 
198
        return self.this_kind == 'file' and self.other_kind == 'file'
 
199
 
 
200
    @decorators.cachedproperty
 
201
    def base_lines(self):
 
202
        """The lines of the 'base' version of the file."""
 
203
        return self._merger.get_lines(self._merger.base_tree, self.file_id)
 
204
 
 
205
    @decorators.cachedproperty
 
206
    def this_lines(self):
 
207
        """The lines of the 'this' version of the file."""
 
208
        return self._merger.get_lines(self._merger.this_tree, self.file_id)
 
209
 
 
210
    @decorators.cachedproperty
 
211
    def other_lines(self):
 
212
        """The lines of the 'other' version of the file."""
 
213
        return self._merger.get_lines(self._merger.other_tree, self.file_id)
64
214
 
65
215
 
66
216
class Merger(object):
 
217
 
 
218
    hooks = MergeHooks()
 
219
 
67
220
    def __init__(self, this_branch, other_tree=None, base_tree=None,
68
 
                 this_tree=None, pb=DummyProgress(), change_reporter=None,
 
221
                 this_tree=None, pb=None, change_reporter=None,
69
222
                 recurse='down', revision_graph=None):
70
223
        object.__init__(self)
71
224
        self.this_branch = this_branch
84
237
        self.interesting_files = None
85
238
        self.show_base = False
86
239
        self.reprocess = False
87
 
        self._pb = pb
 
240
        if pb is not None:
 
241
            warnings.warn("pb parameter to Merger() is deprecated and ignored")
88
242
        self.pp = None
89
243
        self.recurse = recurse
90
244
        self.change_reporter = change_reporter
92
246
        self._revision_graph = revision_graph
93
247
        self._base_is_ancestor = None
94
248
        self._base_is_other_ancestor = None
 
249
        self._is_criss_cross = None
 
250
        self._lca_trees = None
 
251
 
 
252
    def cache_trees_with_revision_ids(self, trees):
 
253
        """Cache any tree in trees if it has a revision_id."""
 
254
        for maybe_tree in trees:
 
255
            if maybe_tree is None:
 
256
                continue
 
257
            try:
 
258
                rev_id = maybe_tree.get_revision_id()
 
259
            except AttributeError:
 
260
                continue
 
261
            self._cached_trees[rev_id] = maybe_tree
95
262
 
96
263
    @property
97
264
    def revision_graph(self):
125
292
                                      _set_base_is_other_ancestor)
126
293
 
127
294
    @staticmethod
128
 
    def from_uncommitted(tree, other_tree, pb):
 
295
    def from_uncommitted(tree, other_tree, pb=None, base_tree=None):
129
296
        """Return a Merger for uncommitted changes in other_tree.
130
297
 
131
298
        :param tree: The tree to merge into
132
299
        :param other_tree: The tree to get uncommitted changes from
133
300
        :param pb: A progress indicator
 
301
        :param base_tree: The basis to use for the merge.  If unspecified,
 
302
            other_tree.basis_tree() will be used.
134
303
        """
135
 
        merger = Merger(tree.branch, other_tree, other_tree.basis_tree(), tree,
136
 
                        pb)
 
304
        if base_tree is None:
 
305
            base_tree = other_tree.basis_tree()
 
306
        merger = Merger(tree.branch, other_tree, base_tree, tree, pb)
137
307
        merger.base_rev_id = merger.base_tree.get_revision_id()
138
308
        merger.other_rev_id = None
139
309
        merger.other_basis = merger.base_rev_id
151
321
        base_revision_id, other_revision_id, verified =\
152
322
            mergeable.get_merge_request(tree.branch.repository)
153
323
        revision_graph = tree.branch.repository.get_graph()
154
 
        if (base_revision_id != _mod_revision.NULL_REVISION and
155
 
            revision_graph.is_ancestor(
156
 
            base_revision_id, tree.branch.last_revision())):
157
 
            base_revision_id = None
158
 
        else:
159
 
            warning('Performing cherrypick')
 
324
        if base_revision_id is not None:
 
325
            if (base_revision_id != _mod_revision.NULL_REVISION and
 
326
                revision_graph.is_ancestor(
 
327
                base_revision_id, tree.branch.last_revision())):
 
328
                base_revision_id = None
 
329
            else:
 
330
                trace.warning('Performing cherrypick')
160
331
        merger = klass.from_revision_ids(pb, tree, other_revision_id,
161
332
                                         base_revision_id, revision_graph=
162
333
                                         revision_graph)
164
335
 
165
336
    @staticmethod
166
337
    def from_revision_ids(pb, tree, other, base=None, other_branch=None,
167
 
                          base_branch=None, revision_graph=None):
 
338
                          base_branch=None, revision_graph=None,
 
339
                          tree_branch=None):
168
340
        """Return a Merger for revision-ids.
169
341
 
 
342
        :param pb: A progress indicator
170
343
        :param tree: The tree to merge changes into
171
344
        :param other: The revision-id to use as OTHER
172
345
        :param base: The revision-id to use as BASE.  If not specified, will
177
350
            not supplied, other_branch or tree.branch will be used.
178
351
        :param revision_graph: If you have a revision_graph precomputed, pass
179
352
            it in, otherwise it will be created for you.
180
 
        :param pb: A progress indicator
 
353
        :param tree_branch: The branch associated with tree.  If not supplied,
 
354
            tree.branch will be used.
181
355
        """
182
 
        merger = Merger(tree.branch, this_tree=tree, pb=pb,
 
356
        if tree_branch is None:
 
357
            tree_branch = tree.branch
 
358
        merger = Merger(tree_branch, this_tree=tree, pb=pb,
183
359
                        revision_graph=revision_graph)
184
360
        if other_branch is None:
185
361
            other_branch = tree.branch
209
385
        if revno is None:
210
386
            tree = workingtree.WorkingTree.open_containing(location)[0]
211
387
            return tree.branch, tree
212
 
        branch = Branch.open_containing(location, possible_transports)[0]
 
388
        branch = _mod_branch.Branch.open_containing(
 
389
            location, possible_transports)[0]
213
390
        if revno == -1:
214
391
            revision_id = branch.last_revision()
215
392
        else:
216
393
            revision_id = branch.get_rev_id(revno)
217
 
        revision_id = ensure_null(revision_id)
 
394
        revision_id = _mod_revision.ensure_null(revision_id)
218
395
        return branch, self.revision_tree(revision_id, branch)
219
396
 
 
397
    @deprecated_method(deprecated_in((2, 1, 0)))
220
398
    def ensure_revision_trees(self):
221
399
        if self.this_revision_tree is None:
222
400
            self.this_basis_tree = self.revision_tree(self.this_basis)
225
403
 
226
404
        if self.other_rev_id is None:
227
405
            other_basis_tree = self.revision_tree(self.other_basis)
228
 
            changes = other_basis_tree.changes_from(self.other_tree)
229
 
            if changes.has_changed():
230
 
                raise WorkingTreeNotRevision(self.this_tree)
 
406
            if other_basis_tree.has_changes(self.other_tree):
 
407
                raise errors.WorkingTreeNotRevision(self.this_tree)
231
408
            other_rev_id = self.other_basis
232
409
            self.other_tree = other_basis_tree
233
410
 
 
411
    @deprecated_method(deprecated_in((2, 1, 0)))
234
412
    def file_revisions(self, file_id):
235
413
        self.ensure_revision_trees()
236
414
        def get_id(tree, file_id):
239
417
        if self.this_rev_id is None:
240
418
            if self.this_basis_tree.get_file_sha1(file_id) != \
241
419
                self.this_tree.get_file_sha1(file_id):
242
 
                raise WorkingTreeNotRevision(self.this_tree)
 
420
                raise errors.WorkingTreeNotRevision(self.this_tree)
243
421
 
244
422
        trees = (self.this_basis_tree, self.other_tree)
245
423
        return [get_id(tree, file_id) for tree in trees]
246
424
 
 
425
    @deprecated_method(deprecated_in((2, 1, 0)))
247
426
    def check_basis(self, check_clean, require_commits=True):
248
427
        if self.this_basis is None and require_commits is True:
249
 
            raise BzrCommandError("This branch has no commits."
250
 
                                  " (perhaps you would prefer 'bzr pull')")
 
428
            raise errors.BzrCommandError(
 
429
                "This branch has no commits."
 
430
                " (perhaps you would prefer 'bzr pull')")
251
431
        if check_clean:
252
432
            self.compare_basis()
253
433
            if self.this_basis != self.this_rev_id:
254
434
                raise errors.UncommittedChanges(self.this_tree)
255
435
 
 
436
    @deprecated_method(deprecated_in((2, 1, 0)))
256
437
    def compare_basis(self):
257
438
        try:
258
439
            basis_tree = self.revision_tree(self.this_tree.last_revision())
259
 
        except errors.RevisionNotPresent:
 
440
        except errors.NoSuchRevision:
260
441
            basis_tree = self.this_tree.basis_tree()
261
 
        changes = self.this_tree.changes_from(basis_tree)
262
 
        if not changes.has_changed():
 
442
        if not self.this_tree.has_changes(basis_tree):
263
443
            self.this_rev_id = self.this_basis
264
444
 
265
445
    def set_interesting_files(self, file_list):
266
446
        self.interesting_files = file_list
267
447
 
268
448
    def set_pending(self):
269
 
        if not self.base_is_ancestor or not self.base_is_other_ancestor or self.other_rev_id is None:
 
449
        if (not self.base_is_ancestor or not self.base_is_other_ancestor
 
450
            or self.other_rev_id is None):
270
451
            return
271
452
        self._add_parent()
272
453
 
273
454
    def _add_parent(self):
274
455
        new_parents = self.this_tree.get_parent_ids() + [self.other_rev_id]
275
456
        new_parent_trees = []
 
457
        operation = OperationWithCleanups(self.this_tree.set_parent_trees)
276
458
        for revision_id in new_parents:
277
459
            try:
278
460
                tree = self.revision_tree(revision_id)
279
 
            except errors.RevisionNotPresent:
 
461
            except errors.NoSuchRevision:
280
462
                tree = None
281
463
            else:
282
464
                tree.lock_read()
 
465
                operation.add_cleanup(tree.unlock)
283
466
            new_parent_trees.append((revision_id, tree))
284
 
        try:
285
 
            self.this_tree.set_parent_trees(new_parent_trees,
286
 
                                            allow_leftmost_as_ghost=True)
287
 
        finally:
288
 
            for _revision_id, tree in new_parent_trees:
289
 
                if tree is not None:
290
 
                    tree.unlock()
 
467
        operation.run_simple(new_parent_trees, allow_leftmost_as_ghost=True)
291
468
 
292
469
    def set_other(self, other_revision, possible_transports=None):
293
470
        """Set the revision and tree to merge from.
302
479
            self.other_rev_id = _mod_revision.ensure_null(
303
480
                self.other_branch.last_revision())
304
481
            if _mod_revision.is_null(self.other_rev_id):
305
 
                raise NoCommits(self.other_branch)
 
482
                raise errors.NoCommits(self.other_branch)
306
483
            self.other_basis = self.other_rev_id
307
484
        elif other_revision[1] is not None:
308
485
            self.other_rev_id = self.other_branch.get_rev_id(other_revision[1])
311
488
            self.other_rev_id = None
312
489
            self.other_basis = self.other_branch.last_revision()
313
490
            if self.other_basis is None:
314
 
                raise NoCommits(self.other_branch)
 
491
                raise errors.NoCommits(self.other_branch)
315
492
        if self.other_rev_id is not None:
316
493
            self._cached_trees[self.other_rev_id] = self.other_tree
317
494
        self._maybe_fetch(self.other_branch,self.this_branch, self.other_basis)
344
521
            target.fetch(source, revision_id)
345
522
 
346
523
    def find_base(self):
347
 
        revisions = [ensure_null(self.this_basis),
348
 
                     ensure_null(self.other_basis)]
349
 
        if NULL_REVISION in revisions:
350
 
            self.base_rev_id = NULL_REVISION
 
524
        revisions = [_mod_revision.ensure_null(self.this_basis),
 
525
                     _mod_revision.ensure_null(self.other_basis)]
 
526
        if _mod_revision.NULL_REVISION in revisions:
 
527
            self.base_rev_id = _mod_revision.NULL_REVISION
 
528
            self.base_tree = self.revision_tree(self.base_rev_id)
 
529
            self._is_criss_cross = False
351
530
        else:
352
 
            self.base_rev_id, steps = self.revision_graph.find_unique_lca(
353
 
                revisions[0], revisions[1], count_steps=True)
354
 
            if self.base_rev_id == NULL_REVISION:
355
 
                raise UnrelatedBranches()
356
 
            if steps > 1:
357
 
                warning('Warning: criss-cross merge encountered.  See bzr'
358
 
                        ' help criss-cross.')
359
 
        self.base_tree = self.revision_tree(self.base_rev_id)
 
531
            lcas = self.revision_graph.find_lca(revisions[0], revisions[1])
 
532
            self._is_criss_cross = False
 
533
            if len(lcas) == 0:
 
534
                self.base_rev_id = _mod_revision.NULL_REVISION
 
535
            elif len(lcas) == 1:
 
536
                self.base_rev_id = list(lcas)[0]
 
537
            else: # len(lcas) > 1
 
538
                if len(lcas) > 2:
 
539
                    # find_unique_lca can only handle 2 nodes, so we have to
 
540
                    # start back at the beginning. It is a shame to traverse
 
541
                    # the graph again, but better than re-implementing
 
542
                    # find_unique_lca.
 
543
                    self.base_rev_id = self.revision_graph.find_unique_lca(
 
544
                                            revisions[0], revisions[1])
 
545
                else:
 
546
                    self.base_rev_id = self.revision_graph.find_unique_lca(
 
547
                                            *lcas)
 
548
                self._is_criss_cross = True
 
549
            if self.base_rev_id == _mod_revision.NULL_REVISION:
 
550
                raise errors.UnrelatedBranches()
 
551
            if self._is_criss_cross:
 
552
                trace.warning('Warning: criss-cross merge encountered.  See bzr'
 
553
                              ' help criss-cross.')
 
554
                trace.mutter('Criss-cross lcas: %r' % lcas)
 
555
                interesting_revision_ids = [self.base_rev_id]
 
556
                interesting_revision_ids.extend(lcas)
 
557
                interesting_trees = dict((t.get_revision_id(), t)
 
558
                    for t in self.this_branch.repository.revision_trees(
 
559
                        interesting_revision_ids))
 
560
                self._cached_trees.update(interesting_trees)
 
561
                self.base_tree = interesting_trees.pop(self.base_rev_id)
 
562
                sorted_lca_keys = self.revision_graph.find_merge_order(
 
563
                    revisions[0], lcas)
 
564
                self._lca_trees = [interesting_trees[key]
 
565
                                   for key in sorted_lca_keys]
 
566
            else:
 
567
                self.base_tree = self.revision_tree(self.base_rev_id)
360
568
        self.base_is_ancestor = True
361
569
        self.base_is_other_ancestor = True
 
570
        trace.mutter('Base revid: %r' % self.base_rev_id)
362
571
 
363
572
    def set_base(self, base_revision):
364
573
        """Set the base revision to use for the merge.
365
574
 
366
575
        :param base_revision: A 2-list containing a path and revision number.
367
576
        """
368
 
        mutter("doing merge() with no base_revision specified")
 
577
        trace.mutter("doing merge() with no base_revision specified")
369
578
        if base_revision == [None, None]:
370
579
            self.find_base()
371
580
        else:
384
593
                  'other_tree': self.other_tree,
385
594
                  'interesting_ids': self.interesting_ids,
386
595
                  'interesting_files': self.interesting_files,
387
 
                  'pp': self.pp,
 
596
                  'this_branch': self.this_branch,
388
597
                  'do_merge': False}
389
598
        if self.merge_type.requires_base:
390
599
            kwargs['base_tree'] = self.base_tree
391
600
        if self.merge_type.supports_reprocess:
392
601
            kwargs['reprocess'] = self.reprocess
393
602
        elif self.reprocess:
394
 
            raise BzrError("Conflict reduction is not supported for merge"
395
 
                                  " type %s." % self.merge_type)
 
603
            raise errors.BzrError(
 
604
                "Conflict reduction is not supported for merge"
 
605
                " type %s." % self.merge_type)
396
606
        if self.merge_type.supports_show_base:
397
607
            kwargs['show_base'] = self.show_base
398
608
        elif self.show_base:
399
 
            raise BzrError("Showing base is not supported for this"
400
 
                           " merge type. %s" % self.merge_type)
 
609
            raise errors.BzrError("Showing base is not supported for this"
 
610
                                  " merge type. %s" % self.merge_type)
401
611
        if (not getattr(self.merge_type, 'supports_reverse_cherrypick', True)
402
612
            and not self.base_is_other_ancestor):
403
613
            raise errors.CannotReverseCherrypick()
404
614
        if self.merge_type.supports_cherrypick:
405
615
            kwargs['cherrypick'] = (not self.base_is_ancestor or
406
616
                                    not self.base_is_other_ancestor)
407
 
        return self.merge_type(pb=self._pb,
 
617
        if self._is_criss_cross and getattr(self.merge_type,
 
618
                                            'supports_lca_trees', False):
 
619
            kwargs['lca_trees'] = self._lca_trees
 
620
        return self.merge_type(pb=None,
408
621
                               change_reporter=self.change_reporter,
409
622
                               **kwargs)
410
623
 
 
624
    def _do_merge_to(self):
 
625
        merge = self.make_merger()
 
626
        if self.other_branch is not None:
 
627
            self.other_branch.update_references(self.this_branch)
 
628
        merge.do_merge()
 
629
        if self.recurse == 'down':
 
630
            for relpath, file_id in self.this_tree.iter_references():
 
631
                sub_tree = self.this_tree.get_nested_tree(file_id, relpath)
 
632
                other_revision = self.other_tree.get_reference_revision(
 
633
                    file_id, relpath)
 
634
                if  other_revision == sub_tree.last_revision():
 
635
                    continue
 
636
                sub_merge = Merger(sub_tree.branch, this_tree=sub_tree)
 
637
                sub_merge.merge_type = self.merge_type
 
638
                other_branch = self.other_branch.reference_parent(file_id, relpath)
 
639
                sub_merge.set_other_revision(other_revision, other_branch)
 
640
                base_revision = self.base_tree.get_reference_revision(file_id)
 
641
                sub_merge.base_tree = \
 
642
                    sub_tree.branch.repository.revision_tree(base_revision)
 
643
                sub_merge.base_rev_id = base_revision
 
644
                sub_merge.do_merge()
 
645
        return merge
 
646
 
411
647
    def do_merge(self):
 
648
        operation = OperationWithCleanups(self._do_merge_to)
412
649
        self.this_tree.lock_tree_write()
 
650
        operation.add_cleanup(self.this_tree.unlock)
413
651
        if self.base_tree is not None:
414
652
            self.base_tree.lock_read()
 
653
            operation.add_cleanup(self.base_tree.unlock)
415
654
        if self.other_tree is not None:
416
655
            self.other_tree.lock_read()
417
 
        try:
418
 
            merge = self.make_merger()
419
 
            merge.do_merge()
420
 
            if self.recurse == 'down':
421
 
                for path, file_id in self.this_tree.iter_references():
422
 
                    sub_tree = self.this_tree.get_nested_tree(file_id, path)
423
 
                    other_revision = self.other_tree.get_reference_revision(
424
 
                        file_id, path)
425
 
                    if  other_revision == sub_tree.last_revision():
426
 
                        continue
427
 
                    sub_merge = Merger(sub_tree.branch, this_tree=sub_tree)
428
 
                    sub_merge.merge_type = self.merge_type
429
 
                    relpath = self.this_tree.relpath(path)
430
 
                    other_branch = self.other_branch.reference_parent(file_id, relpath)
431
 
                    sub_merge.set_other_revision(other_revision, other_branch)
432
 
                    base_revision = self.base_tree.get_reference_revision(file_id)
433
 
                    sub_merge.base_tree = \
434
 
                        sub_tree.branch.repository.revision_tree(base_revision)
435
 
                    sub_merge.base_rev_id = base_revision
436
 
                    sub_merge.do_merge()
437
 
 
438
 
        finally:
439
 
            if self.other_tree is not None:
440
 
                self.other_tree.unlock()
441
 
            if self.base_tree is not None:
442
 
                self.base_tree.unlock()
443
 
            self.this_tree.unlock()
 
656
            operation.add_cleanup(self.other_tree.unlock)
 
657
        merge = operation.run_simple()
444
658
        if len(merge.cooked_conflicts) == 0:
445
 
            if not self.ignore_zero and not is_quiet():
446
 
                note("All changes applied successfully.")
 
659
            if not self.ignore_zero and not trace.is_quiet():
 
660
                trace.note("All changes applied successfully.")
447
661
        else:
448
 
            note("%d conflicts encountered." % len(merge.cooked_conflicts))
 
662
            trace.note("%d conflicts encountered."
 
663
                       % len(merge.cooked_conflicts))
449
664
 
450
665
        return len(merge.cooked_conflicts)
451
666
 
452
667
 
 
668
class _InventoryNoneEntry(object):
 
669
    """This represents an inventory entry which *isn't there*.
 
670
 
 
671
    It simplifies the merging logic if we always have an InventoryEntry, even
 
672
    if it isn't actually present
 
673
    """
 
674
    executable = None
 
675
    kind = None
 
676
    name = None
 
677
    parent_id = None
 
678
    revision = None
 
679
    symlink_target = None
 
680
    text_sha1 = None
 
681
 
 
682
_none_entry = _InventoryNoneEntry()
 
683
 
 
684
 
453
685
class Merge3Merger(object):
454
686
    """Three-way merger that uses the merge3 text merger"""
455
687
    requires_base = True
459
691
    supports_cherrypick = True
460
692
    supports_reverse_cherrypick = True
461
693
    winner_idx = {"this": 2, "other": 1, "conflict": 1}
 
694
    supports_lca_trees = True
462
695
 
463
 
    def __init__(self, working_tree, this_tree, base_tree, other_tree, 
 
696
    def __init__(self, working_tree, this_tree, base_tree, other_tree,
464
697
                 interesting_ids=None, reprocess=False, show_base=False,
465
 
                 pb=DummyProgress(), pp=None, change_reporter=None,
 
698
                 pb=None, pp=None, change_reporter=None,
466
699
                 interesting_files=None, do_merge=True,
467
 
                 cherrypick=False):
 
700
                 cherrypick=False, lca_trees=None, this_branch=None):
468
701
        """Initialize the merger object and perform the merge.
469
702
 
470
703
        :param working_tree: The working tree to apply the merge to
471
704
        :param this_tree: The local tree in the merge operation
472
705
        :param base_tree: The common tree in the merge operation
473
 
        :param other_tree: The other other tree to merge changes from
 
706
        :param other_tree: The other tree to merge changes from
 
707
        :param this_branch: The branch associated with this_tree
474
708
        :param interesting_ids: The file_ids of files that should be
475
709
            participate in the merge.  May not be combined with
476
710
            interesting_files.
477
711
        :param: reprocess If True, perform conflict-reduction processing.
478
712
        :param show_base: If True, show the base revision in text conflicts.
479
713
            (incompatible with reprocess)
480
 
        :param pb: A Progress bar
 
714
        :param pb: ignored
481
715
        :param pp: A ProgressPhase object
482
716
        :param change_reporter: An object that should report changes made
483
717
        :param interesting_files: The tree-relative paths of files that should
486
720
            be combined with interesting_ids.  If neither interesting_files nor
487
721
            interesting_ids is specified, all files may participate in the
488
722
            merge.
 
723
        :param lca_trees: Can be set to a dictionary of {revision_id:rev_tree}
 
724
            if the ancestry was found to include a criss-cross merge.
 
725
            Otherwise should be None.
489
726
        """
490
727
        object.__init__(self)
491
728
        if interesting_files is not None and interesting_ids is not None:
496
733
        self.this_tree = working_tree
497
734
        self.base_tree = base_tree
498
735
        self.other_tree = other_tree
 
736
        self.this_branch = this_branch
499
737
        self._raw_conflicts = []
500
738
        self.cooked_conflicts = []
501
739
        self.reprocess = reprocess
502
740
        self.show_base = show_base
503
 
        self.pb = pb
504
 
        self.pp = pp
 
741
        self._lca_trees = lca_trees
 
742
        # Uncommenting this will change the default algorithm to always use
 
743
        # _entries_lca. This can be useful for running the test suite and
 
744
        # making sure we haven't missed any corner cases.
 
745
        # if lca_trees is None:
 
746
        #     self._lca_trees = [self.base_tree]
505
747
        self.change_reporter = change_reporter
506
748
        self.cherrypick = cherrypick
507
 
        if self.pp is None:
508
 
            self.pp = ProgressPhase("Merge phase", 3, self.pb)
509
749
        if do_merge:
510
750
            self.do_merge()
 
751
        if pp is not None:
 
752
            warnings.warn("pp argument to Merge3Merger is deprecated")
 
753
        if pb is not None:
 
754
            warnings.warn("pb argument to Merge3Merger is deprecated")
511
755
 
512
756
    def do_merge(self):
 
757
        operation = OperationWithCleanups(self._do_merge)
513
758
        self.this_tree.lock_tree_write()
 
759
        operation.add_cleanup(self.this_tree.unlock)
514
760
        self.base_tree.lock_read()
 
761
        operation.add_cleanup(self.base_tree.unlock)
515
762
        self.other_tree.lock_read()
516
 
        self.tt = TreeTransform(self.this_tree, self.pb)
 
763
        operation.add_cleanup(self.other_tree.unlock)
 
764
        operation.run()
 
765
 
 
766
    def _do_merge(self, operation):
 
767
        self.tt = transform.TreeTransform(self.this_tree, None)
 
768
        operation.add_cleanup(self.tt.finalize)
 
769
        self._compute_transform()
 
770
        results = self.tt.apply(no_conflicts=True)
 
771
        self.write_modified(results)
517
772
        try:
518
 
            self.pp.next_phase()
519
 
            self._compute_transform()
520
 
            self.pp.next_phase()
521
 
            results = self.tt.apply(no_conflicts=True)
522
 
            self.write_modified(results)
523
 
            try:
524
 
                self.this_tree.add_conflicts(self.cooked_conflicts)
525
 
            except UnsupportedOperation:
526
 
                pass
527
 
        finally:
528
 
            self.tt.finalize()
529
 
            self.other_tree.unlock()
530
 
            self.base_tree.unlock()
531
 
            self.this_tree.unlock()
532
 
            self.pb.clear()
 
773
            self.this_tree.add_conflicts(self.cooked_conflicts)
 
774
        except errors.UnsupportedOperation:
 
775
            pass
533
776
 
534
777
    def make_preview_transform(self):
 
778
        operation = OperationWithCleanups(self._make_preview_transform)
535
779
        self.base_tree.lock_read()
 
780
        operation.add_cleanup(self.base_tree.unlock)
536
781
        self.other_tree.lock_read()
537
 
        self.tt = TransformPreview(self.this_tree)
538
 
        try:
539
 
            self.pp.next_phase()
540
 
            self._compute_transform()
541
 
            self.pp.next_phase()
542
 
        finally:
543
 
            self.other_tree.unlock()
544
 
            self.base_tree.unlock()
545
 
            self.pb.clear()
 
782
        operation.add_cleanup(self.other_tree.unlock)
 
783
        return operation.run_simple()
 
784
 
 
785
    def _make_preview_transform(self):
 
786
        self.tt = transform.TransformPreview(self.this_tree)
 
787
        self._compute_transform()
546
788
        return self.tt
547
789
 
548
790
    def _compute_transform(self):
549
 
        entries = self._entries3()
 
791
        if self._lca_trees is None:
 
792
            entries = self._entries3()
 
793
            resolver = self._three_way
 
794
        else:
 
795
            entries = self._entries_lca()
 
796
            resolver = self._lca_multi_way
550
797
        child_pb = ui.ui_factory.nested_progress_bar()
551
798
        try:
 
799
            factories = Merger.hooks['merge_file_content']
 
800
            hooks = [factory(self) for factory in factories] + [self]
 
801
            self.active_hooks = [hook for hook in hooks if hook is not None]
552
802
            for num, (file_id, changed, parents3, names3,
553
803
                      executable3) in enumerate(entries):
554
804
                child_pb.update('Preparing file merge', num, len(entries))
555
 
                self._merge_names(file_id, parents3, names3)
 
805
                self._merge_names(file_id, parents3, names3, resolver=resolver)
556
806
                if changed:
557
 
                    file_status = self.merge_contents(file_id)
 
807
                    file_status = self._do_merge_contents(file_id)
558
808
                else:
559
809
                    file_status = 'unmodified'
560
810
                self._merge_executable(file_id,
561
 
                    executable3, file_status)
 
811
                    executable3, file_status, resolver=resolver)
562
812
        finally:
563
813
            child_pb.finished()
564
814
        self.fix_root()
565
 
        self.pp.next_phase()
566
815
        child_pb = ui.ui_factory.nested_progress_bar()
567
816
        try:
568
 
            fs_conflicts = resolve_conflicts(self.tt, child_pb,
569
 
                lambda t, c: conflict_pass(t, c, self.other_tree))
 
817
            fs_conflicts = transform.resolve_conflicts(self.tt, child_pb,
 
818
                lambda t, c: transform.conflict_pass(t, c, self.other_tree))
570
819
        finally:
571
820
            child_pb.finished()
572
821
        if self.change_reporter is not None:
575
824
                self.tt.iter_changes(), self.change_reporter)
576
825
        self.cook_conflicts(fs_conflicts)
577
826
        for conflict in self.cooked_conflicts:
578
 
            warning(conflict)
 
827
            trace.warning(conflict)
579
828
 
580
829
    def _entries3(self):
581
830
        """Gather data about files modified between three trees.
590
839
        iterator = self.other_tree.iter_changes(self.base_tree,
591
840
                include_unchanged=True, specific_files=self.interesting_files,
592
841
                extra_trees=[self.this_tree])
 
842
        this_entries = dict((e.file_id, e) for p, e in
 
843
                            self.this_tree.iter_entries_by_dir(
 
844
                            self.interesting_ids))
593
845
        for (file_id, paths, changed, versioned, parents, names, kind,
594
846
             executable) in iterator:
595
847
            if (self.interesting_ids is not None and
596
848
                file_id not in self.interesting_ids):
597
849
                continue
598
 
            if file_id in self.this_tree.inventory:
599
 
                entry = self.this_tree.inventory[file_id]
 
850
            entry = this_entries.get(file_id)
 
851
            if entry is not None:
600
852
                this_name = entry.name
601
853
                this_parent = entry.parent_id
602
854
                this_executable = entry.executable
610
862
            result.append((file_id, changed, parents3, names3, executable3))
611
863
        return result
612
864
 
 
865
    def _entries_lca(self):
 
866
        """Gather data about files modified between multiple trees.
 
867
 
 
868
        This compares OTHER versus all LCA trees, and for interesting entries,
 
869
        it then compares with THIS and BASE.
 
870
 
 
871
        For the multi-valued entries, the format will be (BASE, [lca1, lca2])
 
872
        :return: [(file_id, changed, parents, names, executable)]
 
873
            file_id     Simple file_id of the entry
 
874
            changed     Boolean, True if the kind or contents changed
 
875
                        else False
 
876
            parents     ((base, [parent_id, in, lcas]), parent_id_other,
 
877
                         parent_id_this)
 
878
            names       ((base, [name, in, lcas]), name_in_other, name_in_this)
 
879
            executable  ((base, [exec, in, lcas]), exec_in_other, exec_in_this)
 
880
        """
 
881
        if self.interesting_files is not None:
 
882
            lookup_trees = [self.this_tree, self.base_tree]
 
883
            lookup_trees.extend(self._lca_trees)
 
884
            # I think we should include the lca trees as well
 
885
            interesting_ids = self.other_tree.paths2ids(self.interesting_files,
 
886
                                                        lookup_trees)
 
887
        else:
 
888
            interesting_ids = self.interesting_ids
 
889
        result = []
 
890
        walker = _mod_tree.MultiWalker(self.other_tree, self._lca_trees)
 
891
 
 
892
        base_inventory = self.base_tree.inventory
 
893
        this_inventory = self.this_tree.inventory
 
894
        for path, file_id, other_ie, lca_values in walker.iter_all():
 
895
            # Is this modified at all from any of the other trees?
 
896
            if other_ie is None:
 
897
                other_ie = _none_entry
 
898
            if interesting_ids is not None and file_id not in interesting_ids:
 
899
                continue
 
900
 
 
901
            # If other_revision is found in any of the lcas, that means this
 
902
            # node is uninteresting. This is because when merging, if there are
 
903
            # multiple heads(), we have to create a new node. So if we didn't,
 
904
            # we know that the ancestry is linear, and that OTHER did not
 
905
            # modify anything
 
906
            # See doc/developers/lca_merge_resolution.txt for details
 
907
            other_revision = other_ie.revision
 
908
            if other_revision is not None:
 
909
                # We can't use this shortcut when other_revision is None,
 
910
                # because it may be None because things are WorkingTrees, and
 
911
                # not because it is *actually* None.
 
912
                is_unmodified = False
 
913
                for lca_path, ie in lca_values:
 
914
                    if ie is not None and ie.revision == other_revision:
 
915
                        is_unmodified = True
 
916
                        break
 
917
                if is_unmodified:
 
918
                    continue
 
919
 
 
920
            lca_entries = []
 
921
            for lca_path, lca_ie in lca_values:
 
922
                if lca_ie is None:
 
923
                    lca_entries.append(_none_entry)
 
924
                else:
 
925
                    lca_entries.append(lca_ie)
 
926
 
 
927
            if file_id in base_inventory:
 
928
                base_ie = base_inventory[file_id]
 
929
            else:
 
930
                base_ie = _none_entry
 
931
 
 
932
            if file_id in this_inventory:
 
933
                this_ie = this_inventory[file_id]
 
934
            else:
 
935
                this_ie = _none_entry
 
936
 
 
937
            lca_kinds = []
 
938
            lca_parent_ids = []
 
939
            lca_names = []
 
940
            lca_executable = []
 
941
            for lca_ie in lca_entries:
 
942
                lca_kinds.append(lca_ie.kind)
 
943
                lca_parent_ids.append(lca_ie.parent_id)
 
944
                lca_names.append(lca_ie.name)
 
945
                lca_executable.append(lca_ie.executable)
 
946
 
 
947
            kind_winner = self._lca_multi_way(
 
948
                (base_ie.kind, lca_kinds),
 
949
                other_ie.kind, this_ie.kind)
 
950
            parent_id_winner = self._lca_multi_way(
 
951
                (base_ie.parent_id, lca_parent_ids),
 
952
                other_ie.parent_id, this_ie.parent_id)
 
953
            name_winner = self._lca_multi_way(
 
954
                (base_ie.name, lca_names),
 
955
                other_ie.name, this_ie.name)
 
956
 
 
957
            content_changed = True
 
958
            if kind_winner == 'this':
 
959
                # No kind change in OTHER, see if there are *any* changes
 
960
                if other_ie.kind == 'directory':
 
961
                    if parent_id_winner == 'this' and name_winner == 'this':
 
962
                        # No change for this directory in OTHER, skip
 
963
                        continue
 
964
                    content_changed = False
 
965
                elif other_ie.kind is None or other_ie.kind == 'file':
 
966
                    def get_sha1(ie, tree):
 
967
                        if ie.kind != 'file':
 
968
                            return None
 
969
                        return tree.get_file_sha1(file_id)
 
970
                    base_sha1 = get_sha1(base_ie, self.base_tree)
 
971
                    lca_sha1s = [get_sha1(ie, tree) for ie, tree
 
972
                                 in zip(lca_entries, self._lca_trees)]
 
973
                    this_sha1 = get_sha1(this_ie, self.this_tree)
 
974
                    other_sha1 = get_sha1(other_ie, self.other_tree)
 
975
                    sha1_winner = self._lca_multi_way(
 
976
                        (base_sha1, lca_sha1s), other_sha1, this_sha1,
 
977
                        allow_overriding_lca=False)
 
978
                    exec_winner = self._lca_multi_way(
 
979
                        (base_ie.executable, lca_executable),
 
980
                        other_ie.executable, this_ie.executable)
 
981
                    if (parent_id_winner == 'this' and name_winner == 'this'
 
982
                        and sha1_winner == 'this' and exec_winner == 'this'):
 
983
                        # No kind, parent, name, exec, or content change for
 
984
                        # OTHER, so this node is not considered interesting
 
985
                        continue
 
986
                    if sha1_winner == 'this':
 
987
                        content_changed = False
 
988
                elif other_ie.kind == 'symlink':
 
989
                    def get_target(ie, tree):
 
990
                        if ie.kind != 'symlink':
 
991
                            return None
 
992
                        return tree.get_symlink_target(file_id)
 
993
                    base_target = get_target(base_ie, self.base_tree)
 
994
                    lca_targets = [get_target(ie, tree) for ie, tree
 
995
                                   in zip(lca_entries, self._lca_trees)]
 
996
                    this_target = get_target(this_ie, self.this_tree)
 
997
                    other_target = get_target(other_ie, self.other_tree)
 
998
                    target_winner = self._lca_multi_way(
 
999
                        (base_target, lca_targets),
 
1000
                        other_target, this_target)
 
1001
                    if (parent_id_winner == 'this' and name_winner == 'this'
 
1002
                        and target_winner == 'this'):
 
1003
                        # No kind, parent, name, or symlink target change
 
1004
                        # not interesting
 
1005
                        continue
 
1006
                    if target_winner == 'this':
 
1007
                        content_changed = False
 
1008
                elif other_ie.kind == 'tree-reference':
 
1009
                    # The 'changed' information seems to be handled at a higher
 
1010
                    # level. At least, _entries3 returns False for content
 
1011
                    # changed, even when at a new revision_id.
 
1012
                    content_changed = False
 
1013
                    if (parent_id_winner == 'this' and name_winner == 'this'):
 
1014
                        # Nothing interesting
 
1015
                        continue
 
1016
                else:
 
1017
                    raise AssertionError('unhandled kind: %s' % other_ie.kind)
 
1018
 
 
1019
            # If we have gotten this far, that means something has changed
 
1020
            result.append((file_id, content_changed,
 
1021
                           ((base_ie.parent_id, lca_parent_ids),
 
1022
                            other_ie.parent_id, this_ie.parent_id),
 
1023
                           ((base_ie.name, lca_names),
 
1024
                            other_ie.name, this_ie.name),
 
1025
                           ((base_ie.executable, lca_executable),
 
1026
                            other_ie.executable, this_ie.executable)
 
1027
                          ))
 
1028
        return result
 
1029
 
 
1030
 
613
1031
    def fix_root(self):
614
1032
        try:
615
1033
            self.tt.final_kind(self.tt.root)
616
 
        except NoSuchFile:
 
1034
        except errors.NoSuchFile:
617
1035
            self.tt.cancel_deletion(self.tt.root)
618
1036
        if self.tt.final_file_id(self.tt.root) is None:
619
 
            self.tt.version_file(self.tt.tree_file_id(self.tt.root), 
 
1037
            self.tt.version_file(self.tt.tree_file_id(self.tt.root),
620
1038
                                 self.tt.root)
621
 
        if self.other_tree.inventory.root is None:
622
 
            return
623
1039
        other_root_file_id = self.other_tree.get_root_id()
 
1040
        if other_root_file_id is None:
 
1041
            return
624
1042
        other_root = self.tt.trans_id_file_id(other_root_file_id)
625
1043
        if other_root == self.tt.root:
626
1044
            return
627
1045
        try:
628
1046
            self.tt.final_kind(other_root)
629
 
        except NoSuchFile:
 
1047
        except errors.NoSuchFile:
 
1048
            return
 
1049
        if self.this_tree.has_id(self.other_tree.inventory.root.file_id):
 
1050
            # the other tree's root is a non-root in the current tree
630
1051
            return
631
1052
        self.reparent_children(self.other_tree.inventory.root, self.tt.root)
632
1053
        self.tt.cancel_creation(other_root)
662
1083
        if entry is None:
663
1084
            return None
664
1085
        return entry.name
665
 
    
 
1086
 
666
1087
    @staticmethod
667
1088
    def contents_sha1(tree, file_id):
668
1089
        """Determine the sha1 of the file contents (used as a key method)."""
673
1094
    @staticmethod
674
1095
    def executable(tree, file_id):
675
1096
        """Determine the executability of a file-id (used as a key method)."""
676
 
        if file_id not in tree:
 
1097
        if not tree.has_id(file_id):
677
1098
            return None
678
1099
        if tree.kind(file_id) != "file":
679
1100
            return False
682
1103
    @staticmethod
683
1104
    def kind(tree, file_id):
684
1105
        """Determine the kind of a file-id (used as a key method)."""
685
 
        if file_id not in tree:
 
1106
        if not tree.has_id(file_id):
686
1107
            return None
687
1108
        return tree.kind(file_id)
688
1109
 
689
1110
    @staticmethod
690
1111
    def _three_way(base, other, this):
691
 
        #if base == other, either they all agree, or only THIS has changed.
692
1112
        if base == other:
 
1113
            # if 'base == other', either they all agree, or only 'this' has
 
1114
            # changed.
693
1115
            return 'this'
694
1116
        elif this not in (base, other):
 
1117
            # 'this' is neither 'base' nor 'other', so both sides changed
695
1118
            return 'conflict'
696
 
        # "Ambiguous clean merge" -- both sides have made the same change.
697
1119
        elif this == other:
 
1120
            # "Ambiguous clean merge" -- both sides have made the same change.
698
1121
            return "this"
699
 
        # this == base: only other has changed.
700
1122
        else:
 
1123
            # this == base: only other has changed.
701
1124
            return "other"
702
1125
 
703
1126
    @staticmethod
 
1127
    def _lca_multi_way(bases, other, this, allow_overriding_lca=True):
 
1128
        """Consider LCAs when determining whether a change has occurred.
 
1129
 
 
1130
        If LCAS are all identical, this is the same as a _three_way comparison.
 
1131
 
 
1132
        :param bases: value in (BASE, [LCAS])
 
1133
        :param other: value in OTHER
 
1134
        :param this: value in THIS
 
1135
        :param allow_overriding_lca: If there is more than one unique lca
 
1136
            value, allow OTHER to override THIS if it has a new value, and
 
1137
            THIS only has an lca value, or vice versa. This is appropriate for
 
1138
            truly scalar values, not as much for non-scalars.
 
1139
        :return: 'this', 'other', or 'conflict' depending on whether an entry
 
1140
            changed or not.
 
1141
        """
 
1142
        # See doc/developers/lca_tree_merging.txt for details about this
 
1143
        # algorithm.
 
1144
        if other == this:
 
1145
            # Either Ambiguously clean, or nothing was actually changed. We
 
1146
            # don't really care
 
1147
            return 'this'
 
1148
        base_val, lca_vals = bases
 
1149
        # Remove 'base_val' from the lca_vals, because it is not interesting
 
1150
        filtered_lca_vals = [lca_val for lca_val in lca_vals
 
1151
                                      if lca_val != base_val]
 
1152
        if len(filtered_lca_vals) == 0:
 
1153
            return Merge3Merger._three_way(base_val, other, this)
 
1154
 
 
1155
        unique_lca_vals = set(filtered_lca_vals)
 
1156
        if len(unique_lca_vals) == 1:
 
1157
            return Merge3Merger._three_way(unique_lca_vals.pop(), other, this)
 
1158
 
 
1159
        if allow_overriding_lca:
 
1160
            if other in unique_lca_vals:
 
1161
                if this in unique_lca_vals:
 
1162
                    # Each side picked a different lca, conflict
 
1163
                    return 'conflict'
 
1164
                else:
 
1165
                    # This has a value which supersedes both lca values, and
 
1166
                    # other only has an lca value
 
1167
                    return 'this'
 
1168
            elif this in unique_lca_vals:
 
1169
                # OTHER has a value which supersedes both lca values, and this
 
1170
                # only has an lca value
 
1171
                return 'other'
 
1172
 
 
1173
        # At this point, the lcas disagree, and the tip disagree
 
1174
        return 'conflict'
 
1175
 
 
1176
    @staticmethod
 
1177
    @deprecated_method(deprecated_in((2, 2, 0)))
704
1178
    def scalar_three_way(this_tree, base_tree, other_tree, file_id, key):
705
1179
        """Do a three-way test on a scalar.
706
1180
        Return "this", "other" or "conflict", depending whether a value wins.
721
1195
 
722
1196
    def merge_names(self, file_id):
723
1197
        def get_entry(tree):
724
 
            if file_id in tree.inventory:
 
1198
            if tree.has_id(file_id):
725
1199
                return tree.inventory[file_id]
726
1200
            else:
727
1201
                return None
738
1212
            else:
739
1213
                names.append(entry.name)
740
1214
                parents.append(entry.parent_id)
741
 
        return self._merge_names(file_id, parents, names)
 
1215
        return self._merge_names(file_id, parents, names,
 
1216
                                 resolver=self._three_way)
742
1217
 
743
 
    def _merge_names(self, file_id, parents, names):
 
1218
    def _merge_names(self, file_id, parents, names, resolver):
744
1219
        """Perform a merge on file_id names and parents"""
745
1220
        base_name, other_name, this_name = names
746
1221
        base_parent, other_parent, this_parent = parents
747
1222
 
748
 
        name_winner = self._three_way(*names)
 
1223
        name_winner = resolver(*names)
749
1224
 
750
 
        parent_id_winner = self._three_way(*parents)
 
1225
        parent_id_winner = resolver(*parents)
751
1226
        if this_name is None:
752
1227
            if name_winner == "this":
753
1228
                name_winner = "other"
755
1230
                parent_id_winner = "other"
756
1231
        if name_winner == "this" and parent_id_winner == "this":
757
1232
            return
758
 
        if name_winner == "conflict":
759
 
            trans_id = self.tt.trans_id_file_id(file_id)
760
 
            self._raw_conflicts.append(('name conflict', trans_id, 
761
 
                                        this_name, other_name))
762
 
        if parent_id_winner == "conflict":
763
 
            trans_id = self.tt.trans_id_file_id(file_id)
764
 
            self._raw_conflicts.append(('parent conflict', trans_id, 
765
 
                                        this_parent, other_parent))
 
1233
        if name_winner == 'conflict' or parent_id_winner == 'conflict':
 
1234
            # Creating helpers (.OTHER or .THIS) here cause problems down the
 
1235
            # road if a ContentConflict needs to be created so we should not do
 
1236
            # that
 
1237
            trans_id = self.tt.trans_id_file_id(file_id)
 
1238
            self._raw_conflicts.append(('path conflict', trans_id, file_id,
 
1239
                                        this_parent, this_name,
 
1240
                                        other_parent, other_name))
766
1241
        if other_name is None:
767
 
            # it doesn't matter whether the result was 'other' or 
 
1242
            # it doesn't matter whether the result was 'other' or
768
1243
            # 'conflict'-- if there's no 'other', we leave it alone.
769
1244
            return
770
 
        # if we get here, name_winner and parent_winner are set to safe values.
771
 
        trans_id = self.tt.trans_id_file_id(file_id)
772
1245
        parent_id = parents[self.winner_idx[parent_id_winner]]
773
1246
        if parent_id is not None:
774
 
            parent_trans_id = self.tt.trans_id_file_id(parent_id)
 
1247
            # if we get here, name_winner and parent_winner are set to safe
 
1248
            # values.
775
1249
            self.tt.adjust_path(names[self.winner_idx[name_winner]],
776
 
                                parent_trans_id, trans_id)
 
1250
                                self.tt.trans_id_file_id(parent_id),
 
1251
                                self.tt.trans_id_file_id(file_id))
777
1252
 
778
 
    def merge_contents(self, file_id):
779
 
        """Performa a merge on file_id contents."""
 
1253
    def _do_merge_contents(self, file_id):
 
1254
        """Performs a merge on file_id contents."""
780
1255
        def contents_pair(tree):
781
1256
            if file_id not in tree:
782
1257
                return (None, None)
789
1264
                contents = None
790
1265
            return kind, contents
791
1266
 
792
 
        def contents_conflict():
793
 
            trans_id = self.tt.trans_id_file_id(file_id)
794
 
            name = self.tt.final_name(trans_id)
795
 
            parent_id = self.tt.final_parent(trans_id)
796
 
            if file_id in self.this_tree.inventory:
797
 
                self.tt.unversion_file(trans_id)
798
 
                if file_id in self.this_tree:
799
 
                    self.tt.delete_contents(trans_id)
800
 
            file_group = self._dump_conflicts(name, parent_id, file_id, 
801
 
                                              set_version=True)
802
 
            self._raw_conflicts.append(('contents conflict', file_group))
803
 
 
804
1267
        # See SPOT run.  run, SPOT, run.
805
1268
        # So we're not QUITE repeating ourselves; we do tricky things with
806
1269
        # file kind...
807
1270
        base_pair = contents_pair(self.base_tree)
808
1271
        other_pair = contents_pair(self.other_tree)
809
 
        if base_pair == other_pair:
810
 
            # OTHER introduced no changes
811
 
            return "unmodified"
812
 
        this_pair = contents_pair(self.this_tree)
813
 
        if this_pair == other_pair:
814
 
            # THIS and OTHER introduced the same changes
815
 
            return "unmodified"
816
 
        else:
817
 
            trans_id = self.tt.trans_id_file_id(file_id)
818
 
            if this_pair == base_pair:
819
 
                # only OTHER introduced changes
820
 
                if file_id in self.this_tree:
821
 
                    # Remove any existing contents
822
 
                    self.tt.delete_contents(trans_id)
823
 
                if file_id in self.other_tree:
824
 
                    # OTHER changed the file
825
 
                    create_by_entry(self.tt, 
826
 
                                    self.other_tree.inventory[file_id], 
827
 
                                    self.other_tree, trans_id)
828
 
                    if file_id not in self.this_tree.inventory:
829
 
                        self.tt.version_file(file_id, trans_id)
830
 
                    return "modified"
831
 
                elif file_id in self.this_tree.inventory:
832
 
                    # OTHER deleted the file
833
 
                    self.tt.unversion_file(trans_id)
834
 
                    return "deleted"
835
 
            #BOTH THIS and OTHER introduced changes; scalar conflict
836
 
            elif this_pair[0] == "file" and other_pair[0] == "file":
837
 
                # THIS and OTHER are both files, so text merge.  Either
838
 
                # BASE is a file, or both converted to files, so at least we
839
 
                # have agreement that output should be a file.
840
 
                try:
841
 
                    self.text_merge(file_id, trans_id)
842
 
                except BinaryFile:
843
 
                    return contents_conflict()
844
 
                if file_id not in self.this_tree.inventory:
845
 
                    self.tt.version_file(file_id, trans_id)
846
 
                try:
847
 
                    self.tt.tree_kind(trans_id)
848
 
                    self.tt.delete_contents(trans_id)
849
 
                except NoSuchFile:
850
 
                    pass
851
 
                return "modified"
852
 
            else:
853
 
                # Scalar conflict, can't text merge.  Dump conflicts
854
 
                return contents_conflict()
 
1272
        if self._lca_trees:
 
1273
            this_pair = contents_pair(self.this_tree)
 
1274
            lca_pairs = [contents_pair(tree) for tree in self._lca_trees]
 
1275
            winner = self._lca_multi_way((base_pair, lca_pairs), other_pair,
 
1276
                                         this_pair, allow_overriding_lca=False)
 
1277
        else:
 
1278
            if base_pair == other_pair:
 
1279
                winner = 'this'
 
1280
            else:
 
1281
                # We delayed evaluating this_pair as long as we can to avoid
 
1282
                # unnecessary sha1 calculation
 
1283
                this_pair = contents_pair(self.this_tree)
 
1284
                winner = self._three_way(base_pair, other_pair, this_pair)
 
1285
        if winner == 'this':
 
1286
            # No interesting changes introduced by OTHER
 
1287
            return "unmodified"
 
1288
        # We have a hypothetical conflict, but if we have files, then we
 
1289
        # can try to merge the content
 
1290
        trans_id = self.tt.trans_id_file_id(file_id)
 
1291
        params = MergeHookParams(self, file_id, trans_id, this_pair[0],
 
1292
            other_pair[0], winner)
 
1293
        hooks = self.active_hooks
 
1294
        hook_status = 'not_applicable'
 
1295
        for hook in hooks:
 
1296
            hook_status, lines = hook.merge_contents(params)
 
1297
            if hook_status != 'not_applicable':
 
1298
                # Don't try any more hooks, this one applies.
 
1299
                break
 
1300
        result = "modified"
 
1301
        if hook_status == 'not_applicable':
 
1302
            # This is a contents conflict, because none of the available
 
1303
            # functions could merge it.
 
1304
            result = None
 
1305
            name = self.tt.final_name(trans_id)
 
1306
            parent_id = self.tt.final_parent(trans_id)
 
1307
            if self.this_tree.has_id(file_id):
 
1308
                self.tt.unversion_file(trans_id)
 
1309
            file_group = self._dump_conflicts(name, parent_id, file_id,
 
1310
                                              set_version=True)
 
1311
            self._raw_conflicts.append(('contents conflict', file_group))
 
1312
        elif hook_status == 'success':
 
1313
            self.tt.create_file(lines, trans_id)
 
1314
        elif hook_status == 'conflicted':
 
1315
            # XXX: perhaps the hook should be able to provide
 
1316
            # the BASE/THIS/OTHER files?
 
1317
            self.tt.create_file(lines, trans_id)
 
1318
            self._raw_conflicts.append(('text conflict', trans_id))
 
1319
            name = self.tt.final_name(trans_id)
 
1320
            parent_id = self.tt.final_parent(trans_id)
 
1321
            self._dump_conflicts(name, parent_id, file_id)
 
1322
        elif hook_status == 'delete':
 
1323
            self.tt.unversion_file(trans_id)
 
1324
            result = "deleted"
 
1325
        elif hook_status == 'done':
 
1326
            # The hook function did whatever it needs to do directly, no
 
1327
            # further action needed here.
 
1328
            pass
 
1329
        else:
 
1330
            raise AssertionError('unknown hook_status: %r' % (hook_status,))
 
1331
        if not self.this_tree.has_id(file_id) and result == "modified":
 
1332
            self.tt.version_file(file_id, trans_id)
 
1333
        # The merge has been performed, so the old contents should not be
 
1334
        # retained.
 
1335
        try:
 
1336
            self.tt.delete_contents(trans_id)
 
1337
        except errors.NoSuchFile:
 
1338
            pass
 
1339
        return result
 
1340
 
 
1341
    def _default_other_winner_merge(self, merge_hook_params):
 
1342
        """Replace this contents with other."""
 
1343
        file_id = merge_hook_params.file_id
 
1344
        trans_id = merge_hook_params.trans_id
 
1345
        file_in_this = self.this_tree.has_id(file_id)
 
1346
        if self.other_tree.has_id(file_id):
 
1347
            # OTHER changed the file
 
1348
            wt = self.this_tree
 
1349
            if wt.supports_content_filtering():
 
1350
                # We get the path from the working tree if it exists.
 
1351
                # That fails though when OTHER is adding a file, so
 
1352
                # we fall back to the other tree to find the path if
 
1353
                # it doesn't exist locally.
 
1354
                try:
 
1355
                    filter_tree_path = wt.id2path(file_id)
 
1356
                except errors.NoSuchId:
 
1357
                    filter_tree_path = self.other_tree.id2path(file_id)
 
1358
            else:
 
1359
                # Skip the id2path lookup for older formats
 
1360
                filter_tree_path = None
 
1361
            transform.create_from_tree(self.tt, trans_id,
 
1362
                             self.other_tree, file_id,
 
1363
                             filter_tree_path=filter_tree_path)
 
1364
            return 'done', None
 
1365
        elif file_in_this:
 
1366
            # OTHER deleted the file
 
1367
            return 'delete', None
 
1368
        else:
 
1369
            raise AssertionError(
 
1370
                'winner is OTHER, but file_id %r not in THIS or OTHER tree'
 
1371
                % (file_id,))
 
1372
 
 
1373
    def merge_contents(self, merge_hook_params):
 
1374
        """Fallback merge logic after user installed hooks."""
 
1375
        # This function is used in merge hooks as the fallback instance.
 
1376
        # Perhaps making this function and the functions it calls be a 
 
1377
        # a separate class would be better.
 
1378
        if merge_hook_params.winner == 'other':
 
1379
            # OTHER is a straight winner, so replace this contents with other
 
1380
            return self._default_other_winner_merge(merge_hook_params)
 
1381
        elif merge_hook_params.is_file_merge():
 
1382
            # THIS and OTHER are both files, so text merge.  Either
 
1383
            # BASE is a file, or both converted to files, so at least we
 
1384
            # have agreement that output should be a file.
 
1385
            try:
 
1386
                self.text_merge(merge_hook_params.file_id,
 
1387
                    merge_hook_params.trans_id)
 
1388
            except errors.BinaryFile:
 
1389
                return 'not_applicable', None
 
1390
            return 'done', None
 
1391
        else:
 
1392
            return 'not_applicable', None
855
1393
 
856
1394
    def get_lines(self, tree, file_id):
857
1395
        """Return the lines in a file, or an empty list."""
858
 
        if file_id in tree:
 
1396
        if tree.has_id(file_id):
859
1397
            return tree.get_file(file_id).readlines()
860
1398
        else:
861
1399
            return []
864
1402
        """Perform a three-way text merge on a file_id"""
865
1403
        # it's possible that we got here with base as a different type.
866
1404
        # if so, we just want two-way text conflicts.
867
 
        if file_id in self.base_tree and \
 
1405
        if self.base_tree.has_id(file_id) and \
868
1406
            self.base_tree.kind(file_id) == "file":
869
1407
            base_lines = self.get_lines(self.base_tree, file_id)
870
1408
        else:
871
1409
            base_lines = []
872
1410
        other_lines = self.get_lines(self.other_tree, file_id)
873
1411
        this_lines = self.get_lines(self.this_tree, file_id)
874
 
        m3 = Merge3(base_lines, this_lines, other_lines,
875
 
                    is_cherrypick=self.cherrypick)
 
1412
        m3 = merge3.Merge3(base_lines, this_lines, other_lines,
 
1413
                           is_cherrypick=self.cherrypick)
876
1414
        start_marker = "!START OF MERGE CONFLICT!" + "I HOPE THIS IS UNIQUE"
877
1415
        if self.show_base is True:
878
1416
            base_marker = '|' * 7
881
1419
 
882
1420
        def iter_merge3(retval):
883
1421
            retval["text_conflicts"] = False
884
 
            for line in m3.merge_lines(name_a = "TREE", 
885
 
                                       name_b = "MERGE-SOURCE", 
 
1422
            for line in m3.merge_lines(name_a = "TREE",
 
1423
                                       name_b = "MERGE-SOURCE",
886
1424
                                       name_base = "BASE-REVISION",
887
 
                                       start_marker=start_marker, 
 
1425
                                       start_marker=start_marker,
888
1426
                                       base_marker=base_marker,
889
1427
                                       reprocess=self.reprocess):
890
1428
                if line.startswith(start_marker):
899
1437
            self._raw_conflicts.append(('text conflict', trans_id))
900
1438
            name = self.tt.final_name(trans_id)
901
1439
            parent_id = self.tt.final_parent(trans_id)
902
 
            file_group = self._dump_conflicts(name, parent_id, file_id, 
 
1440
            file_group = self._dump_conflicts(name, parent_id, file_id,
903
1441
                                              this_lines, base_lines,
904
1442
                                              other_lines)
905
1443
            file_group.append(trans_id)
906
1444
 
907
 
    def _dump_conflicts(self, name, parent_id, file_id, this_lines=None, 
 
1445
    def _dump_conflicts(self, name, parent_id, file_id, this_lines=None,
908
1446
                        base_lines=None, other_lines=None, set_version=False,
909
1447
                        no_base=False):
910
1448
        """Emit conflict files.
912
1450
        determined automatically.  If set_version is true, the .OTHER, .THIS
913
1451
        or .BASE (in that order) will be created as versioned files.
914
1452
        """
915
 
        data = [('OTHER', self.other_tree, other_lines), 
 
1453
        data = [('OTHER', self.other_tree, other_lines),
916
1454
                ('THIS', self.this_tree, this_lines)]
917
1455
        if not no_base:
918
1456
            data.append(('BASE', self.base_tree, base_lines))
 
1457
 
 
1458
        # We need to use the actual path in the working tree of the file here,
 
1459
        # ignoring the conflict suffixes
 
1460
        wt = self.this_tree
 
1461
        if wt.supports_content_filtering():
 
1462
            try:
 
1463
                filter_tree_path = wt.id2path(file_id)
 
1464
            except errors.NoSuchId:
 
1465
                # file has been deleted
 
1466
                filter_tree_path = None
 
1467
        else:
 
1468
            # Skip the id2path lookup for older formats
 
1469
            filter_tree_path = None
 
1470
 
919
1471
        versioned = False
920
1472
        file_group = []
921
1473
        for suffix, tree, lines in data:
922
 
            if file_id in tree:
 
1474
            if tree.has_id(file_id):
923
1475
                trans_id = self._conflict_file(name, parent_id, tree, file_id,
924
 
                                               suffix, lines)
 
1476
                                               suffix, lines, filter_tree_path)
925
1477
                file_group.append(trans_id)
926
1478
                if set_version and not versioned:
927
1479
                    self.tt.version_file(file_id, trans_id)
928
1480
                    versioned = True
929
1481
        return file_group
930
 
           
931
 
    def _conflict_file(self, name, parent_id, tree, file_id, suffix, 
932
 
                       lines=None):
 
1482
 
 
1483
    def _conflict_file(self, name, parent_id, tree, file_id, suffix,
 
1484
                       lines=None, filter_tree_path=None):
933
1485
        """Emit a single conflict file."""
934
1486
        name = name + '.' + suffix
935
1487
        trans_id = self.tt.create_path(name, parent_id)
936
 
        entry = tree.inventory[file_id]
937
 
        create_by_entry(self.tt, entry, tree, trans_id, lines)
 
1488
        transform.create_from_tree(self.tt, trans_id, tree, file_id, lines,
 
1489
            filter_tree_path)
938
1490
        return trans_id
939
1491
 
940
1492
    def merge_executable(self, file_id, file_status):
941
1493
        """Perform a merge on the execute bit."""
942
1494
        executable = [self.executable(t, file_id) for t in (self.base_tree,
943
1495
                      self.other_tree, self.this_tree)]
944
 
        self._merge_executable(file_id, executable, file_status)
 
1496
        self._merge_executable(file_id, executable, file_status,
 
1497
                               resolver=self._three_way)
945
1498
 
946
 
    def _merge_executable(self, file_id, executable, file_status):
 
1499
    def _merge_executable(self, file_id, executable, file_status,
 
1500
                          resolver):
947
1501
        """Perform a merge on the execute bit."""
948
1502
        base_executable, other_executable, this_executable = executable
949
1503
        if file_status == "deleted":
950
1504
            return
951
 
        winner = self._three_way(*executable)
 
1505
        winner = resolver(*executable)
952
1506
        if winner == "conflict":
953
1507
        # There must be a None in here, if we have a conflict, but we
954
1508
        # need executability since file status was not deleted.
962
1516
        try:
963
1517
            if self.tt.final_kind(trans_id) != "file":
964
1518
                return
965
 
        except NoSuchFile:
 
1519
        except errors.NoSuchFile:
966
1520
            return
967
1521
        if winner == "this":
968
1522
            executability = this_executable
969
1523
        else:
970
 
            if file_id in self.other_tree:
 
1524
            if self.other_tree.has_id(file_id):
971
1525
                executability = other_executable
972
 
            elif file_id in self.this_tree:
 
1526
            elif self.this_tree.has_id(file_id):
973
1527
                executability = this_executable
974
 
            elif file_id in self.base_tree:
 
1528
            elif self.base_tree_has_id(file_id):
975
1529
                executability = base_executable
976
1530
        if executability is not None:
977
1531
            trans_id = self.tt.trans_id_file_id(file_id)
979
1533
 
980
1534
    def cook_conflicts(self, fs_conflicts):
981
1535
        """Convert all conflicts into a form that doesn't depend on trans_id"""
982
 
        from conflicts import Conflict
983
 
        name_conflicts = {}
984
 
        self.cooked_conflicts.extend(cook_conflicts(fs_conflicts, self.tt))
985
 
        fp = FinalPaths(self.tt)
 
1536
        self.cooked_conflicts.extend(transform.cook_conflicts(
 
1537
                fs_conflicts, self.tt))
 
1538
        fp = transform.FinalPaths(self.tt)
986
1539
        for conflict in self._raw_conflicts:
987
1540
            conflict_type = conflict[0]
988
 
            if conflict_type in ('name conflict', 'parent conflict'):
989
 
                trans_id = conflict[1]
990
 
                conflict_args = conflict[2:]
991
 
                if trans_id not in name_conflicts:
992
 
                    name_conflicts[trans_id] = {}
993
 
                unique_add(name_conflicts[trans_id], conflict_type, 
994
 
                           conflict_args)
995
 
            if conflict_type == 'contents conflict':
 
1541
            if conflict_type == 'path conflict':
 
1542
                (trans_id, file_id,
 
1543
                this_parent, this_name,
 
1544
                other_parent, other_name) = conflict[1:]
 
1545
                if this_parent is None or this_name is None:
 
1546
                    this_path = '<deleted>'
 
1547
                else:
 
1548
                    parent_path =  fp.get_path(
 
1549
                        self.tt.trans_id_file_id(this_parent))
 
1550
                    this_path = osutils.pathjoin(parent_path, this_name)
 
1551
                if other_parent is None or other_name is None:
 
1552
                    other_path = '<deleted>'
 
1553
                else:
 
1554
                    parent_path =  fp.get_path(
 
1555
                        self.tt.trans_id_file_id(other_parent))
 
1556
                    other_path = osutils.pathjoin(parent_path, other_name)
 
1557
                c = _mod_conflicts.Conflict.factory(
 
1558
                    'path conflict', path=this_path,
 
1559
                    conflict_path=other_path,
 
1560
                    file_id=file_id)
 
1561
            elif conflict_type == 'contents conflict':
996
1562
                for trans_id in conflict[1]:
997
1563
                    file_id = self.tt.final_file_id(trans_id)
998
1564
                    if file_id is not None:
1002
1568
                    if path.endswith(suffix):
1003
1569
                        path = path[:-len(suffix)]
1004
1570
                        break
1005
 
                c = Conflict.factory(conflict_type, path=path, file_id=file_id)
1006
 
                self.cooked_conflicts.append(c)
1007
 
            if conflict_type == 'text conflict':
 
1571
                c = _mod_conflicts.Conflict.factory(conflict_type,
 
1572
                                                    path=path, file_id=file_id)
 
1573
            elif conflict_type == 'text conflict':
1008
1574
                trans_id = conflict[1]
1009
1575
                path = fp.get_path(trans_id)
1010
1576
                file_id = self.tt.final_file_id(trans_id)
1011
 
                c = Conflict.factory(conflict_type, path=path, file_id=file_id)
1012
 
                self.cooked_conflicts.append(c)
1013
 
 
1014
 
        for trans_id, conflicts in name_conflicts.iteritems():
1015
 
            try:
1016
 
                this_parent, other_parent = conflicts['parent conflict']
1017
 
                if this_parent == other_parent:
1018
 
                    raise AssertionError()
1019
 
            except KeyError:
1020
 
                this_parent = other_parent = \
1021
 
                    self.tt.final_file_id(self.tt.final_parent(trans_id))
1022
 
            try:
1023
 
                this_name, other_name = conflicts['name conflict']
1024
 
                if this_name == other_name:
1025
 
                    raise AssertionError()
1026
 
            except KeyError:
1027
 
                this_name = other_name = self.tt.final_name(trans_id)
1028
 
            other_path = fp.get_path(trans_id)
1029
 
            if this_parent is not None and this_name is not None:
1030
 
                this_parent_path = \
1031
 
                    fp.get_path(self.tt.trans_id_file_id(this_parent))
1032
 
                this_path = pathjoin(this_parent_path, this_name)
 
1577
                c = _mod_conflicts.Conflict.factory(conflict_type,
 
1578
                                                    path=path, file_id=file_id)
1033
1579
            else:
1034
 
                this_path = "<deleted>"
1035
 
            file_id = self.tt.final_file_id(trans_id)
1036
 
            c = Conflict.factory('path conflict', path=this_path,
1037
 
                                 conflict_path=other_path, file_id=file_id)
 
1580
                raise AssertionError('bad conflict type: %r' % (conflict,))
1038
1581
            self.cooked_conflicts.append(c)
1039
 
        self.cooked_conflicts.sort(key=Conflict.sort_key)
 
1582
        self.cooked_conflicts.sort(key=_mod_conflicts.Conflict.sort_key)
1040
1583
 
1041
1584
 
1042
1585
class WeaveMerger(Merge3Merger):
1046
1589
    supports_reverse_cherrypick = False
1047
1590
    history_based = True
1048
1591
 
1049
 
    def _merged_lines(self, file_id):
1050
 
        """Generate the merged lines.
1051
 
        There is no distinction between lines that are meant to contain <<<<<<<
1052
 
        and conflicts.
1053
 
        """
1054
 
        if self.cherrypick:
1055
 
            base = self.base_tree
1056
 
        else:
1057
 
            base = None
1058
 
        plan = self.this_tree.plan_file_merge(file_id, self.other_tree,
 
1592
    def _generate_merge_plan(self, file_id, base):
 
1593
        return self.this_tree.plan_file_merge(file_id, self.other_tree,
1059
1594
                                              base=base)
 
1595
 
 
1596
    def _merged_lines(self, file_id):
 
1597
        """Generate the merged lines.
 
1598
        There is no distinction between lines that are meant to contain <<<<<<<
 
1599
        and conflicts.
 
1600
        """
 
1601
        if self.cherrypick:
 
1602
            base = self.base_tree
 
1603
        else:
 
1604
            base = None
 
1605
        plan = self._generate_merge_plan(file_id, base)
1060
1606
        if 'merge' in debug.debug_flags:
1061
1607
            plan = list(plan)
1062
1608
            trans_id = self.tt.trans_id_file_id(file_id)
1063
1609
            name = self.tt.final_name(trans_id) + '.plan'
1064
 
            contents = ('%10s|%s' % l for l in plan)
 
1610
            contents = ('%11s|%s' % l for l in plan)
1065
1611
            self.tt.new_file(name, self.tt.final_parent(trans_id), contents)
1066
 
        textmerge = PlanWeaveMerge(plan, '<<<<<<< TREE\n',
1067
 
            '>>>>>>> MERGE-SOURCE\n')
1068
 
        return textmerge.merge_lines(self.reprocess)
 
1612
        textmerge = versionedfile.PlanWeaveMerge(plan, '<<<<<<< TREE\n',
 
1613
                                                 '>>>>>>> MERGE-SOURCE\n')
 
1614
        lines, conflicts = textmerge.merge_lines(self.reprocess)
 
1615
        if conflicts:
 
1616
            base_lines = textmerge.base_from_plan()
 
1617
        else:
 
1618
            base_lines = None
 
1619
        return lines, base_lines
1069
1620
 
1070
1621
    def text_merge(self, file_id, trans_id):
1071
1622
        """Perform a (weave) text merge for a given file and file-id.
1072
1623
        If conflicts are encountered, .THIS and .OTHER files will be emitted,
1073
1624
        and a conflict will be noted.
1074
1625
        """
1075
 
        lines, conflicts = self._merged_lines(file_id)
 
1626
        lines, base_lines = self._merged_lines(file_id)
1076
1627
        lines = list(lines)
1077
 
        # Note we're checking whether the OUTPUT is binary in this case, 
 
1628
        # Note we're checking whether the OUTPUT is binary in this case,
1078
1629
        # because we don't want to get into weave merge guts.
1079
 
        check_text_lines(lines)
 
1630
        textfile.check_text_lines(lines)
1080
1631
        self.tt.create_file(lines, trans_id)
1081
 
        if conflicts:
 
1632
        if base_lines is not None:
 
1633
            # Conflict
1082
1634
            self._raw_conflicts.append(('text conflict', trans_id))
1083
1635
            name = self.tt.final_name(trans_id)
1084
1636
            parent_id = self.tt.final_parent(trans_id)
1085
 
            file_group = self._dump_conflicts(name, parent_id, file_id, 
1086
 
                                              no_base=True)
 
1637
            file_group = self._dump_conflicts(name, parent_id, file_id,
 
1638
                                              no_base=False,
 
1639
                                              base_lines=base_lines)
1087
1640
            file_group.append(trans_id)
1088
1641
 
1089
1642
 
1090
1643
class LCAMerger(WeaveMerger):
1091
1644
 
1092
 
    def _merged_lines(self, file_id):
1093
 
        """Generate the merged lines.
1094
 
        There is no distinction between lines that are meant to contain <<<<<<<
1095
 
        and conflicts.
1096
 
        """
1097
 
        if self.cherrypick:
1098
 
            base = self.base_tree
1099
 
        else:
1100
 
            base = None
1101
 
        plan = self.this_tree.plan_file_lca_merge(file_id, self.other_tree,
 
1645
    def _generate_merge_plan(self, file_id, base):
 
1646
        return self.this_tree.plan_file_lca_merge(file_id, self.other_tree,
1102
1647
                                                  base=base)
1103
 
        if 'merge' in debug.debug_flags:
1104
 
            plan = list(plan)
1105
 
            trans_id = self.tt.trans_id_file_id(file_id)
1106
 
            name = self.tt.final_name(trans_id) + '.plan'
1107
 
            contents = ('%10s|%s' % l for l in plan)
1108
 
            self.tt.new_file(name, self.tt.final_parent(trans_id), contents)
1109
 
        textmerge = PlanWeaveMerge(plan, '<<<<<<< TREE\n',
1110
 
            '>>>>>>> MERGE-SOURCE\n')
1111
 
        return textmerge.merge_lines(self.reprocess)
1112
 
 
1113
1648
 
1114
1649
class Diff3Merger(Merge3Merger):
1115
1650
    """Three-way merger using external diff3 for text merging"""
1116
1651
 
1117
1652
    def dump_file(self, temp_dir, name, tree, file_id):
1118
 
        out_path = pathjoin(temp_dir, name)
 
1653
        out_path = osutils.pathjoin(temp_dir, name)
1119
1654
        out_file = open(out_path, "wb")
1120
1655
        try:
1121
1656
            in_file = tree.get_file(file_id)
1133
1668
        import bzrlib.patch
1134
1669
        temp_dir = osutils.mkdtemp(prefix="bzr-")
1135
1670
        try:
1136
 
            new_file = pathjoin(temp_dir, "new")
 
1671
            new_file = osutils.pathjoin(temp_dir, "new")
1137
1672
            this = self.dump_file(temp_dir, "this", self.this_tree, file_id)
1138
1673
            base = self.dump_file(temp_dir, "base", self.base_tree, file_id)
1139
1674
            other = self.dump_file(temp_dir, "other", self.other_tree, file_id)
1140
1675
            status = bzrlib.patch.diff3(new_file, this, base, other)
1141
1676
            if status not in (0, 1):
1142
 
                raise BzrError("Unhandled diff3 exit code")
 
1677
                raise errors.BzrError("Unhandled diff3 exit code")
1143
1678
            f = open(new_file, 'rb')
1144
1679
            try:
1145
1680
                self.tt.create_file(f, trans_id)
1163
1698
                other_rev_id=None,
1164
1699
                interesting_files=None,
1165
1700
                this_tree=None,
1166
 
                pb=DummyProgress(),
 
1701
                pb=None,
1167
1702
                change_reporter=None):
1168
 
    """Primary interface for merging. 
 
1703
    """Primary interface for merging.
1169
1704
 
1170
 
        typical use is probably 
 
1705
        typical use is probably
1171
1706
        'merge_inner(branch, branch.get_revision_tree(other_revision),
1172
1707
                     branch.get_revision_tree(base_revision))'
1173
1708
        """
1174
1709
    if this_tree is None:
1175
 
        raise BzrError("bzrlib.merge.merge_inner requires a this_tree "
1176
 
            "parameter as of bzrlib version 0.8.")
 
1710
        raise errors.BzrError("bzrlib.merge.merge_inner requires a this_tree "
 
1711
                              "parameter as of bzrlib version 0.8.")
1177
1712
    merger = Merger(this_branch, other_tree, base_tree, this_tree=this_tree,
1178
1713
                    pb=pb, change_reporter=change_reporter)
1179
1714
    merger.backup_files = backup_files
1192
1727
    get_revision_id = getattr(base_tree, 'get_revision_id', None)
1193
1728
    if get_revision_id is None:
1194
1729
        get_revision_id = base_tree.last_revision
 
1730
    merger.cache_trees_with_revision_ids([other_tree, base_tree, this_tree])
1195
1731
    merger.set_base_revision(get_revision_id(), this_branch)
1196
1732
    return merger.do_merge()
1197
1733
 
1240
1776
 
1241
1777
class _PlanMergeBase(object):
1242
1778
 
1243
 
    def __init__(self, a_rev, b_rev, vf):
 
1779
    def __init__(self, a_rev, b_rev, vf, key_prefix):
1244
1780
        """Contructor.
1245
1781
 
1246
1782
        :param a_rev: Revision-id of one revision to merge
1247
1783
        :param b_rev: Revision-id of the other revision to merge
1248
 
        :param vf: A versionedfile containing both revisions
 
1784
        :param vf: A VersionedFiles containing both revisions
 
1785
        :param key_prefix: A prefix for accessing keys in vf, typically
 
1786
            (file_id,).
1249
1787
        """
1250
1788
        self.a_rev = a_rev
1251
1789
        self.b_rev = b_rev
1252
 
        self.lines_a = vf.get_lines(a_rev)
1253
 
        self.lines_b = vf.get_lines(b_rev)
1254
1790
        self.vf = vf
1255
1791
        self._last_lines = None
1256
1792
        self._last_lines_revision_id = None
1257
1793
        self._cached_matching_blocks = {}
 
1794
        self._key_prefix = key_prefix
 
1795
        self._precache_tip_lines()
 
1796
 
 
1797
    def _precache_tip_lines(self):
 
1798
        lines = self.get_lines([self.a_rev, self.b_rev])
 
1799
        self.lines_a = lines[self.a_rev]
 
1800
        self.lines_b = lines[self.b_rev]
 
1801
 
 
1802
    def get_lines(self, revisions):
 
1803
        """Get lines for revisions from the backing VersionedFiles.
 
1804
 
 
1805
        :raises RevisionNotPresent: on absent texts.
 
1806
        """
 
1807
        keys = [(self._key_prefix + (rev,)) for rev in revisions]
 
1808
        result = {}
 
1809
        for record in self.vf.get_record_stream(keys, 'unordered', True):
 
1810
            if record.storage_kind == 'absent':
 
1811
                raise errors.RevisionNotPresent(record.key, self.vf)
 
1812
            result[record.key[-1]] = osutils.chunks_to_lines(
 
1813
                record.get_bytes_as('chunked'))
 
1814
        return result
1258
1815
 
1259
1816
    def plan_merge(self):
1260
1817
        """Generate a 'plan' for merging the two revisions.
1308
1865
            return cached
1309
1866
        if self._last_lines_revision_id == left_revision:
1310
1867
            left_lines = self._last_lines
 
1868
            right_lines = self.get_lines([right_revision])[right_revision]
1311
1869
        else:
1312
 
            left_lines = self.vf.get_lines(left_revision)
1313
 
        right_lines = self.vf.get_lines(right_revision)
 
1870
            lines = self.get_lines([left_revision, right_revision])
 
1871
            left_lines = lines[left_revision]
 
1872
            right_lines = lines[right_revision]
1314
1873
        self._last_lines = right_lines
1315
1874
        self._last_lines_revision_id = right_revision
1316
1875
        matcher = patiencediff.PatienceSequenceMatcher(None, left_lines,
1369
1928
class _PlanMerge(_PlanMergeBase):
1370
1929
    """Plan an annotate merge using on-the-fly annotation"""
1371
1930
 
1372
 
    def __init__(self, a_rev, b_rev, vf):
1373
 
       _PlanMergeBase.__init__(self, a_rev, b_rev, vf)
1374
 
       a_ancestry = set(vf.get_ancestry(a_rev, topo_sorted=False))
1375
 
       b_ancestry = set(vf.get_ancestry(b_rev, topo_sorted=False))
1376
 
       self.uncommon = a_ancestry.symmetric_difference(b_ancestry)
1377
 
 
1378
 
    def _determine_status(self, revision_id, unique_line_numbers):
1379
 
        """Determines the status unique lines versus all lcas.
1380
 
 
1381
 
        Basically, determines why the line is unique to this revision.
1382
 
 
1383
 
        A line may be determined new or killed, but not both.
1384
 
 
1385
 
        :param revision_id: The id of the revision in which the lines are
1386
 
            unique
1387
 
        :param unique_line_numbers: The line numbers of unique lines.
1388
 
        :return a tuple of (new_this, killed_other):
1389
 
        """
1390
 
        new = self._find_new(revision_id)
1391
 
        killed = set(unique_line_numbers).difference(new)
1392
 
        return new, killed
1393
 
 
1394
 
    def _find_new(self, version_id):
1395
 
        """Determine which lines are new in the ancestry of this version.
1396
 
 
1397
 
        If a lines is present in this version, and not present in any
1398
 
        common ancestor, it is considered new.
1399
 
        """
1400
 
        if version_id not in self.uncommon:
1401
 
            return set()
1402
 
        parents = self.vf.get_parent_map([version_id])[version_id]
1403
 
        if len(parents) == 0:
1404
 
            return set(range(len(self.vf.get_lines(version_id))))
1405
 
        new = None
1406
 
        for parent in parents:
1407
 
            blocks = self._get_matching_blocks(version_id, parent)
1408
 
            result, unused = self._unique_lines(blocks)
1409
 
            parent_new = self._find_new(parent)
1410
 
            for i, j, n in blocks:
1411
 
                for ii, jj in [(i+r, j+r) for r in range(n)]:
1412
 
                    if jj in parent_new:
1413
 
                        result.append(ii)
1414
 
            if new is None:
1415
 
                new = set(result)
1416
 
            else:
1417
 
                new.intersection_update(result)
1418
 
        return new
 
1931
    def __init__(self, a_rev, b_rev, vf, key_prefix):
 
1932
        super(_PlanMerge, self).__init__(a_rev, b_rev, vf, key_prefix)
 
1933
        self.a_key = self._key_prefix + (self.a_rev,)
 
1934
        self.b_key = self._key_prefix + (self.b_rev,)
 
1935
        self.graph = _mod_graph.Graph(self.vf)
 
1936
        heads = self.graph.heads((self.a_key, self.b_key))
 
1937
        if len(heads) == 1:
 
1938
            # one side dominates, so we can just return its values, yay for
 
1939
            # per-file graphs
 
1940
            # Ideally we would know that before we get this far
 
1941
            self._head_key = heads.pop()
 
1942
            if self._head_key == self.a_key:
 
1943
                other = b_rev
 
1944
            else:
 
1945
                other = a_rev
 
1946
            trace.mutter('found dominating revision for %s\n%s > %s', self.vf,
 
1947
                         self._head_key[-1], other)
 
1948
            self._weave = None
 
1949
        else:
 
1950
            self._head_key = None
 
1951
            self._build_weave()
 
1952
 
 
1953
    def _precache_tip_lines(self):
 
1954
        # Turn this into a no-op, because we will do this later
 
1955
        pass
 
1956
 
 
1957
    def _find_recursive_lcas(self):
 
1958
        """Find all the ancestors back to a unique lca"""
 
1959
        cur_ancestors = (self.a_key, self.b_key)
 
1960
        # graph.find_lca(uncommon, keys) now returns plain NULL_REVISION,
 
1961
        # rather than a key tuple. We will just map that directly to no common
 
1962
        # ancestors.
 
1963
        parent_map = {}
 
1964
        while True:
 
1965
            next_lcas = self.graph.find_lca(*cur_ancestors)
 
1966
            # Map a plain NULL_REVISION to a simple no-ancestors
 
1967
            if next_lcas == set([_mod_revision.NULL_REVISION]):
 
1968
                next_lcas = ()
 
1969
            # Order the lca's based on when they were merged into the tip
 
1970
            # While the actual merge portion of weave merge uses a set() of
 
1971
            # active revisions, the order of insertion *does* effect the
 
1972
            # implicit ordering of the texts.
 
1973
            for rev_key in cur_ancestors:
 
1974
                ordered_parents = tuple(self.graph.find_merge_order(rev_key,
 
1975
                                                                    next_lcas))
 
1976
                parent_map[rev_key] = ordered_parents
 
1977
            if len(next_lcas) == 0:
 
1978
                break
 
1979
            elif len(next_lcas) == 1:
 
1980
                parent_map[list(next_lcas)[0]] = ()
 
1981
                break
 
1982
            elif len(next_lcas) > 2:
 
1983
                # More than 2 lca's, fall back to grabbing all nodes between
 
1984
                # this and the unique lca.
 
1985
                trace.mutter('More than 2 LCAs, falling back to all nodes for:'
 
1986
                             ' %s, %s\n=> %s',
 
1987
                             self.a_key, self.b_key, cur_ancestors)
 
1988
                cur_lcas = next_lcas
 
1989
                while len(cur_lcas) > 1:
 
1990
                    cur_lcas = self.graph.find_lca(*cur_lcas)
 
1991
                if len(cur_lcas) == 0:
 
1992
                    # No common base to find, use the full ancestry
 
1993
                    unique_lca = None
 
1994
                else:
 
1995
                    unique_lca = list(cur_lcas)[0]
 
1996
                    if unique_lca == _mod_revision.NULL_REVISION:
 
1997
                        # find_lca will return a plain 'NULL_REVISION' rather
 
1998
                        # than a key tuple when there is no common ancestor, we
 
1999
                        # prefer to just use None, because it doesn't confuse
 
2000
                        # _get_interesting_texts()
 
2001
                        unique_lca = None
 
2002
                parent_map.update(self._find_unique_parents(next_lcas,
 
2003
                                                            unique_lca))
 
2004
                break
 
2005
            cur_ancestors = next_lcas
 
2006
        return parent_map
 
2007
 
 
2008
    def _find_unique_parents(self, tip_keys, base_key):
 
2009
        """Find ancestors of tip that aren't ancestors of base.
 
2010
 
 
2011
        :param tip_keys: Nodes that are interesting
 
2012
        :param base_key: Cull all ancestors of this node
 
2013
        :return: The parent map for all revisions between tip_keys and
 
2014
            base_key. base_key will be included. References to nodes outside of
 
2015
            the ancestor set will also be removed.
 
2016
        """
 
2017
        # TODO: this would be simpler if find_unique_ancestors took a list
 
2018
        #       instead of a single tip, internally it supports it, but it
 
2019
        #       isn't a "backwards compatible" api change.
 
2020
        if base_key is None:
 
2021
            parent_map = dict(self.graph.iter_ancestry(tip_keys))
 
2022
            # We remove NULL_REVISION because it isn't a proper tuple key, and
 
2023
            # thus confuses things like _get_interesting_texts, and our logic
 
2024
            # to add the texts into the memory weave.
 
2025
            if _mod_revision.NULL_REVISION in parent_map:
 
2026
                parent_map.pop(_mod_revision.NULL_REVISION)
 
2027
        else:
 
2028
            interesting = set()
 
2029
            for tip in tip_keys:
 
2030
                interesting.update(
 
2031
                    self.graph.find_unique_ancestors(tip, [base_key]))
 
2032
            parent_map = self.graph.get_parent_map(interesting)
 
2033
            parent_map[base_key] = ()
 
2034
        culled_parent_map, child_map, tails = self._remove_external_references(
 
2035
            parent_map)
 
2036
        # Remove all the tails but base_key
 
2037
        if base_key is not None:
 
2038
            tails.remove(base_key)
 
2039
            self._prune_tails(culled_parent_map, child_map, tails)
 
2040
        # Now remove all the uninteresting 'linear' regions
 
2041
        simple_map = _mod_graph.collapse_linear_regions(culled_parent_map)
 
2042
        return simple_map
 
2043
 
 
2044
    @staticmethod
 
2045
    def _remove_external_references(parent_map):
 
2046
        """Remove references that go outside of the parent map.
 
2047
 
 
2048
        :param parent_map: Something returned from Graph.get_parent_map(keys)
 
2049
        :return: (filtered_parent_map, child_map, tails)
 
2050
            filtered_parent_map is parent_map without external references
 
2051
            child_map is the {parent_key: [child_keys]} mapping
 
2052
            tails is a list of nodes that do not have any parents in the map
 
2053
        """
 
2054
        # TODO: The basic effect of this function seems more generic than
 
2055
        #       _PlanMerge. But the specific details of building a child_map,
 
2056
        #       and computing tails seems very specific to _PlanMerge.
 
2057
        #       Still, should this be in Graph land?
 
2058
        filtered_parent_map = {}
 
2059
        child_map = {}
 
2060
        tails = []
 
2061
        for key, parent_keys in parent_map.iteritems():
 
2062
            culled_parent_keys = [p for p in parent_keys if p in parent_map]
 
2063
            if not culled_parent_keys:
 
2064
                tails.append(key)
 
2065
            for parent_key in culled_parent_keys:
 
2066
                child_map.setdefault(parent_key, []).append(key)
 
2067
            # TODO: Do we want to do this, it adds overhead for every node,
 
2068
            #       just to say that the node has no children
 
2069
            child_map.setdefault(key, [])
 
2070
            filtered_parent_map[key] = culled_parent_keys
 
2071
        return filtered_parent_map, child_map, tails
 
2072
 
 
2073
    @staticmethod
 
2074
    def _prune_tails(parent_map, child_map, tails_to_remove):
 
2075
        """Remove tails from the parent map.
 
2076
 
 
2077
        This will remove the supplied revisions until no more children have 0
 
2078
        parents.
 
2079
 
 
2080
        :param parent_map: A dict of {child: [parents]}, this dictionary will
 
2081
            be modified in place.
 
2082
        :param tails_to_remove: A list of tips that should be removed,
 
2083
            this list will be consumed
 
2084
        :param child_map: The reverse dict of parent_map ({parent: [children]})
 
2085
            this dict will be modified
 
2086
        :return: None, parent_map will be modified in place.
 
2087
        """
 
2088
        while tails_to_remove:
 
2089
            next = tails_to_remove.pop()
 
2090
            parent_map.pop(next)
 
2091
            children = child_map.pop(next)
 
2092
            for child in children:
 
2093
                child_parents = parent_map[child]
 
2094
                child_parents.remove(next)
 
2095
                if len(child_parents) == 0:
 
2096
                    tails_to_remove.append(child)
 
2097
 
 
2098
    def _get_interesting_texts(self, parent_map):
 
2099
        """Return a dict of texts we are interested in.
 
2100
 
 
2101
        Note that the input is in key tuples, but the output is in plain
 
2102
        revision ids.
 
2103
 
 
2104
        :param parent_map: The output from _find_recursive_lcas
 
2105
        :return: A dict of {'revision_id':lines} as returned by
 
2106
            _PlanMergeBase.get_lines()
 
2107
        """
 
2108
        all_revision_keys = set(parent_map)
 
2109
        all_revision_keys.add(self.a_key)
 
2110
        all_revision_keys.add(self.b_key)
 
2111
 
 
2112
        # Everything else is in 'keys' but get_lines is in 'revision_ids'
 
2113
        all_texts = self.get_lines([k[-1] for k in all_revision_keys])
 
2114
        return all_texts
 
2115
 
 
2116
    def _build_weave(self):
 
2117
        from bzrlib import weave
 
2118
        self._weave = weave.Weave(weave_name='in_memory_weave',
 
2119
                                  allow_reserved=True)
 
2120
        parent_map = self._find_recursive_lcas()
 
2121
 
 
2122
        all_texts = self._get_interesting_texts(parent_map)
 
2123
 
 
2124
        # Note: Unfortunately, the order given by topo_sort will effect the
 
2125
        # ordering resolution in the output. Specifically, if you add A then B,
 
2126
        # then in the output text A lines will show up before B lines. And, of
 
2127
        # course, topo_sort doesn't guarantee any real ordering.
 
2128
        # So we use merge_sort, and add a fake node on the tip.
 
2129
        # This ensures that left-hand parents will always be inserted into the
 
2130
        # weave before right-hand parents.
 
2131
        tip_key = self._key_prefix + (_mod_revision.CURRENT_REVISION,)
 
2132
        parent_map[tip_key] = (self.a_key, self.b_key)
 
2133
 
 
2134
        for seq_num, key, depth, eom in reversed(tsort.merge_sort(parent_map,
 
2135
                                                                  tip_key)):
 
2136
            if key == tip_key:
 
2137
                continue
 
2138
        # for key in tsort.topo_sort(parent_map):
 
2139
            parent_keys = parent_map[key]
 
2140
            revision_id = key[-1]
 
2141
            parent_ids = [k[-1] for k in parent_keys]
 
2142
            self._weave.add_lines(revision_id, parent_ids,
 
2143
                                  all_texts[revision_id])
 
2144
 
 
2145
    def plan_merge(self):
 
2146
        """Generate a 'plan' for merging the two revisions.
 
2147
 
 
2148
        This involves comparing their texts and determining the cause of
 
2149
        differences.  If text A has a line and text B does not, then either the
 
2150
        line was added to text A, or it was deleted from B.  Once the causes
 
2151
        are combined, they are written out in the format described in
 
2152
        VersionedFile.plan_merge
 
2153
        """
 
2154
        if self._head_key is not None: # There was a single head
 
2155
            if self._head_key == self.a_key:
 
2156
                plan = 'new-a'
 
2157
            else:
 
2158
                if self._head_key != self.b_key:
 
2159
                    raise AssertionError('There was an invalid head: %s != %s'
 
2160
                                         % (self.b_key, self._head_key))
 
2161
                plan = 'new-b'
 
2162
            head_rev = self._head_key[-1]
 
2163
            lines = self.get_lines([head_rev])[head_rev]
 
2164
            return ((plan, line) for line in lines)
 
2165
        return self._weave.plan_merge(self.a_rev, self.b_rev)
1419
2166
 
1420
2167
 
1421
2168
class _PlanLCAMerge(_PlanMergeBase):
1429
2176
    This is faster, and hopefully produces more useful output.
1430
2177
    """
1431
2178
 
1432
 
    def __init__(self, a_rev, b_rev, vf, graph):
1433
 
        _PlanMergeBase.__init__(self, a_rev, b_rev, vf)
1434
 
        self.lcas = graph.find_lca(a_rev, b_rev)
 
2179
    def __init__(self, a_rev, b_rev, vf, key_prefix, graph):
 
2180
        _PlanMergeBase.__init__(self, a_rev, b_rev, vf, key_prefix)
 
2181
        lcas = graph.find_lca(key_prefix + (a_rev,), key_prefix + (b_rev,))
 
2182
        self.lcas = set()
 
2183
        for lca in lcas:
 
2184
            if lca == _mod_revision.NULL_REVISION:
 
2185
                self.lcas.add(lca)
 
2186
            else:
 
2187
                self.lcas.add(lca[-1])
1435
2188
        for lca in self.lcas:
1436
 
            lca_lines = self.vf.get_lines(lca)
 
2189
            if _mod_revision.is_null(lca):
 
2190
                lca_lines = []
 
2191
            else:
 
2192
                lca_lines = self.get_lines([lca])[lca]
1437
2193
            matcher = patiencediff.PatienceSequenceMatcher(None, self.lines_a,
1438
2194
                                                           lca_lines)
1439
2195
            blocks = list(matcher.get_matching_blocks())