~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/merge.py

  • Committer: John Arbash Meinel
  • Date: 2005-11-18 21:01:53 UTC
  • mto: (1185.50.19 bzr-jam-integration)
  • mto: This revision was merged to the branch mainline in revision 1512.
  • Revision ID: john@arbash-meinel.com-20051118210153-88fd1a200bdd872c
Updating transport test, to handle NoSuchFile if a bogus url accidentally resolves.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005-2010 Canonical Ltd
2
 
#
 
1
# Copyright (C) 2005 Canonical Ltd
 
2
 
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
5
5
# the Free Software Foundation; either version 2 of the License, or
6
6
# (at your option) any later version.
7
 
#
 
7
 
8
8
# This program is distributed in the hope that it will be useful,
9
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
10
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11
11
# GNU General Public License for more details.
12
 
#
 
12
 
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
 
 
17
 
import warnings
18
 
 
19
 
from bzrlib.lazy_import import lazy_import
20
 
lazy_import(globals(), """
21
 
from bzrlib import (
22
 
    branch as _mod_branch,
23
 
    conflicts as _mod_conflicts,
24
 
    debug,
25
 
    generate_ids,
26
 
    graph as _mod_graph,
27
 
    merge3,
28
 
    osutils,
29
 
    patiencediff,
30
 
    revision as _mod_revision,
31
 
    textfile,
32
 
    trace,
33
 
    transform,
34
 
    tree as _mod_tree,
35
 
    tsort,
36
 
    ui,
37
 
    versionedfile,
38
 
    workingtree,
39
 
    )
40
 
from bzrlib.cleanup import OperationWithCleanups
41
 
""")
42
 
from bzrlib import (
43
 
    decorators,
44
 
    errors,
45
 
    hooks,
46
 
    )
47
 
from bzrlib.symbol_versioning import (
48
 
    deprecated_in,
49
 
    deprecated_method,
50
 
    )
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
 
 
18
import os
 
19
import tempfile
 
20
import shutil
 
21
import errno
 
22
 
 
23
import bzrlib.osutils
 
24
import bzrlib.revision
 
25
from bzrlib.merge_core import merge_flex, ApplyMerge3, BackupBeforeChange
 
26
from bzrlib.merge_core import WeaveMerge
 
27
from bzrlib.changeset import generate_changeset, ExceptionConflictHandler
 
28
from bzrlib.changeset import Inventory, Diff3Merge, ReplaceContents
 
29
from bzrlib.branch import Branch
 
30
from bzrlib.errors import (BzrCommandError,
 
31
                           UnrelatedBranches,
 
32
                           NoCommonAncestor,
 
33
                           NoCommits,
 
34
                           WorkingTreeNotRevision,
 
35
                           NotBranchError,
 
36
                           NotVersionedError,
 
37
                           BzrError)
 
38
from bzrlib.delta import compare_trees
 
39
from bzrlib.trace import mutter, warning, note
 
40
from bzrlib.fetch import greedy_fetch, fetch
 
41
from bzrlib.revision import is_ancestor, NULL_REVISION
 
42
from bzrlib.osutils import rename
 
43
from bzrlib.revision import common_ancestor, MultipleRevisionSources
 
44
from bzrlib.errors import NoSuchRevision
 
45
 
51
46
# TODO: Report back as changes are merged in
52
47
 
 
48
# TODO: build_working_dir can be built on something simpler than merge()
 
49
 
 
50
# FIXME: merge() parameters seem oriented towards the command line
 
51
# NOTABUG: merge is a helper for commandline functions.  merge_inner is the
 
52
#          the core functionality.
 
53
 
 
54
# comments from abentley on irc: merge happens in two stages, each
 
55
# of which generates a changeset object
 
56
 
 
57
# stage 1: generate OLD->OTHER,
 
58
# stage 2: use MINE and OLD->OTHER to generate MINE -> RESULT
 
59
 
 
60
class MergeConflictHandler(ExceptionConflictHandler):
 
61
    """Handle conflicts encountered while merging.
 
62
 
 
63
    This subclasses ExceptionConflictHandler, so that any types of
 
64
    conflict that are not explicitly handled cause an exception and
 
65
    terminate the merge.
 
66
    """
 
67
    def __init__(self, this_tree, base_tree, other_tree, ignore_zero=False):
 
68
        ExceptionConflictHandler.__init__(self)
 
69
        self.conflicts = 0
 
70
        self.ignore_zero = ignore_zero
 
71
        self.this_tree = this_tree
 
72
        self.base_tree = base_tree
 
73
        self.other_tree = other_tree
 
74
 
 
75
    def copy(self, source, dest):
 
76
        """Copy the text and mode of a file
 
77
        :param source: The path of the file to copy
 
78
        :param dest: The distination file to create
 
79
        """
 
80
        s_file = file(source, "rb")
 
81
        d_file = file(dest, "wb")
 
82
        for line in s_file:
 
83
            d_file.write(line)
 
84
        os.chmod(dest, 0777 & os.stat(source).st_mode)
 
85
 
 
86
    def dump(self, lines, dest):
 
87
        """Copy the text and mode of a file
 
88
        :param source: The path of the file to copy
 
89
        :param dest: The distination file to create
 
90
        """
 
91
        d_file = file(dest, "wb")
 
92
        for line in lines:
 
93
            d_file.write(line)
 
94
 
 
95
    def add_suffix(self, name, suffix, last_new_name=None, fix_inventory=True):
 
96
        """Rename a file to append a suffix.  If the new name exists, the
 
97
        suffix is added repeatedly until a non-existant name is found
 
98
 
 
99
        :param name: The path of the file
 
100
        :param suffix: The suffix to append
 
101
        :param last_new_name: (used for recursive calls) the last name tried
 
102
        """
 
103
        if last_new_name is None:
 
104
            last_new_name = name
 
105
        new_name = last_new_name+suffix
 
106
        try:
 
107
            rename(name, new_name)
 
108
            if fix_inventory is True:
 
109
                try:
 
110
                    relpath = self.this_tree.relpath(name)
 
111
                except NotBranchError:
 
112
                    relpath = None
 
113
                if relpath is not None:
 
114
                    file_id = self.this_tree.path2id(relpath)
 
115
                    if file_id is not None:
 
116
                        new_path = self.this_tree.relpath(new_name)
 
117
                        rename(new_name, name)
 
118
                        self.this_tree.branch.rename_one(relpath, new_path)
 
119
                        assert self.this_tree.id2path(file_id) == relpath
 
120
                        self.this_tree._inventory = self.this_tree.read_working_inventory()
 
121
                        assert self.this_tree.id2path(file_id) == new_path
 
122
        except OSError, e:
 
123
            if e.errno != errno.EEXIST and e.errno != errno.ENOTEMPTY:
 
124
                raise
 
125
            return self.add_suffix(name, suffix, last_new_name=new_name, 
 
126
                                   fix_inventory=fix_inventory)
 
127
        return new_name
 
128
 
 
129
    def conflict(self, text):
 
130
        warning(text)
 
131
        self.conflicts += 1
 
132
        
 
133
 
 
134
    def merge_conflict(self, new_file, this_path, base_lines, other_lines):
 
135
        """
 
136
        Handle diff3 conflicts by producing a .THIS, .BASE and .OTHER.  The
 
137
        main file will be a version with diff3 conflicts.
 
138
        :param new_file: Path to the output file with diff3 markers
 
139
        :param this_path: Path to the file text for the THIS tree
 
140
        :param base_path: Path to the file text for the BASE tree
 
141
        :param other_path: Path to the file text for the OTHER tree
 
142
        """
 
143
        self.add_suffix(this_path, ".THIS", fix_inventory=False)
 
144
        self.dump(base_lines, this_path+".BASE")
 
145
        self.dump(other_lines, this_path+".OTHER")
 
146
        rename(new_file, this_path)
 
147
        self.conflict("Diff3 conflict encountered in %s" % this_path)
 
148
 
 
149
    def weave_merge_conflict(self, filename, weave, other_i, out_file):
 
150
        """
 
151
        Handle weave conflicts by producing a .THIS, and .OTHER.  The
 
152
        main file will be a version with diff3-style conflicts.
 
153
        """
 
154
        self.add_suffix(filename, ".THIS", fix_inventory=False)
 
155
        out_file.commit()
 
156
        self.dump(weave.get_iter(other_i), filename+".OTHER")
 
157
        self.conflict("Text conflict encountered in %s" % filename)
 
158
 
 
159
    def new_contents_conflict(self, filename, other_contents):
 
160
        """Conflicting contents for newly added file."""
 
161
        other_contents(filename + ".OTHER", self, False)
 
162
        self.conflict("Conflict in newly added file %s" % filename)
 
163
    
 
164
 
 
165
    def target_exists(self, entry, target, old_path):
 
166
        """Handle the case when the target file or dir exists"""
 
167
        moved_path = self.add_suffix(target, ".moved")
 
168
        self.conflict("Moved existing %s to %s" % (target, moved_path))
 
169
 
 
170
    def rmdir_non_empty(self, filename):
 
171
        """Handle the case where the dir to be removed still has contents"""
 
172
        self.conflict("Directory %s not removed because it is not empty"\
 
173
            % filename)
 
174
        return "skip"
 
175
 
 
176
    def rem_contents_conflict(self, filename, this_contents, base_contents):
 
177
        base_contents(filename+".BASE", self, False)
 
178
        this_contents(filename+".THIS", self, False)
 
179
        return ReplaceContents(this_contents, None)
 
180
 
 
181
    def rem_contents_conflict(self, filename, this_contents, base_contents):
 
182
        base_contents(filename+".BASE", self, False)
 
183
        this_contents(filename+".THIS", self, False)
 
184
        self.conflict("Other branch deleted locally modified file %s" %
 
185
                      filename)
 
186
        return ReplaceContents(this_contents, None)
 
187
 
 
188
    def abs_this_path(self, file_id):
 
189
        """Return the absolute path for a file_id in the this tree."""
 
190
        return self.this_tree.id2abspath(file_id)
 
191
 
 
192
    def add_missing_parents(self, file_id, tree):
 
193
        """If some of the parents for file_id are missing, add them."""
 
194
        entry = tree.inventory[file_id]
 
195
        if entry.parent_id not in self.this_tree:
 
196
            return self.create_all_missing(entry.parent_id, tree)
 
197
        else:
 
198
            return self.abs_this_path(entry.parent_id)
 
199
 
 
200
    def create_all_missing(self, file_id, tree):
 
201
        """Add contents for a file_id and all its parents to a tree."""
 
202
        entry = tree.inventory[file_id]
 
203
        if entry.parent_id is not None and entry.parent_id not in self.this_tree:
 
204
            abspath = self.create_all_missing(entry.parent_id, tree)
 
205
        else:
 
206
            abspath = self.abs_this_path(entry.parent_id)
 
207
        entry_path = os.path.join(abspath, entry.name)
 
208
        if not os.path.isdir(entry_path):
 
209
            self.create(file_id, entry_path, tree)
 
210
        return entry_path
 
211
 
 
212
    def create(self, file_id, path, tree, reverse=False):
 
213
        """Uses tree data to create a filesystem object for the file_id"""
 
214
        from changeset import get_contents
 
215
        get_contents(tree, file_id)(path, self, reverse)
 
216
 
 
217
    def missing_for_merge(self, file_id, other_path):
 
218
        """The file_id doesn't exist in THIS, but does in OTHER and BASE"""
 
219
        self.conflict("Other branch modified locally deleted file %s" %
 
220
                      other_path)
 
221
        parent_dir = self.add_missing_parents(file_id, self.other_tree)
 
222
        stem = os.path.join(parent_dir, os.path.basename(other_path))
 
223
        self.create(file_id, stem+".OTHER", self.other_tree)
 
224
        self.create(file_id, stem+".BASE", self.base_tree)
 
225
 
 
226
    def threeway_contents_conflict(filename, this_contents, base_contents,
 
227
                                   other_contents):
 
228
        self.conflict("Three-way conflict merging %s" % filename)
 
229
 
 
230
    def finalize(self):
 
231
        if not self.ignore_zero:
 
232
            note("%d conflicts encountered.\n", self.conflicts)
 
233
            
 
234
def get_tree(treespec, local_branch=None):
 
235
    location, revno = treespec
 
236
    branch = Branch.open_containing(location)[0]
 
237
    if revno is None:
 
238
        revision = None
 
239
    elif revno == -1:
 
240
        revision = branch.last_revision()
 
241
    else:
 
242
        revision = branch.get_rev_id(revno)
 
243
        if revision is None:
 
244
            revision = NULL_REVISION
 
245
    return branch, get_revid_tree(branch, revision, local_branch)
 
246
 
 
247
def get_revid_tree(branch, revision, local_branch):
 
248
    if revision is None:
 
249
        base_tree = branch.working_tree()
 
250
    else:
 
251
        if local_branch is not None:
 
252
            greedy_fetch(local_branch, branch, revision)
 
253
            base_tree = local_branch.revision_tree(revision)
 
254
        else:
 
255
            base_tree = branch.revision_tree(revision)
 
256
    return base_tree
 
257
 
 
258
 
 
259
def file_exists(tree, file_id):
 
260
    return tree.has_filename(tree.id2path(file_id))
 
261
    
 
262
 
 
263
def build_working_dir(to_dir):
 
264
    """Build a working directory in an empty directory.
 
265
 
 
266
    to_dir is a directory containing branch metadata but no working files,
 
267
    typically constructed by cloning an existing branch. 
 
268
 
 
269
    This is split out as a special idiomatic case of merge.  It could
 
270
    eventually be done by just building the tree directly calling into 
 
271
    lower-level code (e.g. constructing a changeset).
 
272
    """
 
273
    # RBC 20051019 is this not just 'export' ?
 
274
    # AB Well, export doesn't take care of inventory...
 
275
    this_branch = Branch.open_containing(to_dir)[0]
 
276
    transform_tree(this_branch.working_tree(), this_branch.basis_tree())
 
277
 
53
278
 
54
279
def transform_tree(from_tree, to_tree, interesting_ids=None):
55
 
    from_tree.lock_tree_write()
56
 
    operation = OperationWithCleanups(merge_inner)
57
 
    operation.add_cleanup(from_tree.unlock)
58
 
    operation.run_simple(from_tree.branch, to_tree, from_tree,
59
 
        ignore_zero=True, interesting_ids=interesting_ids, this_tree=from_tree)
60
 
 
61
 
 
62
 
class MergeHooks(hooks.Hooks):
63
 
 
64
 
    def __init__(self):
65
 
        hooks.Hooks.__init__(self)
66
 
        self.create_hook(hooks.HookPoint('merge_file_content',
67
 
            "Called with a bzrlib.merge.Merger object to create a per file "
68
 
            "merge object when starting a merge. "
69
 
            "Should return either None or a subclass of "
70
 
            "``bzrlib.merge.AbstractPerFileMerger``. "
71
 
            "Such objects will then be called per file "
72
 
            "that needs to be merged (including when one "
73
 
            "side has deleted the file and the other has changed it). "
74
 
            "See the AbstractPerFileMerger API docs for details on how it is "
75
 
            "used by merge.",
76
 
            (2, 1), None))
77
 
 
78
 
 
79
 
class AbstractPerFileMerger(object):
80
 
    """PerFileMerger objects are used by plugins extending merge for bzrlib.
81
 
 
82
 
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
83
 
    
84
 
    :ivar merger: The Merge3Merger performing the merge.
85
 
    """
86
 
 
87
 
    def __init__(self, merger):
88
 
        """Create a PerFileMerger for use with merger."""
89
 
        self.merger = merger
90
 
 
91
 
    def merge_contents(self, merge_params):
92
 
        """Attempt to merge the contents of a single file.
93
 
        
94
 
        :param merge_params: A bzrlib.merge.MergeHookParams
95
 
        :return : A tuple of (status, chunks), where status is one of
96
 
            'not_applicable', 'success', 'conflicted', or 'delete'.  If status
97
 
            is 'success' or 'conflicted', then chunks should be an iterable of
98
 
            strings for the new file contents.
99
 
        """
100
 
        return ('not applicable', None)
101
 
 
102
 
 
103
 
class PerFileMerger(AbstractPerFileMerger):
104
 
    """Merge individual files when self.file_matches returns True.
105
 
 
106
 
    This class is intended to be subclassed.  The file_matches and
107
 
    merge_matching methods should be overridden with concrete implementations.
108
 
    """
109
 
 
110
 
    def file_matches(self, params):
111
 
        """Return True if merge_matching should be called on this file.
112
 
 
113
 
        Only called with merges of plain files with no clear winner.
114
 
 
115
 
        Subclasses must override this.
116
 
        """
117
 
        raise NotImplementedError(self.file_matches)
118
 
 
119
 
    def get_filename(self, params, tree):
120
 
        """Lookup the filename (i.e. basename, not path), given a Tree (e.g.
121
 
        self.merger.this_tree) and a MergeHookParams.
122
 
        """
123
 
        return osutils.basename(tree.id2path(params.file_id))
124
 
 
125
 
    def get_filepath(self, params, tree):
126
 
        """Calculate the path to the file in a tree.
127
 
 
128
 
        :param params: A MergeHookParams describing the file to merge
129
 
        :param tree: a Tree, e.g. self.merger.this_tree.
130
 
        """
131
 
        return tree.id2path(params.file_id)
132
 
 
133
 
    def merge_contents(self, params):
134
 
        """Merge the contents of a single file."""
135
 
        # Check whether this custom merge logic should be used.
136
 
        if (
137
 
            # OTHER is a straight winner, rely on default merge.
138
 
            params.winner == 'other' or
139
 
            # THIS and OTHER aren't both files.
140
 
            not params.is_file_merge() or
141
 
            # The filename doesn't match *.xml
142
 
            not self.file_matches(params)):
143
 
            return 'not_applicable', None
144
 
        return self.merge_matching(params)
145
 
 
146
 
    def merge_matching(self, params):
147
 
        """Merge the contents of a single file that has matched the criteria
148
 
        in PerFileMerger.merge_contents (is a conflict, is a file,
149
 
        self.file_matches is True).
150
 
 
151
 
        Subclasses must override this.
152
 
        """
153
 
        raise NotImplementedError(self.merge_matching)
154
 
 
155
 
 
156
 
class ConfigurableFileMerger(PerFileMerger):
157
 
    """Merge individual files when configured via a .conf file.
158
 
 
159
 
    This is a base class for concrete custom file merging logic. Concrete
160
 
    classes should implement ``merge_text``.
161
 
 
162
 
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
163
 
    
164
 
    :ivar affected_files: The configured file paths to merge.
165
 
 
166
 
    :cvar name_prefix: The prefix to use when looking up configuration
167
 
        details. <name_prefix>_merge_files describes the files targeted by the
168
 
        hook for example.
169
 
        
170
 
    :cvar default_files: The default file paths to merge when no configuration
171
 
        is present.
172
 
    """
173
 
 
174
 
    name_prefix = None
175
 
    default_files = None
176
 
 
177
 
    def __init__(self, merger):
178
 
        super(ConfigurableFileMerger, self).__init__(merger)
179
 
        self.affected_files = None
180
 
        self.default_files = self.__class__.default_files or []
181
 
        self.name_prefix = self.__class__.name_prefix
182
 
        if self.name_prefix is None:
183
 
            raise ValueError("name_prefix must be set.")
184
 
 
185
 
    def file_matches(self, params):
186
 
        """Check whether the file should call the merge hook.
187
 
 
188
 
        <name_prefix>_merge_files configuration variable is a list of files
189
 
        that should use the hook.
190
 
        """
191
 
        affected_files = self.affected_files
192
 
        if affected_files is None:
193
 
            config = self.merger.this_branch.get_config()
194
 
            # Until bzr provides a better policy for caching the config, we
195
 
            # just add the part we're interested in to the params to avoid
196
 
            # reading the config files repeatedly (bazaar.conf, location.conf,
197
 
            # branch.conf).
198
 
            config_key = self.name_prefix + '_merge_files'
199
 
            affected_files = config.get_user_option_as_list(config_key)
200
 
            if affected_files is None:
201
 
                # If nothing was specified in the config, use the default.
202
 
                affected_files = self.default_files
203
 
            self.affected_files = affected_files
204
 
        if affected_files:
205
 
            filepath = self.get_filepath(params, self.merger.this_tree)
206
 
            if filepath in affected_files:
207
 
                return True
208
 
        return False
209
 
 
210
 
    def merge_matching(self, params):
211
 
        return self.merge_text(params)
212
 
 
213
 
    def merge_text(self, params):
214
 
        """Merge the byte contents of a single file.
215
 
 
216
 
        This is called after checking that the merge should be performed in
217
 
        merge_contents, and it should behave as per
218
 
        ``bzrlib.merge.AbstractPerFileMerger.merge_contents``.
219
 
        """
220
 
        raise NotImplementedError(self.merge_text)
221
 
 
222
 
 
223
 
class MergeHookParams(object):
224
 
    """Object holding parameters passed to merge_file_content hooks.
225
 
 
226
 
    There are some fields hooks can access:
227
 
 
228
 
    :ivar file_id: the file ID of the file being merged
229
 
    :ivar trans_id: the transform ID for the merge of this file
230
 
    :ivar this_kind: kind of file_id in 'this' tree
231
 
    :ivar other_kind: kind of file_id in 'other' tree
232
 
    :ivar winner: one of 'this', 'other', 'conflict'
233
 
    """
234
 
 
235
 
    def __init__(self, merger, file_id, trans_id, this_kind, other_kind,
236
 
            winner):
237
 
        self._merger = merger
238
 
        self.file_id = file_id
239
 
        self.trans_id = trans_id
240
 
        self.this_kind = this_kind
241
 
        self.other_kind = other_kind
242
 
        self.winner = winner
243
 
 
244
 
    def is_file_merge(self):
245
 
        """True if this_kind and other_kind are both 'file'."""
246
 
        return self.this_kind == 'file' and self.other_kind == 'file'
247
 
 
248
 
    @decorators.cachedproperty
249
 
    def base_lines(self):
250
 
        """The lines of the 'base' version of the file."""
251
 
        return self._merger.get_lines(self._merger.base_tree, self.file_id)
252
 
 
253
 
    @decorators.cachedproperty
254
 
    def this_lines(self):
255
 
        """The lines of the 'this' version of the file."""
256
 
        return self._merger.get_lines(self._merger.this_tree, self.file_id)
257
 
 
258
 
    @decorators.cachedproperty
259
 
    def other_lines(self):
260
 
        """The lines of the 'other' version of the file."""
261
 
        return self._merger.get_lines(self._merger.other_tree, self.file_id)
 
280
    merge_inner(from_tree.branch, to_tree, from_tree, ignore_zero=True,
 
281
                interesting_ids=interesting_ids)
 
282
 
 
283
 
 
284
def merge(other_revision, base_revision,
 
285
          check_clean=True, ignore_zero=False,
 
286
          this_dir=None, backup_files=False, merge_type=ApplyMerge3,
 
287
          file_list=None, show_base=False, reprocess=False):
 
288
    """Merge changes into a tree.
 
289
 
 
290
    base_revision
 
291
        list(path, revno) Base for three-way merge.  
 
292
        If [None, None] then a base will be automatically determined.
 
293
    other_revision
 
294
        list(path, revno) Other revision for three-way merge.
 
295
    this_dir
 
296
        Directory to merge changes into; '.' by default.
 
297
    check_clean
 
298
        If true, this_dir must have no uncommitted changes before the
 
299
        merge begins.
 
300
    ignore_zero - If true, suppress the "zero conflicts" message when 
 
301
        there are no conflicts; should be set when doing something we expect
 
302
        to complete perfectly.
 
303
    file_list - If supplied, merge only changes to selected files.
 
304
 
 
305
    All available ancestors of other_revision and base_revision are
 
306
    automatically pulled into the branch.
 
307
 
 
308
    The revno may be -1 to indicate the last revision on the branch, which is
 
309
    the typical case.
 
310
 
 
311
    This function is intended for use from the command line; programmatic
 
312
    clients might prefer to call merge_inner(), which has less magic behavior.
 
313
    """
 
314
    if this_dir is None:
 
315
        this_dir = '.'
 
316
    this_branch = Branch.open_containing(this_dir)[0]
 
317
    if show_base and not merge_type is ApplyMerge3:
 
318
        raise BzrCommandError("Show-base is not supported for this merge"
 
319
                              " type. %s" % merge_type)
 
320
    if reprocess and not merge_type is ApplyMerge3:
 
321
        raise BzrCommandError("Reprocess is not supported for this merge"
 
322
                              " type. %s" % merge_type)
 
323
    if reprocess and show_base:
 
324
        raise BzrCommandError("Cannot reprocess and show base.")
 
325
    merger = Merger(this_branch)
 
326
    merger.check_basis(check_clean)
 
327
    merger.set_other(other_revision)
 
328
    merger.set_base(base_revision)
 
329
    if merger.base_rev_id == merger.other_rev_id:
 
330
        note('Nothing to do.')
 
331
        return 0
 
332
    merger.backup_files = backup_files
 
333
    merger.merge_type = merge_type 
 
334
    merger.set_interesting_files(file_list)
 
335
    merger.show_base = show_base 
 
336
    merger.reprocess = reprocess
 
337
    merger.conflict_handler = MergeConflictHandler(merger.this_tree, 
 
338
                                                   merger.base_tree, 
 
339
                                                   merger.other_tree,
 
340
                                                   ignore_zero=ignore_zero)
 
341
    conflicts = merger.do_merge()
 
342
    merger.set_pending()
 
343
    return conflicts
 
344
 
 
345
def merge_inner(this_branch, other_tree, base_tree, ignore_zero=False,
 
346
                backup_files=False, 
 
347
                merge_type=ApplyMerge3, 
 
348
                interesting_ids=None, 
 
349
                show_base=False, 
 
350
                reprocess=False, 
 
351
                other_rev_id=None,
 
352
                interesting_files=None):
 
353
    """Primary interface for merging. 
 
354
 
 
355
        typical use is probably 
 
356
        'merge_inner(branch, branch.get_revision_tree(other_revision),
 
357
                     branch.get_revision_tree(base_revision))'
 
358
        """
 
359
    merger = Merger(this_branch, other_tree, base_tree)
 
360
    merger.backup_files = backup_files
 
361
    merger.merge_type = merge_type
 
362
    merger.interesting_ids = interesting_ids
 
363
    if interesting_files:
 
364
        assert not interesting_ids, ('Only supply interesting_ids'
 
365
                                     ' or interesting_files')
 
366
        merger._set_interesting_files(interesting_files)
 
367
    merger.show_base = show_base 
 
368
    merger.reprocess = reprocess
 
369
    merger.conflict_handler = MergeConflictHandler(merger.this_tree, base_tree, 
 
370
                                                   other_tree,
 
371
                                                   ignore_zero=ignore_zero)
 
372
    merger.other_rev_id = other_rev_id
 
373
    merger.other_basis = other_rev_id
 
374
    return merger.do_merge()
262
375
 
263
376
 
264
377
class Merger(object):
265
 
 
266
 
    hooks = MergeHooks()
267
 
 
268
 
    def __init__(self, this_branch, other_tree=None, base_tree=None,
269
 
                 this_tree=None, pb=None, change_reporter=None,
270
 
                 recurse='down', revision_graph=None):
 
378
    def __init__(self, this_branch, other_tree=None, base_tree=None):
271
379
        object.__init__(self)
272
380
        self.this_branch = this_branch
273
 
        self.this_basis = _mod_revision.ensure_null(
274
 
            this_branch.last_revision())
 
381
        self.this_basis = this_branch.last_revision()
275
382
        self.this_rev_id = None
276
 
        self.this_tree = this_tree
 
383
        self.this_tree = this_branch.working_tree()
277
384
        self.this_revision_tree = None
278
385
        self.this_basis_tree = None
279
386
        self.other_tree = other_tree
280
 
        self.other_branch = None
281
387
        self.base_tree = base_tree
282
388
        self.ignore_zero = False
283
389
        self.backup_files = False
284
390
        self.interesting_ids = None
285
 
        self.interesting_files = None
286
391
        self.show_base = False
287
392
        self.reprocess = False
288
 
        if pb is not None:
289
 
            warnings.warn("pb parameter to Merger() is deprecated and ignored")
290
 
        self.pp = None
291
 
        self.recurse = recurse
292
 
        self.change_reporter = change_reporter
293
 
        self._cached_trees = {}
294
 
        self._revision_graph = revision_graph
295
 
        self._base_is_ancestor = None
296
 
        self._base_is_other_ancestor = None
297
 
        self._is_criss_cross = None
298
 
        self._lca_trees = None
299
 
 
300
 
    def cache_trees_with_revision_ids(self, trees):
301
 
        """Cache any tree in trees if it has a revision_id."""
302
 
        for maybe_tree in trees:
303
 
            if maybe_tree is None:
304
 
                continue
305
 
            try:
306
 
                rev_id = maybe_tree.get_revision_id()
307
 
            except AttributeError:
308
 
                continue
309
 
            self._cached_trees[rev_id] = maybe_tree
310
 
 
311
 
    @property
312
 
    def revision_graph(self):
313
 
        if self._revision_graph is None:
314
 
            self._revision_graph = self.this_branch.repository.get_graph()
315
 
        return self._revision_graph
316
 
 
317
 
    def _set_base_is_ancestor(self, value):
318
 
        self._base_is_ancestor = value
319
 
 
320
 
    def _get_base_is_ancestor(self):
321
 
        if self._base_is_ancestor is None:
322
 
            self._base_is_ancestor = self.revision_graph.is_ancestor(
323
 
                self.base_rev_id, self.this_basis)
324
 
        return self._base_is_ancestor
325
 
 
326
 
    base_is_ancestor = property(_get_base_is_ancestor, _set_base_is_ancestor)
327
 
 
328
 
    def _set_base_is_other_ancestor(self, value):
329
 
        self._base_is_other_ancestor = value
330
 
 
331
 
    def _get_base_is_other_ancestor(self):
332
 
        if self._base_is_other_ancestor is None:
333
 
            if self.other_basis is None:
334
 
                return True
335
 
            self._base_is_other_ancestor = self.revision_graph.is_ancestor(
336
 
                self.base_rev_id, self.other_basis)
337
 
        return self._base_is_other_ancestor
338
 
 
339
 
    base_is_other_ancestor = property(_get_base_is_other_ancestor,
340
 
                                      _set_base_is_other_ancestor)
341
 
 
342
 
    @staticmethod
343
 
    def from_uncommitted(tree, other_tree, pb=None, base_tree=None):
344
 
        """Return a Merger for uncommitted changes in other_tree.
345
 
 
346
 
        :param tree: The tree to merge into
347
 
        :param other_tree: The tree to get uncommitted changes from
348
 
        :param pb: A progress indicator
349
 
        :param base_tree: The basis to use for the merge.  If unspecified,
350
 
            other_tree.basis_tree() will be used.
351
 
        """
352
 
        if base_tree is None:
353
 
            base_tree = other_tree.basis_tree()
354
 
        merger = Merger(tree.branch, other_tree, base_tree, tree, pb)
355
 
        merger.base_rev_id = merger.base_tree.get_revision_id()
356
 
        merger.other_rev_id = None
357
 
        merger.other_basis = merger.base_rev_id
358
 
        return merger
359
 
 
360
 
    @classmethod
361
 
    def from_mergeable(klass, tree, mergeable, pb):
362
 
        """Return a Merger for a bundle or merge directive.
363
 
 
364
 
        :param tree: The tree to merge changes into
365
 
        :param mergeable: A merge directive or bundle
366
 
        :param pb: A progress indicator
367
 
        """
368
 
        mergeable.install_revisions(tree.branch.repository)
369
 
        base_revision_id, other_revision_id, verified =\
370
 
            mergeable.get_merge_request(tree.branch.repository)
371
 
        revision_graph = tree.branch.repository.get_graph()
372
 
        if base_revision_id is not None:
373
 
            if (base_revision_id != _mod_revision.NULL_REVISION and
374
 
                revision_graph.is_ancestor(
375
 
                base_revision_id, tree.branch.last_revision())):
376
 
                base_revision_id = None
377
 
            else:
378
 
                trace.warning('Performing cherrypick')
379
 
        merger = klass.from_revision_ids(pb, tree, other_revision_id,
380
 
                                         base_revision_id, revision_graph=
381
 
                                         revision_graph)
382
 
        return merger, verified
383
 
 
384
 
    @staticmethod
385
 
    def from_revision_ids(pb, tree, other, base=None, other_branch=None,
386
 
                          base_branch=None, revision_graph=None,
387
 
                          tree_branch=None):
388
 
        """Return a Merger for revision-ids.
389
 
 
390
 
        :param pb: A progress indicator
391
 
        :param tree: The tree to merge changes into
392
 
        :param other: The revision-id to use as OTHER
393
 
        :param base: The revision-id to use as BASE.  If not specified, will
394
 
            be auto-selected.
395
 
        :param other_branch: A branch containing the other revision-id.  If
396
 
            not supplied, tree.branch is used.
397
 
        :param base_branch: A branch containing the base revision-id.  If
398
 
            not supplied, other_branch or tree.branch will be used.
399
 
        :param revision_graph: If you have a revision_graph precomputed, pass
400
 
            it in, otherwise it will be created for you.
401
 
        :param tree_branch: The branch associated with tree.  If not supplied,
402
 
            tree.branch will be used.
403
 
        """
404
 
        if tree_branch is None:
405
 
            tree_branch = tree.branch
406
 
        merger = Merger(tree_branch, this_tree=tree, pb=pb,
407
 
                        revision_graph=revision_graph)
408
 
        if other_branch is None:
409
 
            other_branch = tree.branch
410
 
        merger.set_other_revision(other, other_branch)
411
 
        if base is None:
412
 
            merger.find_base()
413
 
        else:
414
 
            if base_branch is None:
415
 
                base_branch = other_branch
416
 
            merger.set_base_revision(base, base_branch)
417
 
        return merger
418
 
 
419
 
    def revision_tree(self, revision_id, branch=None):
420
 
        if revision_id not in self._cached_trees:
421
 
            if branch is None:
422
 
                branch = self.this_branch
423
 
            try:
424
 
                tree = self.this_tree.revision_tree(revision_id)
425
 
            except errors.NoSuchRevisionInTree:
426
 
                tree = branch.repository.revision_tree(revision_id)
427
 
            self._cached_trees[revision_id] = tree
428
 
        return self._cached_trees[revision_id]
429
 
 
430
 
    def _get_tree(self, treespec, possible_transports=None):
431
 
        location, revno = treespec
432
 
        if revno is None:
433
 
            tree = workingtree.WorkingTree.open_containing(location)[0]
434
 
            return tree.branch, tree
435
 
        branch = _mod_branch.Branch.open_containing(
436
 
            location, possible_transports)[0]
437
 
        if revno == -1:
438
 
            revision_id = branch.last_revision()
439
 
        else:
440
 
            revision_id = branch.get_rev_id(revno)
441
 
        revision_id = _mod_revision.ensure_null(revision_id)
442
 
        return branch, self.revision_tree(revision_id, branch)
443
 
 
444
 
    @deprecated_method(deprecated_in((2, 1, 0)))
 
393
        self.conflict_handler = MergeConflictHandler(self.this_tree, base_tree, 
 
394
                                                     other_tree)
 
395
 
 
396
    def revision_tree(self, revision_id):
 
397
        return self.this_branch.revision_tree(revision_id)
 
398
 
445
399
    def ensure_revision_trees(self):
446
400
        if self.this_revision_tree is None:
447
 
            self.this_basis_tree = self.revision_tree(self.this_basis)
 
401
            self.this_basis_tree = self.this_branch.revision_tree(
 
402
                self.this_basis)
448
403
            if self.this_basis == self.this_rev_id:
449
404
                self.this_revision_tree = self.this_basis_tree
450
405
 
 
406
 
451
407
        if self.other_rev_id is None:
452
408
            other_basis_tree = self.revision_tree(self.other_basis)
453
 
            if other_basis_tree.has_changes(self.other_tree):
454
 
                raise errors.WorkingTreeNotRevision(self.this_tree)
455
 
            other_rev_id = self.other_basis
 
409
            changes = compare_trees(self.other_tree, other_basis_tree)
 
410
            if changes.has_changed():
 
411
                raise WorkingTreeNotRevision(self.this_tree)
 
412
            other_rev_id = other_basis
456
413
            self.other_tree = other_basis_tree
457
414
 
458
 
    @deprecated_method(deprecated_in((2, 1, 0)))
 
415
 
459
416
    def file_revisions(self, file_id):
460
417
        self.ensure_revision_trees()
461
418
        def get_id(tree, file_id):
462
419
            revision_id = tree.inventory[file_id].revision
 
420
            assert revision_id is not None
463
421
            return revision_id
464
422
        if self.this_rev_id is None:
465
423
            if self.this_basis_tree.get_file_sha1(file_id) != \
466
424
                self.this_tree.get_file_sha1(file_id):
467
 
                raise errors.WorkingTreeNotRevision(self.this_tree)
 
425
                raise WorkingTreeNotRevision(self.this_tree)
468
426
 
469
427
        trees = (self.this_basis_tree, self.other_tree)
470
428
        return [get_id(tree, file_id) for tree in trees]
471
 
 
472
 
    @deprecated_method(deprecated_in((2, 1, 0)))
473
 
    def check_basis(self, check_clean, require_commits=True):
474
 
        if self.this_basis is None and require_commits is True:
475
 
            raise errors.BzrCommandError(
476
 
                "This branch has no commits."
477
 
                " (perhaps you would prefer 'bzr pull')")
 
429
            
 
430
 
 
431
    def merge_factory(self, file_id, base, other):
 
432
        if self.merge_type.history_based:
 
433
            if self.show_base is True:
 
434
                raise BzrError("Cannot show base for hisory-based merges")
 
435
            if self.reprocess is True:
 
436
                raise BzrError("Cannot reprocess history-based merges")
 
437
                
 
438
            t_revid, o_revid = self.file_revisions(file_id)
 
439
            weave = self.this_basis_tree.get_weave(file_id)
 
440
            contents_change = self.merge_type(weave, t_revid, o_revid)
 
441
        else:
 
442
            if self.show_base is True or self.reprocess is True:
 
443
                contents_change = self.merge_type(file_id, base, other, 
 
444
                                                  show_base=self.show_base, 
 
445
                                                  reprocess=self.reprocess)
 
446
            else:
 
447
                contents_change = self.merge_type(file_id, base, other)
 
448
        if self.backup_files:
 
449
            contents_change = BackupBeforeChange(contents_change)
 
450
        return contents_change
 
451
 
 
452
    def check_basis(self, check_clean):
 
453
        if self.this_basis is None:
 
454
            raise BzrCommandError("This branch has no commits")
478
455
        if check_clean:
479
456
            self.compare_basis()
480
457
            if self.this_basis != self.this_rev_id:
481
 
                raise errors.UncommittedChanges(self.this_tree)
 
458
                raise BzrCommandError("Working tree has uncommitted changes.")
482
459
 
483
 
    @deprecated_method(deprecated_in((2, 1, 0)))
484
460
    def compare_basis(self):
485
 
        try:
486
 
            basis_tree = self.revision_tree(self.this_tree.last_revision())
487
 
        except errors.NoSuchRevision:
488
 
            basis_tree = self.this_tree.basis_tree()
489
 
        if not self.this_tree.has_changes(basis_tree):
 
461
        changes = compare_trees(self.this_branch.working_tree(), 
 
462
                                self.this_branch.basis_tree(), False)
 
463
        if not changes.has_changed():
490
464
            self.this_rev_id = self.this_basis
491
465
 
492
466
    def set_interesting_files(self, file_list):
493
 
        self.interesting_files = file_list
 
467
        try:
 
468
            self._set_interesting_files(file_list)
 
469
        except NotVersionedError, e:
 
470
            raise BzrCommandError("%s is not a source file in any"
 
471
                                      " tree." % e.path)
 
472
 
 
473
    def _set_interesting_files(self, file_list):
 
474
        """Set the list of interesting ids from a list of files."""
 
475
        if file_list is None:
 
476
            self.interesting_ids = None
 
477
            return
 
478
 
 
479
        interesting_ids = set()
 
480
        for fname in file_list:
 
481
            path = self.this_tree.relpath(fname)
 
482
            found_id = False
 
483
            for tree in (self.this_tree, self.base_tree, self.other_tree):
 
484
                file_id = tree.inventory.path2id(path)
 
485
                if file_id is not None:
 
486
                    interesting_ids.add(file_id)
 
487
                    found_id = True
 
488
            if not found_id:
 
489
                raise NotVersionedError(path=fname)
 
490
        self.interesting_ids = interesting_ids
494
491
 
495
492
    def set_pending(self):
496
 
        if (not self.base_is_ancestor or not self.base_is_other_ancestor
497
 
            or self.other_rev_id is None):
498
 
            return
499
 
        self._add_parent()
500
 
 
501
 
    def _add_parent(self):
502
 
        new_parents = self.this_tree.get_parent_ids() + [self.other_rev_id]
503
 
        new_parent_trees = []
504
 
        operation = OperationWithCleanups(self.this_tree.set_parent_trees)
505
 
        for revision_id in new_parents:
506
 
            try:
507
 
                tree = self.revision_tree(revision_id)
508
 
            except errors.NoSuchRevision:
509
 
                tree = None
510
 
            else:
511
 
                tree.lock_read()
512
 
                operation.add_cleanup(tree.unlock)
513
 
            new_parent_trees.append((revision_id, tree))
514
 
        operation.run_simple(new_parent_trees, allow_leftmost_as_ghost=True)
515
 
 
516
 
    def set_other(self, other_revision, possible_transports=None):
517
 
        """Set the revision and tree to merge from.
518
 
 
519
 
        This sets the other_tree, other_rev_id, other_basis attributes.
520
 
 
521
 
        :param other_revision: The [path, revision] list to merge from.
522
 
        """
523
 
        self.other_branch, self.other_tree = self._get_tree(other_revision,
524
 
                                                            possible_transports)
 
493
        if not self.base_is_ancestor:
 
494
            return
 
495
        if self.other_rev_id is None:
 
496
            return
 
497
        if self.other_rev_id in self.this_branch.get_ancestry(self.this_basis):
 
498
            return
 
499
        self.this_branch.working_tree().add_pending_merge(self.other_rev_id)
 
500
 
 
501
    def set_other(self, other_revision):
 
502
        other_branch, self.other_tree = get_tree(other_revision, 
 
503
                                                 self.this_branch)
525
504
        if other_revision[1] == -1:
526
 
            self.other_rev_id = _mod_revision.ensure_null(
527
 
                self.other_branch.last_revision())
528
 
            if _mod_revision.is_null(self.other_rev_id):
529
 
                raise errors.NoCommits(self.other_branch)
 
505
            self.other_rev_id = other_branch.last_revision()
 
506
            if self.other_rev_id is None:
 
507
                raise NoCommits(other_branch)
530
508
            self.other_basis = self.other_rev_id
531
509
        elif other_revision[1] is not None:
532
 
            self.other_rev_id = self.other_branch.get_rev_id(other_revision[1])
 
510
            self.other_rev_id = other_branch.get_rev_id(other_revision[1])
533
511
            self.other_basis = self.other_rev_id
534
512
        else:
535
513
            self.other_rev_id = None
536
 
            self.other_basis = self.other_branch.last_revision()
 
514
            self.other_basis = other_branch.last_revision()
537
515
            if self.other_basis is None:
538
 
                raise errors.NoCommits(self.other_branch)
539
 
        if self.other_rev_id is not None:
540
 
            self._cached_trees[self.other_rev_id] = self.other_tree
541
 
        self._maybe_fetch(self.other_branch,self.this_branch, self.other_basis)
542
 
 
543
 
    def set_other_revision(self, revision_id, other_branch):
544
 
        """Set 'other' based on a branch and revision id
545
 
 
546
 
        :param revision_id: The revision to use for a tree
547
 
        :param other_branch: The branch containing this tree
548
 
        """
549
 
        self.other_rev_id = revision_id
550
 
        self.other_branch = other_branch
551
 
        self._maybe_fetch(other_branch, self.this_branch, self.other_rev_id)
552
 
        self.other_tree = self.revision_tree(revision_id)
553
 
        self.other_basis = revision_id
554
 
 
555
 
    def set_base_revision(self, revision_id, branch):
556
 
        """Set 'base' based on a branch and revision id
557
 
 
558
 
        :param revision_id: The revision to use for a tree
559
 
        :param branch: The branch containing this tree
560
 
        """
561
 
        self.base_rev_id = revision_id
562
 
        self.base_branch = branch
563
 
        self._maybe_fetch(branch, self.this_branch, revision_id)
564
 
        self.base_tree = self.revision_tree(revision_id)
565
 
 
566
 
    def _maybe_fetch(self, source, target, revision_id):
567
 
        if not source.repository.has_same_location(target.repository):
568
 
            target.fetch(source, revision_id)
569
 
 
570
 
    def find_base(self):
571
 
        revisions = [_mod_revision.ensure_null(self.this_basis),
572
 
                     _mod_revision.ensure_null(self.other_basis)]
573
 
        if _mod_revision.NULL_REVISION in revisions:
574
 
            self.base_rev_id = _mod_revision.NULL_REVISION
575
 
            self.base_tree = self.revision_tree(self.base_rev_id)
576
 
            self._is_criss_cross = False
577
 
        else:
578
 
            lcas = self.revision_graph.find_lca(revisions[0], revisions[1])
579
 
            self._is_criss_cross = False
580
 
            if len(lcas) == 0:
581
 
                self.base_rev_id = _mod_revision.NULL_REVISION
582
 
            elif len(lcas) == 1:
583
 
                self.base_rev_id = list(lcas)[0]
584
 
            else: # len(lcas) > 1
585
 
                if len(lcas) > 2:
586
 
                    # find_unique_lca can only handle 2 nodes, so we have to
587
 
                    # start back at the beginning. It is a shame to traverse
588
 
                    # the graph again, but better than re-implementing
589
 
                    # find_unique_lca.
590
 
                    self.base_rev_id = self.revision_graph.find_unique_lca(
591
 
                                            revisions[0], revisions[1])
592
 
                else:
593
 
                    self.base_rev_id = self.revision_graph.find_unique_lca(
594
 
                                            *lcas)
595
 
                self._is_criss_cross = True
596
 
            if self.base_rev_id == _mod_revision.NULL_REVISION:
597
 
                raise errors.UnrelatedBranches()
598
 
            if self._is_criss_cross:
599
 
                trace.warning('Warning: criss-cross merge encountered.  See bzr'
600
 
                              ' help criss-cross.')
601
 
                trace.mutter('Criss-cross lcas: %r' % lcas)
602
 
                interesting_revision_ids = [self.base_rev_id]
603
 
                interesting_revision_ids.extend(lcas)
604
 
                interesting_trees = dict((t.get_revision_id(), t)
605
 
                    for t in self.this_branch.repository.revision_trees(
606
 
                        interesting_revision_ids))
607
 
                self._cached_trees.update(interesting_trees)
608
 
                self.base_tree = interesting_trees.pop(self.base_rev_id)
609
 
                sorted_lca_keys = self.revision_graph.find_merge_order(
610
 
                    revisions[0], lcas)
611
 
                self._lca_trees = [interesting_trees[key]
612
 
                                   for key in sorted_lca_keys]
613
 
            else:
614
 
                self.base_tree = self.revision_tree(self.base_rev_id)
615
 
        self.base_is_ancestor = True
616
 
        self.base_is_other_ancestor = True
617
 
        trace.mutter('Base revid: %r' % self.base_rev_id)
 
516
                raise NoCommits(other_branch)
 
517
        fetch(from_branch=other_branch, to_branch=self.this_branch, 
 
518
              last_revision=self.other_basis)
618
519
 
619
520
    def set_base(self, base_revision):
620
 
        """Set the base revision to use for the merge.
621
 
 
622
 
        :param base_revision: A 2-list containing a path and revision number.
623
 
        """
624
 
        trace.mutter("doing merge() with no base_revision specified")
 
521
        mutter("doing merge() with no base_revision specified")
625
522
        if base_revision == [None, None]:
626
 
            self.find_base()
 
523
            try:
 
524
                self.base_rev_id = common_ancestor(self.this_basis, 
 
525
                                                   self.other_basis, 
 
526
                                                   self.this_branch)
 
527
            except NoCommonAncestor:
 
528
                raise UnrelatedBranches()
 
529
            self.base_tree = get_revid_tree(self.this_branch, self.base_rev_id,
 
530
                                            None)
 
531
            self.base_is_ancestor = True
627
532
        else:
628
 
            base_branch, self.base_tree = self._get_tree(base_revision)
 
533
            base_branch, self.base_tree = get_tree(base_revision)
629
534
            if base_revision[1] == -1:
630
535
                self.base_rev_id = base_branch.last_revision()
631
536
            elif base_revision[1] is None:
632
 
                self.base_rev_id = _mod_revision.NULL_REVISION
633
 
            else:
634
 
                self.base_rev_id = _mod_revision.ensure_null(
635
 
                    base_branch.get_rev_id(base_revision[1]))
636
 
            self._maybe_fetch(base_branch, self.this_branch, self.base_rev_id)
637
 
 
638
 
    def make_merger(self):
639
 
        kwargs = {'working_tree':self.this_tree, 'this_tree': self.this_tree,
640
 
                  'other_tree': self.other_tree,
641
 
                  'interesting_ids': self.interesting_ids,
642
 
                  'interesting_files': self.interesting_files,
643
 
                  'this_branch': self.this_branch,
644
 
                  'do_merge': False}
645
 
        if self.merge_type.requires_base:
646
 
            kwargs['base_tree'] = self.base_tree
647
 
        if self.merge_type.supports_reprocess:
648
 
            kwargs['reprocess'] = self.reprocess
649
 
        elif self.reprocess:
650
 
            raise errors.BzrError(
651
 
                "Conflict reduction is not supported for merge"
652
 
                " type %s." % self.merge_type)
653
 
        if self.merge_type.supports_show_base:
654
 
            kwargs['show_base'] = self.show_base
655
 
        elif self.show_base:
656
 
            raise errors.BzrError("Showing base is not supported for this"
657
 
                                  " merge type. %s" % self.merge_type)
658
 
        if (not getattr(self.merge_type, 'supports_reverse_cherrypick', True)
659
 
            and not self.base_is_other_ancestor):
660
 
            raise errors.CannotReverseCherrypick()
661
 
        if self.merge_type.supports_cherrypick:
662
 
            kwargs['cherrypick'] = (not self.base_is_ancestor or
663
 
                                    not self.base_is_other_ancestor)
664
 
        if self._is_criss_cross and getattr(self.merge_type,
665
 
                                            'supports_lca_trees', False):
666
 
            kwargs['lca_trees'] = self._lca_trees
667
 
        return self.merge_type(pb=None,
668
 
                               change_reporter=self.change_reporter,
669
 
                               **kwargs)
670
 
 
671
 
    def _do_merge_to(self):
672
 
        merge = self.make_merger()
673
 
        if self.other_branch is not None:
674
 
            self.other_branch.update_references(self.this_branch)
675
 
        merge.do_merge()
676
 
        if self.recurse == 'down':
677
 
            for relpath, file_id in self.this_tree.iter_references():
678
 
                sub_tree = self.this_tree.get_nested_tree(file_id, relpath)
679
 
                other_revision = self.other_tree.get_reference_revision(
680
 
                    file_id, relpath)
681
 
                if  other_revision == sub_tree.last_revision():
682
 
                    continue
683
 
                sub_merge = Merger(sub_tree.branch, this_tree=sub_tree)
684
 
                sub_merge.merge_type = self.merge_type
685
 
                other_branch = self.other_branch.reference_parent(file_id, relpath)
686
 
                sub_merge.set_other_revision(other_revision, other_branch)
687
 
                base_revision = self.base_tree.get_reference_revision(file_id)
688
 
                sub_merge.base_tree = \
689
 
                    sub_tree.branch.repository.revision_tree(base_revision)
690
 
                sub_merge.base_rev_id = base_revision
691
 
                sub_merge.do_merge()
692
 
        return merge
693
 
 
694
 
    def do_merge(self):
695
 
        operation = OperationWithCleanups(self._do_merge_to)
696
 
        self.this_tree.lock_tree_write()
697
 
        operation.add_cleanup(self.this_tree.unlock)
698
 
        if self.base_tree is not None:
699
 
            self.base_tree.lock_read()
700
 
            operation.add_cleanup(self.base_tree.unlock)
701
 
        if self.other_tree is not None:
702
 
            self.other_tree.lock_read()
703
 
            operation.add_cleanup(self.other_tree.unlock)
704
 
        merge = operation.run_simple()
705
 
        if len(merge.cooked_conflicts) == 0:
706
 
            if not self.ignore_zero and not trace.is_quiet():
707
 
                trace.note("All changes applied successfully.")
708
 
        else:
709
 
            trace.note("%d conflicts encountered."
710
 
                       % len(merge.cooked_conflicts))
711
 
 
712
 
        return len(merge.cooked_conflicts)
713
 
 
714
 
 
715
 
class _InventoryNoneEntry(object):
716
 
    """This represents an inventory entry which *isn't there*.
717
 
 
718
 
    It simplifies the merging logic if we always have an InventoryEntry, even
719
 
    if it isn't actually present
720
 
    """
721
 
    executable = None
722
 
    kind = None
723
 
    name = None
724
 
    parent_id = None
725
 
    revision = None
726
 
    symlink_target = None
727
 
    text_sha1 = None
728
 
 
729
 
_none_entry = _InventoryNoneEntry()
730
 
 
731
 
 
732
 
class Merge3Merger(object):
733
 
    """Three-way merger that uses the merge3 text merger"""
734
 
    requires_base = True
735
 
    supports_reprocess = True
736
 
    supports_show_base = True
737
 
    history_based = False
738
 
    supports_cherrypick = True
739
 
    supports_reverse_cherrypick = True
740
 
    winner_idx = {"this": 2, "other": 1, "conflict": 1}
741
 
    supports_lca_trees = True
742
 
 
743
 
    def __init__(self, working_tree, this_tree, base_tree, other_tree,
744
 
                 interesting_ids=None, reprocess=False, show_base=False,
745
 
                 pb=None, pp=None, change_reporter=None,
746
 
                 interesting_files=None, do_merge=True,
747
 
                 cherrypick=False, lca_trees=None, this_branch=None):
748
 
        """Initialize the merger object and perform the merge.
749
 
 
750
 
        :param working_tree: The working tree to apply the merge to
751
 
        :param this_tree: The local tree in the merge operation
752
 
        :param base_tree: The common tree in the merge operation
753
 
        :param other_tree: The other tree to merge changes from
754
 
        :param this_branch: The branch associated with this_tree.  Defaults to
755
 
            this_tree.branch if not supplied.
756
 
        :param interesting_ids: The file_ids of files that should be
757
 
            participate in the merge.  May not be combined with
758
 
            interesting_files.
759
 
        :param: reprocess If True, perform conflict-reduction processing.
760
 
        :param show_base: If True, show the base revision in text conflicts.
761
 
            (incompatible with reprocess)
762
 
        :param pb: ignored
763
 
        :param pp: A ProgressPhase object
764
 
        :param change_reporter: An object that should report changes made
765
 
        :param interesting_files: The tree-relative paths of files that should
766
 
            participate in the merge.  If these paths refer to directories,
767
 
            the contents of those directories will also be included.  May not
768
 
            be combined with interesting_ids.  If neither interesting_files nor
769
 
            interesting_ids is specified, all files may participate in the
770
 
            merge.
771
 
        :param lca_trees: Can be set to a dictionary of {revision_id:rev_tree}
772
 
            if the ancestry was found to include a criss-cross merge.
773
 
            Otherwise should be None.
774
 
        """
775
 
        object.__init__(self)
776
 
        if interesting_files is not None and interesting_ids is not None:
777
 
            raise ValueError(
778
 
                'specify either interesting_ids or interesting_files')
779
 
        if this_branch is None:
780
 
            this_branch = this_tree.branch
781
 
        self.interesting_ids = interesting_ids
782
 
        self.interesting_files = interesting_files
783
 
        self.this_tree = working_tree
784
 
        self.base_tree = base_tree
785
 
        self.other_tree = other_tree
786
 
        self.this_branch = this_branch
787
 
        self._raw_conflicts = []
788
 
        self.cooked_conflicts = []
789
 
        self.reprocess = reprocess
790
 
        self.show_base = show_base
791
 
        self._lca_trees = lca_trees
792
 
        # Uncommenting this will change the default algorithm to always use
793
 
        # _entries_lca. This can be useful for running the test suite and
794
 
        # making sure we haven't missed any corner cases.
795
 
        # if lca_trees is None:
796
 
        #     self._lca_trees = [self.base_tree]
797
 
        self.change_reporter = change_reporter
798
 
        self.cherrypick = cherrypick
799
 
        if do_merge:
800
 
            self.do_merge()
801
 
        if pp is not None:
802
 
            warnings.warn("pp argument to Merge3Merger is deprecated")
803
 
        if pb is not None:
804
 
            warnings.warn("pb argument to Merge3Merger is deprecated")
805
 
 
806
 
    def do_merge(self):
807
 
        operation = OperationWithCleanups(self._do_merge)
808
 
        self.this_tree.lock_tree_write()
809
 
        operation.add_cleanup(self.this_tree.unlock)
810
 
        self.base_tree.lock_read()
811
 
        operation.add_cleanup(self.base_tree.unlock)
812
 
        self.other_tree.lock_read()
813
 
        operation.add_cleanup(self.other_tree.unlock)
814
 
        operation.run()
815
 
 
816
 
    def _do_merge(self, operation):
817
 
        self.tt = transform.TreeTransform(self.this_tree, None)
818
 
        operation.add_cleanup(self.tt.finalize)
819
 
        self._compute_transform()
820
 
        results = self.tt.apply(no_conflicts=True)
821
 
        self.write_modified(results)
822
 
        try:
823
 
            self.this_tree.add_conflicts(self.cooked_conflicts)
824
 
        except errors.UnsupportedOperation:
825
 
            pass
826
 
 
827
 
    def make_preview_transform(self):
828
 
        operation = OperationWithCleanups(self._make_preview_transform)
829
 
        self.base_tree.lock_read()
830
 
        operation.add_cleanup(self.base_tree.unlock)
831
 
        self.other_tree.lock_read()
832
 
        operation.add_cleanup(self.other_tree.unlock)
833
 
        return operation.run_simple()
834
 
 
835
 
    def _make_preview_transform(self):
836
 
        self.tt = transform.TransformPreview(self.this_tree)
837
 
        self._compute_transform()
838
 
        return self.tt
839
 
 
840
 
    def _compute_transform(self):
841
 
        if self._lca_trees is None:
842
 
            entries = self._entries3()
843
 
            resolver = self._three_way
844
 
        else:
845
 
            entries = self._entries_lca()
846
 
            resolver = self._lca_multi_way
847
 
        child_pb = ui.ui_factory.nested_progress_bar()
848
 
        try:
849
 
            factories = Merger.hooks['merge_file_content']
850
 
            hooks = [factory(self) for factory in factories] + [self]
851
 
            self.active_hooks = [hook for hook in hooks if hook is not None]
852
 
            for num, (file_id, changed, parents3, names3,
853
 
                      executable3) in enumerate(entries):
854
 
                child_pb.update('Preparing file merge', num, len(entries))
855
 
                self._merge_names(file_id, parents3, names3, resolver=resolver)
856
 
                if changed:
857
 
                    file_status = self._do_merge_contents(file_id)
858
 
                else:
859
 
                    file_status = 'unmodified'
860
 
                self._merge_executable(file_id,
861
 
                    executable3, file_status, resolver=resolver)
862
 
        finally:
863
 
            child_pb.finished()
864
 
        self.fix_root()
865
 
        self._finish_computing_transform()
866
 
 
867
 
    def _finish_computing_transform(self):
868
 
        """Finalize the transform and report the changes.
869
 
 
870
 
        This is the second half of _compute_transform.
871
 
        """
872
 
        child_pb = ui.ui_factory.nested_progress_bar()
873
 
        try:
874
 
            fs_conflicts = transform.resolve_conflicts(self.tt, child_pb,
875
 
                lambda t, c: transform.conflict_pass(t, c, self.other_tree))
876
 
        finally:
877
 
            child_pb.finished()
878
 
        if self.change_reporter is not None:
879
 
            from bzrlib import delta
880
 
            delta.report_changes(
881
 
                self.tt.iter_changes(), self.change_reporter)
882
 
        self.cook_conflicts(fs_conflicts)
883
 
        for conflict in self.cooked_conflicts:
884
 
            trace.warning(conflict)
885
 
 
886
 
    def _entries3(self):
887
 
        """Gather data about files modified between three trees.
888
 
 
889
 
        Return a list of tuples of file_id, changed, parents3, names3,
890
 
        executable3.  changed is a boolean indicating whether the file contents
891
 
        or kind were changed.  parents3 is a tuple of parent ids for base,
892
 
        other and this.  names3 is a tuple of names for base, other and this.
893
 
        executable3 is a tuple of execute-bit values for base, other and this.
894
 
        """
895
 
        result = []
896
 
        iterator = self.other_tree.iter_changes(self.base_tree,
897
 
                include_unchanged=True, specific_files=self.interesting_files,
898
 
                extra_trees=[self.this_tree])
899
 
        this_entries = dict((e.file_id, e) for p, e in
900
 
                            self.this_tree.iter_entries_by_dir(
901
 
                            self.interesting_ids))
902
 
        for (file_id, paths, changed, versioned, parents, names, kind,
903
 
             executable) in iterator:
904
 
            if (self.interesting_ids is not None and
905
 
                file_id not in self.interesting_ids):
906
 
                continue
907
 
            entry = this_entries.get(file_id)
908
 
            if entry is not None:
909
 
                this_name = entry.name
910
 
                this_parent = entry.parent_id
911
 
                this_executable = entry.executable
912
 
            else:
913
 
                this_name = None
914
 
                this_parent = None
915
 
                this_executable = None
916
 
            parents3 = parents + (this_parent,)
917
 
            names3 = names + (this_name,)
918
 
            executable3 = executable + (this_executable,)
919
 
            result.append((file_id, changed, parents3, names3, executable3))
920
 
        return result
921
 
 
922
 
    def _entries_lca(self):
923
 
        """Gather data about files modified between multiple trees.
924
 
 
925
 
        This compares OTHER versus all LCA trees, and for interesting entries,
926
 
        it then compares with THIS and BASE.
927
 
 
928
 
        For the multi-valued entries, the format will be (BASE, [lca1, lca2])
929
 
        :return: [(file_id, changed, parents, names, executable)]
930
 
            file_id     Simple file_id of the entry
931
 
            changed     Boolean, True if the kind or contents changed
932
 
                        else False
933
 
            parents     ((base, [parent_id, in, lcas]), parent_id_other,
934
 
                         parent_id_this)
935
 
            names       ((base, [name, in, lcas]), name_in_other, name_in_this)
936
 
            executable  ((base, [exec, in, lcas]), exec_in_other, exec_in_this)
937
 
        """
938
 
        if self.interesting_files is not None:
939
 
            lookup_trees = [self.this_tree, self.base_tree]
940
 
            lookup_trees.extend(self._lca_trees)
941
 
            # I think we should include the lca trees as well
942
 
            interesting_ids = self.other_tree.paths2ids(self.interesting_files,
943
 
                                                        lookup_trees)
944
 
        else:
945
 
            interesting_ids = self.interesting_ids
946
 
        result = []
947
 
        walker = _mod_tree.MultiWalker(self.other_tree, self._lca_trees)
948
 
 
949
 
        base_inventory = self.base_tree.inventory
950
 
        this_inventory = self.this_tree.inventory
951
 
        for path, file_id, other_ie, lca_values in walker.iter_all():
952
 
            # Is this modified at all from any of the other trees?
953
 
            if other_ie is None:
954
 
                other_ie = _none_entry
955
 
            if interesting_ids is not None and file_id not in interesting_ids:
956
 
                continue
957
 
 
958
 
            # If other_revision is found in any of the lcas, that means this
959
 
            # node is uninteresting. This is because when merging, if there are
960
 
            # multiple heads(), we have to create a new node. So if we didn't,
961
 
            # we know that the ancestry is linear, and that OTHER did not
962
 
            # modify anything
963
 
            # See doc/developers/lca_merge_resolution.txt for details
964
 
            other_revision = other_ie.revision
965
 
            if other_revision is not None:
966
 
                # We can't use this shortcut when other_revision is None,
967
 
                # because it may be None because things are WorkingTrees, and
968
 
                # not because it is *actually* None.
969
 
                is_unmodified = False
970
 
                for lca_path, ie in lca_values:
971
 
                    if ie is not None and ie.revision == other_revision:
972
 
                        is_unmodified = True
973
 
                        break
974
 
                if is_unmodified:
975
 
                    continue
976
 
 
977
 
            lca_entries = []
978
 
            for lca_path, lca_ie in lca_values:
979
 
                if lca_ie is None:
980
 
                    lca_entries.append(_none_entry)
981
 
                else:
982
 
                    lca_entries.append(lca_ie)
983
 
 
984
 
            if file_id in base_inventory:
985
 
                base_ie = base_inventory[file_id]
986
 
            else:
987
 
                base_ie = _none_entry
988
 
 
989
 
            if file_id in this_inventory:
990
 
                this_ie = this_inventory[file_id]
991
 
            else:
992
 
                this_ie = _none_entry
993
 
 
994
 
            lca_kinds = []
995
 
            lca_parent_ids = []
996
 
            lca_names = []
997
 
            lca_executable = []
998
 
            for lca_ie in lca_entries:
999
 
                lca_kinds.append(lca_ie.kind)
1000
 
                lca_parent_ids.append(lca_ie.parent_id)
1001
 
                lca_names.append(lca_ie.name)
1002
 
                lca_executable.append(lca_ie.executable)
1003
 
 
1004
 
            kind_winner = self._lca_multi_way(
1005
 
                (base_ie.kind, lca_kinds),
1006
 
                other_ie.kind, this_ie.kind)
1007
 
            parent_id_winner = self._lca_multi_way(
1008
 
                (base_ie.parent_id, lca_parent_ids),
1009
 
                other_ie.parent_id, this_ie.parent_id)
1010
 
            name_winner = self._lca_multi_way(
1011
 
                (base_ie.name, lca_names),
1012
 
                other_ie.name, this_ie.name)
1013
 
 
1014
 
            content_changed = True
1015
 
            if kind_winner == 'this':
1016
 
                # No kind change in OTHER, see if there are *any* changes
1017
 
                if other_ie.kind == 'directory':
1018
 
                    if parent_id_winner == 'this' and name_winner == 'this':
1019
 
                        # No change for this directory in OTHER, skip
1020
 
                        continue
1021
 
                    content_changed = False
1022
 
                elif other_ie.kind is None or other_ie.kind == 'file':
1023
 
                    def get_sha1(ie, tree):
1024
 
                        if ie.kind != 'file':
1025
 
                            return None
1026
 
                        return tree.get_file_sha1(file_id)
1027
 
                    base_sha1 = get_sha1(base_ie, self.base_tree)
1028
 
                    lca_sha1s = [get_sha1(ie, tree) for ie, tree
1029
 
                                 in zip(lca_entries, self._lca_trees)]
1030
 
                    this_sha1 = get_sha1(this_ie, self.this_tree)
1031
 
                    other_sha1 = get_sha1(other_ie, self.other_tree)
1032
 
                    sha1_winner = self._lca_multi_way(
1033
 
                        (base_sha1, lca_sha1s), other_sha1, this_sha1,
1034
 
                        allow_overriding_lca=False)
1035
 
                    exec_winner = self._lca_multi_way(
1036
 
                        (base_ie.executable, lca_executable),
1037
 
                        other_ie.executable, this_ie.executable)
1038
 
                    if (parent_id_winner == 'this' and name_winner == 'this'
1039
 
                        and sha1_winner == 'this' and exec_winner == 'this'):
1040
 
                        # No kind, parent, name, exec, or content change for
1041
 
                        # OTHER, so this node is not considered interesting
1042
 
                        continue
1043
 
                    if sha1_winner == 'this':
1044
 
                        content_changed = False
1045
 
                elif other_ie.kind == 'symlink':
1046
 
                    def get_target(ie, tree):
1047
 
                        if ie.kind != 'symlink':
1048
 
                            return None
1049
 
                        return tree.get_symlink_target(file_id)
1050
 
                    base_target = get_target(base_ie, self.base_tree)
1051
 
                    lca_targets = [get_target(ie, tree) for ie, tree
1052
 
                                   in zip(lca_entries, self._lca_trees)]
1053
 
                    this_target = get_target(this_ie, self.this_tree)
1054
 
                    other_target = get_target(other_ie, self.other_tree)
1055
 
                    target_winner = self._lca_multi_way(
1056
 
                        (base_target, lca_targets),
1057
 
                        other_target, this_target)
1058
 
                    if (parent_id_winner == 'this' and name_winner == 'this'
1059
 
                        and target_winner == 'this'):
1060
 
                        # No kind, parent, name, or symlink target change
1061
 
                        # not interesting
1062
 
                        continue
1063
 
                    if target_winner == 'this':
1064
 
                        content_changed = False
1065
 
                elif other_ie.kind == 'tree-reference':
1066
 
                    # The 'changed' information seems to be handled at a higher
1067
 
                    # level. At least, _entries3 returns False for content
1068
 
                    # changed, even when at a new revision_id.
1069
 
                    content_changed = False
1070
 
                    if (parent_id_winner == 'this' and name_winner == 'this'):
1071
 
                        # Nothing interesting
1072
 
                        continue
1073
 
                else:
1074
 
                    raise AssertionError('unhandled kind: %s' % other_ie.kind)
1075
 
 
1076
 
            # If we have gotten this far, that means something has changed
1077
 
            result.append((file_id, content_changed,
1078
 
                           ((base_ie.parent_id, lca_parent_ids),
1079
 
                            other_ie.parent_id, this_ie.parent_id),
1080
 
                           ((base_ie.name, lca_names),
1081
 
                            other_ie.name, this_ie.name),
1082
 
                           ((base_ie.executable, lca_executable),
1083
 
                            other_ie.executable, this_ie.executable)
1084
 
                          ))
1085
 
        return result
1086
 
 
1087
 
    def fix_root(self):
1088
 
        try:
1089
 
            self.tt.final_kind(self.tt.root)
1090
 
        except errors.NoSuchFile:
1091
 
            self.tt.cancel_deletion(self.tt.root)
1092
 
        if self.tt.final_file_id(self.tt.root) is None:
1093
 
            self.tt.version_file(self.tt.tree_file_id(self.tt.root),
1094
 
                                 self.tt.root)
1095
 
        other_root_file_id = self.other_tree.get_root_id()
1096
 
        if other_root_file_id is None:
1097
 
            return
1098
 
        other_root = self.tt.trans_id_file_id(other_root_file_id)
1099
 
        if other_root == self.tt.root:
1100
 
            return
1101
 
        if self.other_tree.inventory.root.file_id in self.this_tree.inventory:
1102
 
            # the other tree's root is a non-root in the current tree (as when
1103
 
            # a previously unrelated branch is merged into another)
1104
 
            return
1105
 
        try:
1106
 
            self.tt.final_kind(other_root)
1107
 
            other_root_is_present = True
1108
 
        except errors.NoSuchFile:
1109
 
            # other_root doesn't have a physical representation. We still need
1110
 
            # to move any references to the actual root of the tree.
1111
 
            other_root_is_present = False
1112
 
        # 'other_tree.inventory.root' is not present in this tree. We are
1113
 
        # calling adjust_path for children which *want* to be present with a
1114
 
        # correct place to go.
1115
 
        for thing, child in self.other_tree.inventory.root.children.iteritems():
1116
 
            trans_id = self.tt.trans_id_file_id(child.file_id)
1117
 
            if not other_root_is_present:
1118
 
                # FIXME: Make final_kind returns None instead of raising
1119
 
                # NoSuchFile to avoid the ugly construct below -- vila 20100402
1120
 
                try:
1121
 
                    self.tt.final_kind(trans_id)
1122
 
                    # The item exist in the final tree and has a defined place
1123
 
                    # to go already.
1124
 
                    continue
1125
 
                except errors.NoSuchFile, e:
1126
 
                    pass
1127
 
            # Move the item into the root
1128
 
            self.tt.adjust_path(self.tt.final_name(trans_id),
1129
 
                                self.tt.root, trans_id)
1130
 
        if other_root_is_present:
1131
 
            self.tt.cancel_creation(other_root)
1132
 
            self.tt.cancel_versioning(other_root)
1133
 
 
1134
 
    def write_modified(self, results):
1135
 
        modified_hashes = {}
1136
 
        for path in results.modified_paths:
1137
 
            file_id = self.this_tree.path2id(self.this_tree.relpath(path))
1138
 
            if file_id is None:
1139
 
                continue
1140
 
            hash = self.this_tree.get_file_sha1(file_id)
1141
 
            if hash is None:
1142
 
                continue
1143
 
            modified_hashes[file_id] = hash
1144
 
        self.this_tree.set_merge_modified(modified_hashes)
1145
 
 
1146
 
    @staticmethod
1147
 
    def parent(entry, file_id):
1148
 
        """Determine the parent for a file_id (used as a key method)"""
1149
 
        if entry is None:
1150
 
            return None
1151
 
        return entry.parent_id
1152
 
 
1153
 
    @staticmethod
1154
 
    def name(entry, file_id):
1155
 
        """Determine the name for a file_id (used as a key method)"""
1156
 
        if entry is None:
1157
 
            return None
1158
 
        return entry.name
1159
 
 
1160
 
    @staticmethod
1161
 
    def contents_sha1(tree, file_id):
1162
 
        """Determine the sha1 of the file contents (used as a key method)."""
1163
 
        if file_id not in tree:
1164
 
            return None
1165
 
        return tree.get_file_sha1(file_id)
1166
 
 
1167
 
    @staticmethod
1168
 
    def executable(tree, file_id):
1169
 
        """Determine the executability of a file-id (used as a key method)."""
1170
 
        if not tree.has_id(file_id):
1171
 
            return None
1172
 
        if tree.kind(file_id) != "file":
1173
 
            return False
1174
 
        return tree.is_executable(file_id)
1175
 
 
1176
 
    @staticmethod
1177
 
    def kind(tree, file_id):
1178
 
        """Determine the kind of a file-id (used as a key method)."""
1179
 
        if not tree.has_id(file_id):
1180
 
            return None
1181
 
        return tree.kind(file_id)
1182
 
 
1183
 
    @staticmethod
1184
 
    def _three_way(base, other, this):
1185
 
        if base == other:
1186
 
            # if 'base == other', either they all agree, or only 'this' has
1187
 
            # changed.
1188
 
            return 'this'
1189
 
        elif this not in (base, other):
1190
 
            # 'this' is neither 'base' nor 'other', so both sides changed
1191
 
            return 'conflict'
1192
 
        elif this == other:
1193
 
            # "Ambiguous clean merge" -- both sides have made the same change.
1194
 
            return "this"
1195
 
        else:
1196
 
            # this == base: only other has changed.
1197
 
            return "other"
1198
 
 
1199
 
    @staticmethod
1200
 
    def _lca_multi_way(bases, other, this, allow_overriding_lca=True):
1201
 
        """Consider LCAs when determining whether a change has occurred.
1202
 
 
1203
 
        If LCAS are all identical, this is the same as a _three_way comparison.
1204
 
 
1205
 
        :param bases: value in (BASE, [LCAS])
1206
 
        :param other: value in OTHER
1207
 
        :param this: value in THIS
1208
 
        :param allow_overriding_lca: If there is more than one unique lca
1209
 
            value, allow OTHER to override THIS if it has a new value, and
1210
 
            THIS only has an lca value, or vice versa. This is appropriate for
1211
 
            truly scalar values, not as much for non-scalars.
1212
 
        :return: 'this', 'other', or 'conflict' depending on whether an entry
1213
 
            changed or not.
1214
 
        """
1215
 
        # See doc/developers/lca_tree_merging.txt for details about this
1216
 
        # algorithm.
1217
 
        if other == this:
1218
 
            # Either Ambiguously clean, or nothing was actually changed. We
1219
 
            # don't really care
1220
 
            return 'this'
1221
 
        base_val, lca_vals = bases
1222
 
        # Remove 'base_val' from the lca_vals, because it is not interesting
1223
 
        filtered_lca_vals = [lca_val for lca_val in lca_vals
1224
 
                                      if lca_val != base_val]
1225
 
        if len(filtered_lca_vals) == 0:
1226
 
            return Merge3Merger._three_way(base_val, other, this)
1227
 
 
1228
 
        unique_lca_vals = set(filtered_lca_vals)
1229
 
        if len(unique_lca_vals) == 1:
1230
 
            return Merge3Merger._three_way(unique_lca_vals.pop(), other, this)
1231
 
 
1232
 
        if allow_overriding_lca:
1233
 
            if other in unique_lca_vals:
1234
 
                if this in unique_lca_vals:
1235
 
                    # Each side picked a different lca, conflict
1236
 
                    return 'conflict'
1237
 
                else:
1238
 
                    # This has a value which supersedes both lca values, and
1239
 
                    # other only has an lca value
1240
 
                    return 'this'
1241
 
            elif this in unique_lca_vals:
1242
 
                # OTHER has a value which supersedes both lca values, and this
1243
 
                # only has an lca value
1244
 
                return 'other'
1245
 
 
1246
 
        # At this point, the lcas disagree, and the tip disagree
1247
 
        return 'conflict'
1248
 
 
1249
 
    @staticmethod
1250
 
    @deprecated_method(deprecated_in((2, 2, 0)))
1251
 
    def scalar_three_way(this_tree, base_tree, other_tree, file_id, key):
1252
 
        """Do a three-way test on a scalar.
1253
 
        Return "this", "other" or "conflict", depending whether a value wins.
1254
 
        """
1255
 
        key_base = key(base_tree, file_id)
1256
 
        key_other = key(other_tree, file_id)
1257
 
        #if base == other, either they all agree, or only THIS has changed.
1258
 
        if key_base == key_other:
1259
 
            return "this"
1260
 
        key_this = key(this_tree, file_id)
1261
 
        # "Ambiguous clean merge"
1262
 
        if key_this == key_other:
1263
 
            return "this"
1264
 
        elif key_this == key_base:
1265
 
            return "other"
1266
 
        else:
1267
 
            return "conflict"
1268
 
 
1269
 
    def merge_names(self, file_id):
1270
 
        def get_entry(tree):
1271
 
            if tree.has_id(file_id):
1272
 
                return tree.inventory[file_id]
1273
 
            else:
1274
 
                return None
1275
 
        this_entry = get_entry(self.this_tree)
1276
 
        other_entry = get_entry(self.other_tree)
1277
 
        base_entry = get_entry(self.base_tree)
1278
 
        entries = (base_entry, other_entry, this_entry)
1279
 
        names = []
1280
 
        parents = []
1281
 
        for entry in entries:
1282
 
            if entry is None:
1283
 
                names.append(None)
1284
 
                parents.append(None)
1285
 
            else:
1286
 
                names.append(entry.name)
1287
 
                parents.append(entry.parent_id)
1288
 
        return self._merge_names(file_id, parents, names,
1289
 
                                 resolver=self._three_way)
1290
 
 
1291
 
    def _merge_names(self, file_id, parents, names, resolver):
1292
 
        """Perform a merge on file_id names and parents"""
1293
 
        base_name, other_name, this_name = names
1294
 
        base_parent, other_parent, this_parent = parents
1295
 
 
1296
 
        name_winner = resolver(*names)
1297
 
 
1298
 
        parent_id_winner = resolver(*parents)
1299
 
        if this_name is None:
1300
 
            if name_winner == "this":
1301
 
                name_winner = "other"
1302
 
            if parent_id_winner == "this":
1303
 
                parent_id_winner = "other"
1304
 
        if name_winner == "this" and parent_id_winner == "this":
1305
 
            return
1306
 
        if name_winner == 'conflict' or parent_id_winner == 'conflict':
1307
 
            # Creating helpers (.OTHER or .THIS) here cause problems down the
1308
 
            # road if a ContentConflict needs to be created so we should not do
1309
 
            # that
1310
 
            trans_id = self.tt.trans_id_file_id(file_id)
1311
 
            self._raw_conflicts.append(('path conflict', trans_id, file_id,
1312
 
                                        this_parent, this_name,
1313
 
                                        other_parent, other_name))
1314
 
        if other_name is None:
1315
 
            # it doesn't matter whether the result was 'other' or
1316
 
            # 'conflict'-- if there's no 'other', we leave it alone.
1317
 
            return
1318
 
        parent_id = parents[self.winner_idx[parent_id_winner]]
1319
 
        if parent_id is not None:
1320
 
            # if we get here, name_winner and parent_winner are set to safe
1321
 
            # values.
1322
 
            self.tt.adjust_path(names[self.winner_idx[name_winner]],
1323
 
                                self.tt.trans_id_file_id(parent_id),
1324
 
                                self.tt.trans_id_file_id(file_id))
1325
 
 
1326
 
    def _do_merge_contents(self, file_id):
1327
 
        """Performs a merge on file_id contents."""
1328
 
        def contents_pair(tree):
1329
 
            if file_id not in tree:
1330
 
                return (None, None)
1331
 
            kind = tree.kind(file_id)
1332
 
            if kind == "file":
1333
 
                contents = tree.get_file_sha1(file_id)
1334
 
            elif kind == "symlink":
1335
 
                contents = tree.get_symlink_target(file_id)
1336
 
            else:
1337
 
                contents = None
1338
 
            return kind, contents
1339
 
 
1340
 
        # See SPOT run.  run, SPOT, run.
1341
 
        # So we're not QUITE repeating ourselves; we do tricky things with
1342
 
        # file kind...
1343
 
        base_pair = contents_pair(self.base_tree)
1344
 
        other_pair = contents_pair(self.other_tree)
1345
 
        if self._lca_trees:
1346
 
            this_pair = contents_pair(self.this_tree)
1347
 
            lca_pairs = [contents_pair(tree) for tree in self._lca_trees]
1348
 
            winner = self._lca_multi_way((base_pair, lca_pairs), other_pair,
1349
 
                                         this_pair, allow_overriding_lca=False)
1350
 
        else:
1351
 
            if base_pair == other_pair:
1352
 
                winner = 'this'
1353
 
            else:
1354
 
                # We delayed evaluating this_pair as long as we can to avoid
1355
 
                # unnecessary sha1 calculation
1356
 
                this_pair = contents_pair(self.this_tree)
1357
 
                winner = self._three_way(base_pair, other_pair, this_pair)
1358
 
        if winner == 'this':
1359
 
            # No interesting changes introduced by OTHER
1360
 
            return "unmodified"
1361
 
        # We have a hypothetical conflict, but if we have files, then we
1362
 
        # can try to merge the content
1363
 
        trans_id = self.tt.trans_id_file_id(file_id)
1364
 
        params = MergeHookParams(self, file_id, trans_id, this_pair[0],
1365
 
            other_pair[0], winner)
1366
 
        hooks = self.active_hooks
1367
 
        hook_status = 'not_applicable'
1368
 
        for hook in hooks:
1369
 
            hook_status, lines = hook.merge_contents(params)
1370
 
            if hook_status != 'not_applicable':
1371
 
                # Don't try any more hooks, this one applies.
1372
 
                break
1373
 
        result = "modified"
1374
 
        if hook_status == 'not_applicable':
1375
 
            # This is a contents conflict, because none of the available
1376
 
            # functions could merge it.
1377
 
            result = None
1378
 
            name = self.tt.final_name(trans_id)
1379
 
            parent_id = self.tt.final_parent(trans_id)
1380
 
            if self.this_tree.has_id(file_id):
1381
 
                self.tt.unversion_file(trans_id)
1382
 
            file_group = self._dump_conflicts(name, parent_id, file_id,
1383
 
                                              set_version=True)
1384
 
            self._raw_conflicts.append(('contents conflict', file_group))
1385
 
        elif hook_status == 'success':
1386
 
            self.tt.create_file(lines, trans_id)
1387
 
        elif hook_status == 'conflicted':
1388
 
            # XXX: perhaps the hook should be able to provide
1389
 
            # the BASE/THIS/OTHER files?
1390
 
            self.tt.create_file(lines, trans_id)
1391
 
            self._raw_conflicts.append(('text conflict', trans_id))
1392
 
            name = self.tt.final_name(trans_id)
1393
 
            parent_id = self.tt.final_parent(trans_id)
1394
 
            self._dump_conflicts(name, parent_id, file_id)
1395
 
        elif hook_status == 'delete':
1396
 
            self.tt.unversion_file(trans_id)
1397
 
            result = "deleted"
1398
 
        elif hook_status == 'done':
1399
 
            # The hook function did whatever it needs to do directly, no
1400
 
            # further action needed here.
1401
 
            pass
1402
 
        else:
1403
 
            raise AssertionError('unknown hook_status: %r' % (hook_status,))
1404
 
        if not self.this_tree.has_id(file_id) and result == "modified":
1405
 
            self.tt.version_file(file_id, trans_id)
1406
 
        # The merge has been performed, so the old contents should not be
1407
 
        # retained.
1408
 
        try:
1409
 
            self.tt.delete_contents(trans_id)
1410
 
        except errors.NoSuchFile:
1411
 
            pass
1412
 
        return result
1413
 
 
1414
 
    def _default_other_winner_merge(self, merge_hook_params):
1415
 
        """Replace this contents with other."""
1416
 
        file_id = merge_hook_params.file_id
1417
 
        trans_id = merge_hook_params.trans_id
1418
 
        file_in_this = self.this_tree.has_id(file_id)
1419
 
        if self.other_tree.has_id(file_id):
1420
 
            # OTHER changed the file
1421
 
            wt = self.this_tree
1422
 
            if wt.supports_content_filtering():
1423
 
                # We get the path from the working tree if it exists.
1424
 
                # That fails though when OTHER is adding a file, so
1425
 
                # we fall back to the other tree to find the path if
1426
 
                # it doesn't exist locally.
1427
 
                try:
1428
 
                    filter_tree_path = wt.id2path(file_id)
1429
 
                except errors.NoSuchId:
1430
 
                    filter_tree_path = self.other_tree.id2path(file_id)
1431
 
            else:
1432
 
                # Skip the id2path lookup for older formats
1433
 
                filter_tree_path = None
1434
 
            transform.create_from_tree(self.tt, trans_id,
1435
 
                             self.other_tree, file_id,
1436
 
                             filter_tree_path=filter_tree_path)
1437
 
            return 'done', None
1438
 
        elif file_in_this:
1439
 
            # OTHER deleted the file
1440
 
            return 'delete', None
1441
 
        else:
1442
 
            raise AssertionError(
1443
 
                'winner is OTHER, but file_id %r not in THIS or OTHER tree'
1444
 
                % (file_id,))
1445
 
 
1446
 
    def merge_contents(self, merge_hook_params):
1447
 
        """Fallback merge logic after user installed hooks."""
1448
 
        # This function is used in merge hooks as the fallback instance.
1449
 
        # Perhaps making this function and the functions it calls be a 
1450
 
        # a separate class would be better.
1451
 
        if merge_hook_params.winner == 'other':
1452
 
            # OTHER is a straight winner, so replace this contents with other
1453
 
            return self._default_other_winner_merge(merge_hook_params)
1454
 
        elif merge_hook_params.is_file_merge():
1455
 
            # THIS and OTHER are both files, so text merge.  Either
1456
 
            # BASE is a file, or both converted to files, so at least we
1457
 
            # have agreement that output should be a file.
1458
 
            try:
1459
 
                self.text_merge(merge_hook_params.file_id,
1460
 
                    merge_hook_params.trans_id)
1461
 
            except errors.BinaryFile:
1462
 
                return 'not_applicable', None
1463
 
            return 'done', None
1464
 
        else:
1465
 
            return 'not_applicable', None
1466
 
 
1467
 
    def get_lines(self, tree, file_id):
1468
 
        """Return the lines in a file, or an empty list."""
1469
 
        if tree.has_id(file_id):
1470
 
            return tree.get_file_lines(file_id)
1471
 
        else:
1472
 
            return []
1473
 
 
1474
 
    def text_merge(self, file_id, trans_id):
1475
 
        """Perform a three-way text merge on a file_id"""
1476
 
        # it's possible that we got here with base as a different type.
1477
 
        # if so, we just want two-way text conflicts.
1478
 
        if self.base_tree.has_id(file_id) and \
1479
 
            self.base_tree.kind(file_id) == "file":
1480
 
            base_lines = self.get_lines(self.base_tree, file_id)
1481
 
        else:
1482
 
            base_lines = []
1483
 
        other_lines = self.get_lines(self.other_tree, file_id)
1484
 
        this_lines = self.get_lines(self.this_tree, file_id)
1485
 
        m3 = merge3.Merge3(base_lines, this_lines, other_lines,
1486
 
                           is_cherrypick=self.cherrypick)
1487
 
        start_marker = "!START OF MERGE CONFLICT!" + "I HOPE THIS IS UNIQUE"
1488
 
        if self.show_base is True:
1489
 
            base_marker = '|' * 7
1490
 
        else:
1491
 
            base_marker = None
1492
 
 
1493
 
        def iter_merge3(retval):
1494
 
            retval["text_conflicts"] = False
1495
 
            for line in m3.merge_lines(name_a = "TREE",
1496
 
                                       name_b = "MERGE-SOURCE",
1497
 
                                       name_base = "BASE-REVISION",
1498
 
                                       start_marker=start_marker,
1499
 
                                       base_marker=base_marker,
1500
 
                                       reprocess=self.reprocess):
1501
 
                if line.startswith(start_marker):
1502
 
                    retval["text_conflicts"] = True
1503
 
                    yield line.replace(start_marker, '<' * 7)
1504
 
                else:
1505
 
                    yield line
1506
 
        retval = {}
1507
 
        merge3_iterator = iter_merge3(retval)
1508
 
        self.tt.create_file(merge3_iterator, trans_id)
1509
 
        if retval["text_conflicts"] is True:
1510
 
            self._raw_conflicts.append(('text conflict', trans_id))
1511
 
            name = self.tt.final_name(trans_id)
1512
 
            parent_id = self.tt.final_parent(trans_id)
1513
 
            file_group = self._dump_conflicts(name, parent_id, file_id,
1514
 
                                              this_lines, base_lines,
1515
 
                                              other_lines)
1516
 
            file_group.append(trans_id)
1517
 
 
1518
 
    def _dump_conflicts(self, name, parent_id, file_id, this_lines=None,
1519
 
                        base_lines=None, other_lines=None, set_version=False,
1520
 
                        no_base=False):
1521
 
        """Emit conflict files.
1522
 
        If this_lines, base_lines, or other_lines are omitted, they will be
1523
 
        determined automatically.  If set_version is true, the .OTHER, .THIS
1524
 
        or .BASE (in that order) will be created as versioned files.
1525
 
        """
1526
 
        data = [('OTHER', self.other_tree, other_lines),
1527
 
                ('THIS', self.this_tree, this_lines)]
1528
 
        if not no_base:
1529
 
            data.append(('BASE', self.base_tree, base_lines))
1530
 
 
1531
 
        # We need to use the actual path in the working tree of the file here,
1532
 
        # ignoring the conflict suffixes
1533
 
        wt = self.this_tree
1534
 
        if wt.supports_content_filtering():
1535
 
            try:
1536
 
                filter_tree_path = wt.id2path(file_id)
1537
 
            except errors.NoSuchId:
1538
 
                # file has been deleted
1539
 
                filter_tree_path = None
1540
 
        else:
1541
 
            # Skip the id2path lookup for older formats
1542
 
            filter_tree_path = None
1543
 
 
1544
 
        versioned = False
1545
 
        file_group = []
1546
 
        for suffix, tree, lines in data:
1547
 
            if tree.has_id(file_id):
1548
 
                trans_id = self._conflict_file(name, parent_id, tree, file_id,
1549
 
                                               suffix, lines, filter_tree_path)
1550
 
                file_group.append(trans_id)
1551
 
                if set_version and not versioned:
1552
 
                    self.tt.version_file(file_id, trans_id)
1553
 
                    versioned = True
1554
 
        return file_group
1555
 
 
1556
 
    def _conflict_file(self, name, parent_id, tree, file_id, suffix,
1557
 
                       lines=None, filter_tree_path=None):
1558
 
        """Emit a single conflict file."""
1559
 
        name = name + '.' + suffix
1560
 
        trans_id = self.tt.create_path(name, parent_id)
1561
 
        transform.create_from_tree(self.tt, trans_id, tree, file_id, lines,
1562
 
            filter_tree_path)
1563
 
        return trans_id
1564
 
 
1565
 
    def merge_executable(self, file_id, file_status):
1566
 
        """Perform a merge on the execute bit."""
1567
 
        executable = [self.executable(t, file_id) for t in (self.base_tree,
1568
 
                      self.other_tree, self.this_tree)]
1569
 
        self._merge_executable(file_id, executable, file_status,
1570
 
                               resolver=self._three_way)
1571
 
 
1572
 
    def _merge_executable(self, file_id, executable, file_status,
1573
 
                          resolver):
1574
 
        """Perform a merge on the execute bit."""
1575
 
        base_executable, other_executable, this_executable = executable
1576
 
        if file_status == "deleted":
1577
 
            return
1578
 
        winner = resolver(*executable)
1579
 
        if winner == "conflict":
1580
 
        # There must be a None in here, if we have a conflict, but we
1581
 
        # need executability since file status was not deleted.
1582
 
            if self.executable(self.other_tree, file_id) is None:
1583
 
                winner = "this"
1584
 
            else:
1585
 
                winner = "other"
1586
 
        if winner == 'this' and file_status != "modified":
1587
 
            return
1588
 
        trans_id = self.tt.trans_id_file_id(file_id)
1589
 
        try:
1590
 
            if self.tt.final_kind(trans_id) != "file":
1591
 
                return
1592
 
        except errors.NoSuchFile:
1593
 
            return
1594
 
        if winner == "this":
1595
 
            executability = this_executable
1596
 
        else:
1597
 
            if self.other_tree.has_id(file_id):
1598
 
                executability = other_executable
1599
 
            elif self.this_tree.has_id(file_id):
1600
 
                executability = this_executable
1601
 
            elif self.base_tree_has_id(file_id):
1602
 
                executability = base_executable
1603
 
        if executability is not None:
1604
 
            trans_id = self.tt.trans_id_file_id(file_id)
1605
 
            self.tt.set_executability(executability, trans_id)
1606
 
 
1607
 
    def cook_conflicts(self, fs_conflicts):
1608
 
        """Convert all conflicts into a form that doesn't depend on trans_id"""
1609
 
        self.cooked_conflicts.extend(transform.cook_conflicts(
1610
 
                fs_conflicts, self.tt))
1611
 
        fp = transform.FinalPaths(self.tt)
1612
 
        for conflict in self._raw_conflicts:
1613
 
            conflict_type = conflict[0]
1614
 
            if conflict_type == 'path conflict':
1615
 
                (trans_id, file_id,
1616
 
                this_parent, this_name,
1617
 
                other_parent, other_name) = conflict[1:]
1618
 
                if this_parent is None or this_name is None:
1619
 
                    this_path = '<deleted>'
1620
 
                else:
1621
 
                    parent_path =  fp.get_path(
1622
 
                        self.tt.trans_id_file_id(this_parent))
1623
 
                    this_path = osutils.pathjoin(parent_path, this_name)
1624
 
                if other_parent is None or other_name is None:
1625
 
                    other_path = '<deleted>'
1626
 
                else:
1627
 
                    parent_path =  fp.get_path(
1628
 
                        self.tt.trans_id_file_id(other_parent))
1629
 
                    other_path = osutils.pathjoin(parent_path, other_name)
1630
 
                c = _mod_conflicts.Conflict.factory(
1631
 
                    'path conflict', path=this_path,
1632
 
                    conflict_path=other_path,
1633
 
                    file_id=file_id)
1634
 
            elif conflict_type == 'contents conflict':
1635
 
                for trans_id in conflict[1]:
1636
 
                    file_id = self.tt.final_file_id(trans_id)
1637
 
                    if file_id is not None:
1638
 
                        break
1639
 
                path = fp.get_path(trans_id)
1640
 
                for suffix in ('.BASE', '.THIS', '.OTHER'):
1641
 
                    if path.endswith(suffix):
1642
 
                        path = path[:-len(suffix)]
1643
 
                        break
1644
 
                c = _mod_conflicts.Conflict.factory(conflict_type,
1645
 
                                                    path=path, file_id=file_id)
1646
 
            elif conflict_type == 'text conflict':
1647
 
                trans_id = conflict[1]
1648
 
                path = fp.get_path(trans_id)
1649
 
                file_id = self.tt.final_file_id(trans_id)
1650
 
                c = _mod_conflicts.Conflict.factory(conflict_type,
1651
 
                                                    path=path, file_id=file_id)
1652
 
            else:
1653
 
                raise AssertionError('bad conflict type: %r' % (conflict,))
1654
 
            self.cooked_conflicts.append(c)
1655
 
        self.cooked_conflicts.sort(key=_mod_conflicts.Conflict.sort_key)
1656
 
 
1657
 
 
1658
 
class WeaveMerger(Merge3Merger):
1659
 
    """Three-way tree merger, text weave merger."""
1660
 
    supports_reprocess = True
1661
 
    supports_show_base = False
1662
 
    supports_reverse_cherrypick = False
1663
 
    history_based = True
1664
 
 
1665
 
    def _generate_merge_plan(self, file_id, base):
1666
 
        return self.this_tree.plan_file_merge(file_id, self.other_tree,
1667
 
                                              base=base)
1668
 
 
1669
 
    def _merged_lines(self, file_id):
1670
 
        """Generate the merged lines.
1671
 
        There is no distinction between lines that are meant to contain <<<<<<<
1672
 
        and conflicts.
1673
 
        """
1674
 
        if self.cherrypick:
1675
 
            base = self.base_tree
1676
 
        else:
1677
 
            base = None
1678
 
        plan = self._generate_merge_plan(file_id, base)
1679
 
        if 'merge' in debug.debug_flags:
1680
 
            plan = list(plan)
1681
 
            trans_id = self.tt.trans_id_file_id(file_id)
1682
 
            name = self.tt.final_name(trans_id) + '.plan'
1683
 
            contents = ('%11s|%s' % l for l in plan)
1684
 
            self.tt.new_file(name, self.tt.final_parent(trans_id), contents)
1685
 
        textmerge = versionedfile.PlanWeaveMerge(plan, '<<<<<<< TREE\n',
1686
 
                                                 '>>>>>>> MERGE-SOURCE\n')
1687
 
        lines, conflicts = textmerge.merge_lines(self.reprocess)
1688
 
        if conflicts:
1689
 
            base_lines = textmerge.base_from_plan()
1690
 
        else:
1691
 
            base_lines = None
1692
 
        return lines, base_lines
1693
 
 
1694
 
    def text_merge(self, file_id, trans_id):
1695
 
        """Perform a (weave) text merge for a given file and file-id.
1696
 
        If conflicts are encountered, .THIS and .OTHER files will be emitted,
1697
 
        and a conflict will be noted.
1698
 
        """
1699
 
        lines, base_lines = self._merged_lines(file_id)
1700
 
        lines = list(lines)
1701
 
        # Note we're checking whether the OUTPUT is binary in this case,
1702
 
        # because we don't want to get into weave merge guts.
1703
 
        textfile.check_text_lines(lines)
1704
 
        self.tt.create_file(lines, trans_id)
1705
 
        if base_lines is not None:
1706
 
            # Conflict
1707
 
            self._raw_conflicts.append(('text conflict', trans_id))
1708
 
            name = self.tt.final_name(trans_id)
1709
 
            parent_id = self.tt.final_parent(trans_id)
1710
 
            file_group = self._dump_conflicts(name, parent_id, file_id,
1711
 
                                              no_base=False,
1712
 
                                              base_lines=base_lines)
1713
 
            file_group.append(trans_id)
1714
 
 
1715
 
 
1716
 
class LCAMerger(WeaveMerger):
1717
 
 
1718
 
    def _generate_merge_plan(self, file_id, base):
1719
 
        return self.this_tree.plan_file_lca_merge(file_id, self.other_tree,
1720
 
                                                  base=base)
1721
 
 
1722
 
class Diff3Merger(Merge3Merger):
1723
 
    """Three-way merger using external diff3 for text merging"""
1724
 
 
1725
 
    def dump_file(self, temp_dir, name, tree, file_id):
1726
 
        out_path = osutils.pathjoin(temp_dir, name)
1727
 
        out_file = open(out_path, "wb")
1728
 
        try:
1729
 
            in_file = tree.get_file(file_id)
1730
 
            for line in in_file:
1731
 
                out_file.write(line)
1732
 
        finally:
1733
 
            out_file.close()
1734
 
        return out_path
1735
 
 
1736
 
    def text_merge(self, file_id, trans_id):
1737
 
        """Perform a diff3 merge using a specified file-id and trans-id.
1738
 
        If conflicts are encountered, .BASE, .THIS. and .OTHER conflict files
1739
 
        will be dumped, and a will be conflict noted.
1740
 
        """
1741
 
        import bzrlib.patch
1742
 
        temp_dir = osutils.mkdtemp(prefix="bzr-")
1743
 
        try:
1744
 
            new_file = osutils.pathjoin(temp_dir, "new")
1745
 
            this = self.dump_file(temp_dir, "this", self.this_tree, file_id)
1746
 
            base = self.dump_file(temp_dir, "base", self.base_tree, file_id)
1747
 
            other = self.dump_file(temp_dir, "other", self.other_tree, file_id)
1748
 
            status = bzrlib.patch.diff3(new_file, this, base, other)
1749
 
            if status not in (0, 1):
1750
 
                raise errors.BzrError("Unhandled diff3 exit code")
1751
 
            f = open(new_file, 'rb')
1752
 
            try:
1753
 
                self.tt.create_file(f, trans_id)
1754
 
            finally:
1755
 
                f.close()
1756
 
            if status == 1:
1757
 
                name = self.tt.final_name(trans_id)
1758
 
                parent_id = self.tt.final_parent(trans_id)
1759
 
                self._dump_conflicts(name, parent_id, file_id)
1760
 
                self._raw_conflicts.append(('text conflict', trans_id))
1761
 
        finally:
1762
 
            osutils.rmtree(temp_dir)
1763
 
 
1764
 
 
1765
 
class PathNotInTree(errors.BzrError):
1766
 
 
1767
 
    _fmt = """Merge-into failed because %(tree)s does not contain %(path)s."""
1768
 
 
1769
 
    def __init__(self, path, tree):
1770
 
        errors.BzrError.__init__(self, path=path, tree=tree)
1771
 
 
1772
 
 
1773
 
class MergeIntoMerger(Merger):
1774
 
    """Merger that understands other_tree will be merged into a subdir.
1775
 
 
1776
 
    This also changes the Merger api so that it uses real Branch, revision_id,
1777
 
    and RevisonTree objects, rather than using revision specs.
1778
 
    """
1779
 
 
1780
 
    def __init__(self, this_tree, other_branch, other_tree, target_subdir,
1781
 
            source_subpath, other_rev_id=None):
1782
 
        """Create a new MergeIntoMerger object.
1783
 
 
1784
 
        source_subpath in other_tree will be effectively copied to
1785
 
        target_subdir in this_tree.
1786
 
 
1787
 
        :param this_tree: The tree that we will be merging into.
1788
 
        :param other_branch: The Branch we will be merging from.
1789
 
        :param other_tree: The RevisionTree object we want to merge.
1790
 
        :param target_subdir: The relative path where we want to merge
1791
 
            other_tree into this_tree
1792
 
        :param source_subpath: The relative path specifying the subtree of
1793
 
            other_tree to merge into this_tree.
1794
 
        """
1795
 
        # It is assumed that we are merging a tree that is not in our current
1796
 
        # ancestry, which means we are using the "EmptyTree" as our basis.
1797
 
        null_ancestor_tree = this_tree.branch.repository.revision_tree(
1798
 
                                _mod_revision.NULL_REVISION)
1799
 
        super(MergeIntoMerger, self).__init__(
1800
 
            this_branch=this_tree.branch,
1801
 
            this_tree=this_tree,
1802
 
            other_tree=other_tree,
1803
 
            base_tree=null_ancestor_tree,
1804
 
            )
1805
 
        self._target_subdir = target_subdir
1806
 
        self._source_subpath = source_subpath
1807
 
        self.other_branch = other_branch
1808
 
        if other_rev_id is None:
1809
 
            other_rev_id = other_tree.get_revision_id()
1810
 
        self.other_rev_id = self.other_basis = other_rev_id
1811
 
        self.base_is_ancestor = True
1812
 
        self.backup_files = True
1813
 
        self.merge_type = Merge3Merger
1814
 
        self.show_base = False
1815
 
        self.reprocess = False
1816
 
        self.interesting_ids = None
1817
 
        self.merge_type = _MergeTypeParameterizer(MergeIntoMergeType,
1818
 
              target_subdir=self._target_subdir,
1819
 
              source_subpath=self._source_subpath)
1820
 
        if self._source_subpath != '':
1821
 
            # If this isn't a partial merge make sure the revisions will be
1822
 
            # present.
1823
 
            self._maybe_fetch(self.other_branch, self.this_branch,
1824
 
                self.other_basis)
1825
 
 
1826
 
    def set_pending(self):
1827
 
        if self._source_subpath != '':
1828
 
            return
1829
 
        Merger.set_pending(self)
1830
 
 
1831
 
 
1832
 
class _MergeTypeParameterizer(object):
1833
 
    """Wrap a merge-type class to provide extra parameters.
1834
 
    
1835
 
    This is hack used by MergeIntoMerger to pass some extra parameters to its
1836
 
    merge_type.  Merger.do_merge() sets up its own set of parameters to pass to
1837
 
    the 'merge_type' member.  It is difficult override do_merge without
1838
 
    re-writing the whole thing, so instead we create a wrapper which will pass
1839
 
    the extra parameters.
1840
 
    """
1841
 
 
1842
 
    def __init__(self, merge_type, **kwargs):
1843
 
        self._extra_kwargs = kwargs
1844
 
        self._merge_type = merge_type
1845
 
 
1846
 
    def __call__(self, *args, **kwargs):
1847
 
        kwargs.update(self._extra_kwargs)
1848
 
        return self._merge_type(*args, **kwargs)
1849
 
 
1850
 
    def __getattr__(self, name):
1851
 
        return getattr(self._merge_type, name)
1852
 
 
1853
 
 
1854
 
class MergeIntoMergeType(Merge3Merger):
1855
 
    """Merger that incorporates a tree (or part of a tree) into another."""
1856
 
 
1857
 
    def __init__(self, *args, **kwargs):
1858
 
        """Initialize the merger object.
1859
 
 
1860
 
        :param args: See Merge3Merger.__init__'s args.
1861
 
        :param kwargs: See Merge3Merger.__init__'s keyword args, except for
1862
 
            source_subpath and target_subdir.
1863
 
        :keyword source_subpath: The relative path specifying the subtree of
1864
 
            other_tree to merge into this_tree.
1865
 
        :keyword target_subdir: The relative path where we want to merge
1866
 
            other_tree into this_tree
1867
 
        """
1868
 
        # All of the interesting work happens during Merge3Merger.__init__(),
1869
 
        # so we have have to hack in to get our extra parameters set.
1870
 
        self._source_subpath = kwargs.pop('source_subpath')
1871
 
        self._target_subdir = kwargs.pop('target_subdir')
1872
 
        super(MergeIntoMergeType, self).__init__(*args, **kwargs)
1873
 
 
1874
 
    def _compute_transform(self):
1875
 
        child_pb = ui.ui_factory.nested_progress_bar()
1876
 
        try:
1877
 
            entries = self._entries_to_incorporate()
1878
 
            entries = list(entries)
1879
 
            for num, (entry, parent_id) in enumerate(entries):
1880
 
                child_pb.update('Preparing file merge', num, len(entries))
1881
 
                parent_trans_id = self.tt.trans_id_file_id(parent_id)
1882
 
                trans_id = transform.new_by_entry(self.tt, entry,
1883
 
                    parent_trans_id, self.other_tree)
1884
 
        finally:
1885
 
            child_pb.finished()
1886
 
        self._finish_computing_transform()
1887
 
 
1888
 
    def _entries_to_incorporate(self):
1889
 
        """Yields pairs of (inventory_entry, new_parent)."""
1890
 
        other_inv = self.other_tree.inventory
1891
 
        subdir_id = other_inv.path2id(self._source_subpath)
1892
 
        if subdir_id is None:
1893
 
            # XXX: The error would be clearer if it gave the URL of the source
1894
 
            # branch, but we don't have a reference to that here.
1895
 
            raise PathNotInTree(self._source_subpath, "Source tree")
1896
 
        subdir = other_inv[subdir_id]
1897
 
        parent_in_target = osutils.dirname(self._target_subdir)
1898
 
        target_id = self.this_tree.inventory.path2id(parent_in_target)
1899
 
        if target_id is None:
1900
 
            raise PathNotInTree(self._target_subdir, "Target tree")
1901
 
        name_in_target = osutils.basename(self._target_subdir)
1902
 
        merge_into_root = subdir.copy()
1903
 
        merge_into_root.name = name_in_target
1904
 
        if merge_into_root.file_id in self.this_tree.inventory:
1905
 
            # Give the root a new file-id.
1906
 
            # This can happen fairly easily if the directory we are
1907
 
            # incorporating is the root, and both trees have 'TREE_ROOT' as
1908
 
            # their root_id.  Users will expect this to Just Work, so we
1909
 
            # change the file-id here.
1910
 
            # Non-root file-ids could potentially conflict too.  That's really
1911
 
            # an edge case, so we don't do anything special for those.  We let
1912
 
            # them cause conflicts.
1913
 
            merge_into_root.file_id = generate_ids.gen_file_id(name_in_target)
1914
 
        yield (merge_into_root, target_id)
1915
 
        if subdir.kind != 'directory':
1916
 
            # No children, so we are done.
1917
 
            return
1918
 
        for ignored_path, entry in other_inv.iter_entries_by_dir(subdir_id):
1919
 
            parent_id = entry.parent_id
1920
 
            if parent_id == subdir.file_id:
1921
 
                # The root's parent ID has changed, so make sure children of
1922
 
                # the root refer to the new ID.
1923
 
                parent_id = merge_into_root.file_id
1924
 
            yield (entry, parent_id)
1925
 
 
1926
 
 
1927
 
def merge_inner(this_branch, other_tree, base_tree, ignore_zero=False,
1928
 
                backup_files=False,
1929
 
                merge_type=Merge3Merger,
1930
 
                interesting_ids=None,
1931
 
                show_base=False,
1932
 
                reprocess=False,
1933
 
                other_rev_id=None,
1934
 
                interesting_files=None,
1935
 
                this_tree=None,
1936
 
                pb=None,
1937
 
                change_reporter=None):
1938
 
    """Primary interface for merging.
1939
 
 
1940
 
    Typical use is probably::
1941
 
 
1942
 
        merge_inner(branch, branch.get_revision_tree(other_revision),
1943
 
                    branch.get_revision_tree(base_revision))
1944
 
    """
1945
 
    if this_tree is None:
1946
 
        raise errors.BzrError("bzrlib.merge.merge_inner requires a this_tree "
1947
 
                              "parameter as of bzrlib version 0.8.")
1948
 
    merger = Merger(this_branch, other_tree, base_tree, this_tree=this_tree,
1949
 
                    pb=pb, change_reporter=change_reporter)
1950
 
    merger.backup_files = backup_files
1951
 
    merger.merge_type = merge_type
1952
 
    merger.interesting_ids = interesting_ids
1953
 
    merger.ignore_zero = ignore_zero
1954
 
    if interesting_files:
1955
 
        if interesting_ids:
1956
 
            raise ValueError('Only supply interesting_ids'
1957
 
                             ' or interesting_files')
1958
 
        merger.interesting_files = interesting_files
1959
 
    merger.show_base = show_base
1960
 
    merger.reprocess = reprocess
1961
 
    merger.other_rev_id = other_rev_id
1962
 
    merger.other_basis = other_rev_id
1963
 
    get_revision_id = getattr(base_tree, 'get_revision_id', None)
1964
 
    if get_revision_id is None:
1965
 
        get_revision_id = base_tree.last_revision
1966
 
    merger.cache_trees_with_revision_ids([other_tree, base_tree, this_tree])
1967
 
    merger.set_base_revision(get_revision_id(), this_branch)
1968
 
    return merger.do_merge()
1969
 
 
1970
 
def get_merge_type_registry():
1971
 
    """Merge type registry is in bzrlib.option to avoid circular imports.
1972
 
 
1973
 
    This method provides a sanctioned way to retrieve it.
1974
 
    """
1975
 
    from bzrlib import option
1976
 
    return option._merge_type_registry
1977
 
 
1978
 
 
1979
 
def _plan_annotate_merge(annotated_a, annotated_b, ancestors_a, ancestors_b):
1980
 
    def status_a(revision, text):
1981
 
        if revision in ancestors_b:
1982
 
            return 'killed-b', text
1983
 
        else:
1984
 
            return 'new-a', text
1985
 
 
1986
 
    def status_b(revision, text):
1987
 
        if revision in ancestors_a:
1988
 
            return 'killed-a', text
1989
 
        else:
1990
 
            return 'new-b', text
1991
 
 
1992
 
    plain_a = [t for (a, t) in annotated_a]
1993
 
    plain_b = [t for (a, t) in annotated_b]
1994
 
    matcher = patiencediff.PatienceSequenceMatcher(None, plain_a, plain_b)
1995
 
    blocks = matcher.get_matching_blocks()
1996
 
    a_cur = 0
1997
 
    b_cur = 0
1998
 
    for ai, bi, l in blocks:
1999
 
        # process all mismatched sections
2000
 
        # (last mismatched section is handled because blocks always
2001
 
        # includes a 0-length last block)
2002
 
        for revision, text in annotated_a[a_cur:ai]:
2003
 
            yield status_a(revision, text)
2004
 
        for revision, text in annotated_b[b_cur:bi]:
2005
 
            yield status_b(revision, text)
2006
 
        # and now the matched section
2007
 
        a_cur = ai + l
2008
 
        b_cur = bi + l
2009
 
        for text_a in plain_a[ai:a_cur]:
2010
 
            yield "unchanged", text_a
2011
 
 
2012
 
 
2013
 
class _PlanMergeBase(object):
2014
 
 
2015
 
    def __init__(self, a_rev, b_rev, vf, key_prefix):
2016
 
        """Contructor.
2017
 
 
2018
 
        :param a_rev: Revision-id of one revision to merge
2019
 
        :param b_rev: Revision-id of the other revision to merge
2020
 
        :param vf: A VersionedFiles containing both revisions
2021
 
        :param key_prefix: A prefix for accessing keys in vf, typically
2022
 
            (file_id,).
2023
 
        """
2024
 
        self.a_rev = a_rev
2025
 
        self.b_rev = b_rev
2026
 
        self.vf = vf
2027
 
        self._last_lines = None
2028
 
        self._last_lines_revision_id = None
2029
 
        self._cached_matching_blocks = {}
2030
 
        self._key_prefix = key_prefix
2031
 
        self._precache_tip_lines()
2032
 
 
2033
 
    def _precache_tip_lines(self):
2034
 
        lines = self.get_lines([self.a_rev, self.b_rev])
2035
 
        self.lines_a = lines[self.a_rev]
2036
 
        self.lines_b = lines[self.b_rev]
2037
 
 
2038
 
    def get_lines(self, revisions):
2039
 
        """Get lines for revisions from the backing VersionedFiles.
2040
 
 
2041
 
        :raises RevisionNotPresent: on absent texts.
2042
 
        """
2043
 
        keys = [(self._key_prefix + (rev,)) for rev in revisions]
2044
 
        result = {}
2045
 
        for record in self.vf.get_record_stream(keys, 'unordered', True):
2046
 
            if record.storage_kind == 'absent':
2047
 
                raise errors.RevisionNotPresent(record.key, self.vf)
2048
 
            result[record.key[-1]] = osutils.chunks_to_lines(
2049
 
                record.get_bytes_as('chunked'))
2050
 
        return result
2051
 
 
2052
 
    def plan_merge(self):
2053
 
        """Generate a 'plan' for merging the two revisions.
2054
 
 
2055
 
        This involves comparing their texts and determining the cause of
2056
 
        differences.  If text A has a line and text B does not, then either the
2057
 
        line was added to text A, or it was deleted from B.  Once the causes
2058
 
        are combined, they are written out in the format described in
2059
 
        VersionedFile.plan_merge
2060
 
        """
2061
 
        blocks = self._get_matching_blocks(self.a_rev, self.b_rev)
2062
 
        unique_a, unique_b = self._unique_lines(blocks)
2063
 
        new_a, killed_b = self._determine_status(self.a_rev, unique_a)
2064
 
        new_b, killed_a = self._determine_status(self.b_rev, unique_b)
2065
 
        return self._iter_plan(blocks, new_a, killed_b, new_b, killed_a)
2066
 
 
2067
 
    def _iter_plan(self, blocks, new_a, killed_b, new_b, killed_a):
2068
 
        last_i = 0
2069
 
        last_j = 0
2070
 
        for i, j, n in blocks:
2071
 
            for a_index in range(last_i, i):
2072
 
                if a_index in new_a:
2073
 
                    if a_index in killed_b:
2074
 
                        yield 'conflicted-a', self.lines_a[a_index]
2075
 
                    else:
2076
 
                        yield 'new-a', self.lines_a[a_index]
2077
 
                else:
2078
 
                    yield 'killed-b', self.lines_a[a_index]
2079
 
            for b_index in range(last_j, j):
2080
 
                if b_index in new_b:
2081
 
                    if b_index in killed_a:
2082
 
                        yield 'conflicted-b', self.lines_b[b_index]
2083
 
                    else:
2084
 
                        yield 'new-b', self.lines_b[b_index]
2085
 
                else:
2086
 
                    yield 'killed-a', self.lines_b[b_index]
2087
 
            # handle common lines
2088
 
            for a_index in range(i, i+n):
2089
 
                yield 'unchanged', self.lines_a[a_index]
2090
 
            last_i = i+n
2091
 
            last_j = j+n
2092
 
 
2093
 
    def _get_matching_blocks(self, left_revision, right_revision):
2094
 
        """Return a description of which sections of two revisions match.
2095
 
 
2096
 
        See SequenceMatcher.get_matching_blocks
2097
 
        """
2098
 
        cached = self._cached_matching_blocks.get((left_revision,
2099
 
                                                   right_revision))
2100
 
        if cached is not None:
2101
 
            return cached
2102
 
        if self._last_lines_revision_id == left_revision:
2103
 
            left_lines = self._last_lines
2104
 
            right_lines = self.get_lines([right_revision])[right_revision]
2105
 
        else:
2106
 
            lines = self.get_lines([left_revision, right_revision])
2107
 
            left_lines = lines[left_revision]
2108
 
            right_lines = lines[right_revision]
2109
 
        self._last_lines = right_lines
2110
 
        self._last_lines_revision_id = right_revision
2111
 
        matcher = patiencediff.PatienceSequenceMatcher(None, left_lines,
2112
 
                                                       right_lines)
2113
 
        return matcher.get_matching_blocks()
2114
 
 
2115
 
    def _unique_lines(self, matching_blocks):
2116
 
        """Analyse matching_blocks to determine which lines are unique
2117
 
 
2118
 
        :return: a tuple of (unique_left, unique_right), where the values are
2119
 
            sets of line numbers of unique lines.
2120
 
        """
2121
 
        last_i = 0
2122
 
        last_j = 0
2123
 
        unique_left = []
2124
 
        unique_right = []
2125
 
        for i, j, n in matching_blocks:
2126
 
            unique_left.extend(range(last_i, i))
2127
 
            unique_right.extend(range(last_j, j))
2128
 
            last_i = i + n
2129
 
            last_j = j + n
2130
 
        return unique_left, unique_right
2131
 
 
2132
 
    @staticmethod
2133
 
    def _subtract_plans(old_plan, new_plan):
2134
 
        """Remove changes from new_plan that came from old_plan.
2135
 
 
2136
 
        It is assumed that the difference between the old_plan and new_plan
2137
 
        is their choice of 'b' text.
2138
 
 
2139
 
        All lines from new_plan that differ from old_plan are emitted
2140
 
        verbatim.  All lines from new_plan that match old_plan but are
2141
 
        not about the 'b' revision are emitted verbatim.
2142
 
 
2143
 
        Lines that match and are about the 'b' revision are the lines we
2144
 
        don't want, so we convert 'killed-b' -> 'unchanged', and 'new-b'
2145
 
        is skipped entirely.
2146
 
        """
2147
 
        matcher = patiencediff.PatienceSequenceMatcher(None, old_plan,
2148
 
                                                       new_plan)
2149
 
        last_j = 0
2150
 
        for i, j, n in matcher.get_matching_blocks():
2151
 
            for jj in range(last_j, j):
2152
 
                yield new_plan[jj]
2153
 
            for jj in range(j, j+n):
2154
 
                plan_line = new_plan[jj]
2155
 
                if plan_line[0] == 'new-b':
2156
 
                    pass
2157
 
                elif plan_line[0] == 'killed-b':
2158
 
                    yield 'unchanged', plan_line[1]
2159
 
                else:
2160
 
                    yield plan_line
2161
 
            last_j = j + n
2162
 
 
2163
 
 
2164
 
class _PlanMerge(_PlanMergeBase):
2165
 
    """Plan an annotate merge using on-the-fly annotation"""
2166
 
 
2167
 
    def __init__(self, a_rev, b_rev, vf, key_prefix):
2168
 
        super(_PlanMerge, self).__init__(a_rev, b_rev, vf, key_prefix)
2169
 
        self.a_key = self._key_prefix + (self.a_rev,)
2170
 
        self.b_key = self._key_prefix + (self.b_rev,)
2171
 
        self.graph = _mod_graph.Graph(self.vf)
2172
 
        heads = self.graph.heads((self.a_key, self.b_key))
2173
 
        if len(heads) == 1:
2174
 
            # one side dominates, so we can just return its values, yay for
2175
 
            # per-file graphs
2176
 
            # Ideally we would know that before we get this far
2177
 
            self._head_key = heads.pop()
2178
 
            if self._head_key == self.a_key:
2179
 
                other = b_rev
2180
 
            else:
2181
 
                other = a_rev
2182
 
            trace.mutter('found dominating revision for %s\n%s > %s', self.vf,
2183
 
                         self._head_key[-1], other)
2184
 
            self._weave = None
2185
 
        else:
2186
 
            self._head_key = None
2187
 
            self._build_weave()
2188
 
 
2189
 
    def _precache_tip_lines(self):
2190
 
        # Turn this into a no-op, because we will do this later
2191
 
        pass
2192
 
 
2193
 
    def _find_recursive_lcas(self):
2194
 
        """Find all the ancestors back to a unique lca"""
2195
 
        cur_ancestors = (self.a_key, self.b_key)
2196
 
        # graph.find_lca(uncommon, keys) now returns plain NULL_REVISION,
2197
 
        # rather than a key tuple. We will just map that directly to no common
2198
 
        # ancestors.
2199
 
        parent_map = {}
2200
 
        while True:
2201
 
            next_lcas = self.graph.find_lca(*cur_ancestors)
2202
 
            # Map a plain NULL_REVISION to a simple no-ancestors
2203
 
            if next_lcas == set([_mod_revision.NULL_REVISION]):
2204
 
                next_lcas = ()
2205
 
            # Order the lca's based on when they were merged into the tip
2206
 
            # While the actual merge portion of weave merge uses a set() of
2207
 
            # active revisions, the order of insertion *does* effect the
2208
 
            # implicit ordering of the texts.
2209
 
            for rev_key in cur_ancestors:
2210
 
                ordered_parents = tuple(self.graph.find_merge_order(rev_key,
2211
 
                                                                    next_lcas))
2212
 
                parent_map[rev_key] = ordered_parents
2213
 
            if len(next_lcas) == 0:
2214
 
                break
2215
 
            elif len(next_lcas) == 1:
2216
 
                parent_map[list(next_lcas)[0]] = ()
2217
 
                break
2218
 
            elif len(next_lcas) > 2:
2219
 
                # More than 2 lca's, fall back to grabbing all nodes between
2220
 
                # this and the unique lca.
2221
 
                trace.mutter('More than 2 LCAs, falling back to all nodes for:'
2222
 
                             ' %s, %s\n=> %s',
2223
 
                             self.a_key, self.b_key, cur_ancestors)
2224
 
                cur_lcas = next_lcas
2225
 
                while len(cur_lcas) > 1:
2226
 
                    cur_lcas = self.graph.find_lca(*cur_lcas)
2227
 
                if len(cur_lcas) == 0:
2228
 
                    # No common base to find, use the full ancestry
2229
 
                    unique_lca = None
2230
 
                else:
2231
 
                    unique_lca = list(cur_lcas)[0]
2232
 
                    if unique_lca == _mod_revision.NULL_REVISION:
2233
 
                        # find_lca will return a plain 'NULL_REVISION' rather
2234
 
                        # than a key tuple when there is no common ancestor, we
2235
 
                        # prefer to just use None, because it doesn't confuse
2236
 
                        # _get_interesting_texts()
2237
 
                        unique_lca = None
2238
 
                parent_map.update(self._find_unique_parents(next_lcas,
2239
 
                                                            unique_lca))
2240
 
                break
2241
 
            cur_ancestors = next_lcas
2242
 
        return parent_map
2243
 
 
2244
 
    def _find_unique_parents(self, tip_keys, base_key):
2245
 
        """Find ancestors of tip that aren't ancestors of base.
2246
 
 
2247
 
        :param tip_keys: Nodes that are interesting
2248
 
        :param base_key: Cull all ancestors of this node
2249
 
        :return: The parent map for all revisions between tip_keys and
2250
 
            base_key. base_key will be included. References to nodes outside of
2251
 
            the ancestor set will also be removed.
2252
 
        """
2253
 
        # TODO: this would be simpler if find_unique_ancestors took a list
2254
 
        #       instead of a single tip, internally it supports it, but it
2255
 
        #       isn't a "backwards compatible" api change.
2256
 
        if base_key is None:
2257
 
            parent_map = dict(self.graph.iter_ancestry(tip_keys))
2258
 
            # We remove NULL_REVISION because it isn't a proper tuple key, and
2259
 
            # thus confuses things like _get_interesting_texts, and our logic
2260
 
            # to add the texts into the memory weave.
2261
 
            if _mod_revision.NULL_REVISION in parent_map:
2262
 
                parent_map.pop(_mod_revision.NULL_REVISION)
2263
 
        else:
2264
 
            interesting = set()
2265
 
            for tip in tip_keys:
2266
 
                interesting.update(
2267
 
                    self.graph.find_unique_ancestors(tip, [base_key]))
2268
 
            parent_map = self.graph.get_parent_map(interesting)
2269
 
            parent_map[base_key] = ()
2270
 
        culled_parent_map, child_map, tails = self._remove_external_references(
2271
 
            parent_map)
2272
 
        # Remove all the tails but base_key
2273
 
        if base_key is not None:
2274
 
            tails.remove(base_key)
2275
 
            self._prune_tails(culled_parent_map, child_map, tails)
2276
 
        # Now remove all the uninteresting 'linear' regions
2277
 
        simple_map = _mod_graph.collapse_linear_regions(culled_parent_map)
2278
 
        return simple_map
2279
 
 
2280
 
    @staticmethod
2281
 
    def _remove_external_references(parent_map):
2282
 
        """Remove references that go outside of the parent map.
2283
 
 
2284
 
        :param parent_map: Something returned from Graph.get_parent_map(keys)
2285
 
        :return: (filtered_parent_map, child_map, tails)
2286
 
            filtered_parent_map is parent_map without external references
2287
 
            child_map is the {parent_key: [child_keys]} mapping
2288
 
            tails is a list of nodes that do not have any parents in the map
2289
 
        """
2290
 
        # TODO: The basic effect of this function seems more generic than
2291
 
        #       _PlanMerge. But the specific details of building a child_map,
2292
 
        #       and computing tails seems very specific to _PlanMerge.
2293
 
        #       Still, should this be in Graph land?
2294
 
        filtered_parent_map = {}
2295
 
        child_map = {}
2296
 
        tails = []
2297
 
        for key, parent_keys in parent_map.iteritems():
2298
 
            culled_parent_keys = [p for p in parent_keys if p in parent_map]
2299
 
            if not culled_parent_keys:
2300
 
                tails.append(key)
2301
 
            for parent_key in culled_parent_keys:
2302
 
                child_map.setdefault(parent_key, []).append(key)
2303
 
            # TODO: Do we want to do this, it adds overhead for every node,
2304
 
            #       just to say that the node has no children
2305
 
            child_map.setdefault(key, [])
2306
 
            filtered_parent_map[key] = culled_parent_keys
2307
 
        return filtered_parent_map, child_map, tails
2308
 
 
2309
 
    @staticmethod
2310
 
    def _prune_tails(parent_map, child_map, tails_to_remove):
2311
 
        """Remove tails from the parent map.
2312
 
 
2313
 
        This will remove the supplied revisions until no more children have 0
2314
 
        parents.
2315
 
 
2316
 
        :param parent_map: A dict of {child: [parents]}, this dictionary will
2317
 
            be modified in place.
2318
 
        :param tails_to_remove: A list of tips that should be removed,
2319
 
            this list will be consumed
2320
 
        :param child_map: The reverse dict of parent_map ({parent: [children]})
2321
 
            this dict will be modified
2322
 
        :return: None, parent_map will be modified in place.
2323
 
        """
2324
 
        while tails_to_remove:
2325
 
            next = tails_to_remove.pop()
2326
 
            parent_map.pop(next)
2327
 
            children = child_map.pop(next)
2328
 
            for child in children:
2329
 
                child_parents = parent_map[child]
2330
 
                child_parents.remove(next)
2331
 
                if len(child_parents) == 0:
2332
 
                    tails_to_remove.append(child)
2333
 
 
2334
 
    def _get_interesting_texts(self, parent_map):
2335
 
        """Return a dict of texts we are interested in.
2336
 
 
2337
 
        Note that the input is in key tuples, but the output is in plain
2338
 
        revision ids.
2339
 
 
2340
 
        :param parent_map: The output from _find_recursive_lcas
2341
 
        :return: A dict of {'revision_id':lines} as returned by
2342
 
            _PlanMergeBase.get_lines()
2343
 
        """
2344
 
        all_revision_keys = set(parent_map)
2345
 
        all_revision_keys.add(self.a_key)
2346
 
        all_revision_keys.add(self.b_key)
2347
 
 
2348
 
        # Everything else is in 'keys' but get_lines is in 'revision_ids'
2349
 
        all_texts = self.get_lines([k[-1] for k in all_revision_keys])
2350
 
        return all_texts
2351
 
 
2352
 
    def _build_weave(self):
2353
 
        from bzrlib import weave
2354
 
        self._weave = weave.Weave(weave_name='in_memory_weave',
2355
 
                                  allow_reserved=True)
2356
 
        parent_map = self._find_recursive_lcas()
2357
 
 
2358
 
        all_texts = self._get_interesting_texts(parent_map)
2359
 
 
2360
 
        # Note: Unfortunately, the order given by topo_sort will effect the
2361
 
        # ordering resolution in the output. Specifically, if you add A then B,
2362
 
        # then in the output text A lines will show up before B lines. And, of
2363
 
        # course, topo_sort doesn't guarantee any real ordering.
2364
 
        # So we use merge_sort, and add a fake node on the tip.
2365
 
        # This ensures that left-hand parents will always be inserted into the
2366
 
        # weave before right-hand parents.
2367
 
        tip_key = self._key_prefix + (_mod_revision.CURRENT_REVISION,)
2368
 
        parent_map[tip_key] = (self.a_key, self.b_key)
2369
 
 
2370
 
        for seq_num, key, depth, eom in reversed(tsort.merge_sort(parent_map,
2371
 
                                                                  tip_key)):
2372
 
            if key == tip_key:
2373
 
                continue
2374
 
        # for key in tsort.topo_sort(parent_map):
2375
 
            parent_keys = parent_map[key]
2376
 
            revision_id = key[-1]
2377
 
            parent_ids = [k[-1] for k in parent_keys]
2378
 
            self._weave.add_lines(revision_id, parent_ids,
2379
 
                                  all_texts[revision_id])
2380
 
 
2381
 
    def plan_merge(self):
2382
 
        """Generate a 'plan' for merging the two revisions.
2383
 
 
2384
 
        This involves comparing their texts and determining the cause of
2385
 
        differences.  If text A has a line and text B does not, then either the
2386
 
        line was added to text A, or it was deleted from B.  Once the causes
2387
 
        are combined, they are written out in the format described in
2388
 
        VersionedFile.plan_merge
2389
 
        """
2390
 
        if self._head_key is not None: # There was a single head
2391
 
            if self._head_key == self.a_key:
2392
 
                plan = 'new-a'
2393
 
            else:
2394
 
                if self._head_key != self.b_key:
2395
 
                    raise AssertionError('There was an invalid head: %s != %s'
2396
 
                                         % (self.b_key, self._head_key))
2397
 
                plan = 'new-b'
2398
 
            head_rev = self._head_key[-1]
2399
 
            lines = self.get_lines([head_rev])[head_rev]
2400
 
            return ((plan, line) for line in lines)
2401
 
        return self._weave.plan_merge(self.a_rev, self.b_rev)
2402
 
 
2403
 
 
2404
 
class _PlanLCAMerge(_PlanMergeBase):
2405
 
    """
2406
 
    This merge algorithm differs from _PlanMerge in that:
2407
 
    1. comparisons are done against LCAs only
2408
 
    2. cases where a contested line is new versus one LCA but old versus
2409
 
       another are marked as conflicts, by emitting the line as conflicted-a
2410
 
       or conflicted-b.
2411
 
 
2412
 
    This is faster, and hopefully produces more useful output.
2413
 
    """
2414
 
 
2415
 
    def __init__(self, a_rev, b_rev, vf, key_prefix, graph):
2416
 
        _PlanMergeBase.__init__(self, a_rev, b_rev, vf, key_prefix)
2417
 
        lcas = graph.find_lca(key_prefix + (a_rev,), key_prefix + (b_rev,))
2418
 
        self.lcas = set()
2419
 
        for lca in lcas:
2420
 
            if lca == _mod_revision.NULL_REVISION:
2421
 
                self.lcas.add(lca)
2422
 
            else:
2423
 
                self.lcas.add(lca[-1])
2424
 
        for lca in self.lcas:
2425
 
            if _mod_revision.is_null(lca):
2426
 
                lca_lines = []
2427
 
            else:
2428
 
                lca_lines = self.get_lines([lca])[lca]
2429
 
            matcher = patiencediff.PatienceSequenceMatcher(None, self.lines_a,
2430
 
                                                           lca_lines)
2431
 
            blocks = list(matcher.get_matching_blocks())
2432
 
            self._cached_matching_blocks[(a_rev, lca)] = blocks
2433
 
            matcher = patiencediff.PatienceSequenceMatcher(None, self.lines_b,
2434
 
                                                           lca_lines)
2435
 
            blocks = list(matcher.get_matching_blocks())
2436
 
            self._cached_matching_blocks[(b_rev, lca)] = blocks
2437
 
 
2438
 
    def _determine_status(self, revision_id, unique_line_numbers):
2439
 
        """Determines the status unique lines versus all lcas.
2440
 
 
2441
 
        Basically, determines why the line is unique to this revision.
2442
 
 
2443
 
        A line may be determined new, killed, or both.
2444
 
 
2445
 
        If a line is determined new, that means it was not present in at least
2446
 
        one LCA, and is not present in the other merge revision.
2447
 
 
2448
 
        If a line is determined killed, that means the line was present in
2449
 
        at least one LCA.
2450
 
 
2451
 
        If a line is killed and new, this indicates that the two merge
2452
 
        revisions contain differing conflict resolutions.
2453
 
        :param revision_id: The id of the revision in which the lines are
2454
 
            unique
2455
 
        :param unique_line_numbers: The line numbers of unique lines.
2456
 
        :return a tuple of (new_this, killed_other):
2457
 
        """
2458
 
        new = set()
2459
 
        killed = set()
2460
 
        unique_line_numbers = set(unique_line_numbers)
2461
 
        for lca in self.lcas:
2462
 
            blocks = self._get_matching_blocks(revision_id, lca)
2463
 
            unique_vs_lca, _ignored = self._unique_lines(blocks)
2464
 
            new.update(unique_line_numbers.intersection(unique_vs_lca))
2465
 
            killed.update(unique_line_numbers.difference(unique_vs_lca))
2466
 
        return new, killed
 
537
                self.base_rev_id = None
 
538
            else:
 
539
                self.base_rev_id = base_branch.get_rev_id(base_revision[1])
 
540
            fetch(from_branch=base_branch, to_branch=self.this_branch)
 
541
            self.base_is_ancestor = is_ancestor(self.this_basis, 
 
542
                                                self.base_rev_id,
 
543
                                                self.this_branch)
 
544
 
 
545
    def do_merge(self):
 
546
        def get_inventory(tree):
 
547
            return tree.inventory
 
548
        
 
549
        inv_changes = merge_flex(self.this_tree, self.base_tree, 
 
550
                                 self.other_tree,
 
551
                                 generate_changeset, get_inventory,
 
552
                                 self.conflict_handler,
 
553
                                 merge_factory=self.merge_factory, 
 
554
                                 interesting_ids=self.interesting_ids)
 
555
 
 
556
        adjust_ids = []
 
557
        for id, path in inv_changes.iteritems():
 
558
            if path is not None:
 
559
                if path == '.':
 
560
                    path = ''
 
561
                else:
 
562
                    assert path.startswith('.' + '/') or path.startswith('.' + '\\'), "path is %s" % path
 
563
                path = path[2:]
 
564
            adjust_ids.append((path, id))
 
565
        if len(adjust_ids) > 0:
 
566
            self.this_branch.working_tree().set_inventory(self.regen_inventory(adjust_ids))
 
567
        conflicts = self.conflict_handler.conflicts
 
568
        self.conflict_handler.finalize()
 
569
        return conflicts
 
570
 
 
571
    def regen_inventory(self, new_entries):
 
572
        old_entries = self.this_branch.working_tree().read_working_inventory()
 
573
        new_inventory = {}
 
574
        by_path = {}
 
575
        new_entries_map = {} 
 
576
        for path, file_id in new_entries:
 
577
            if path is None:
 
578
                continue
 
579
            new_entries_map[file_id] = path
 
580
 
 
581
        def id2path(file_id):
 
582
            path = new_entries_map.get(file_id)
 
583
            if path is not None:
 
584
                return path
 
585
            entry = old_entries[file_id]
 
586
            if entry.parent_id is None:
 
587
                return entry.name
 
588
            return os.path.join(id2path(entry.parent_id), entry.name)
 
589
            
 
590
        for file_id in old_entries:
 
591
            entry = old_entries[file_id]
 
592
            path = id2path(file_id)
 
593
            new_inventory[file_id] = (path, file_id, entry.parent_id, 
 
594
                                      entry.kind)
 
595
            by_path[path] = file_id
 
596
        
 
597
        deletions = 0
 
598
        insertions = 0
 
599
        new_path_list = []
 
600
        for path, file_id in new_entries:
 
601
            if path is None:
 
602
                del new_inventory[file_id]
 
603
                deletions += 1
 
604
            else:
 
605
                new_path_list.append((path, file_id))
 
606
                if file_id not in old_entries:
 
607
                    insertions += 1
 
608
        # Ensure no file is added before its parent
 
609
        new_path_list.sort()
 
610
        for path, file_id in new_path_list:
 
611
            if path == '':
 
612
                parent = None
 
613
            else:
 
614
                parent = by_path[os.path.dirname(path)]
 
615
            abspath = os.path.join(self.this_tree.basedir, path)
 
616
            kind = bzrlib.osutils.file_kind(abspath)
 
617
            new_inventory[file_id] = (path, file_id, parent, kind)
 
618
            by_path[path] = file_id 
 
619
 
 
620
        # Get a list in insertion order
 
621
        new_inventory_list = new_inventory.values()
 
622
        mutter ("""Inventory regeneration:
 
623
    old length: %i insertions: %i deletions: %i new_length: %i"""\
 
624
            % (len(old_entries), insertions, deletions, 
 
625
               len(new_inventory_list)))
 
626
        assert len(new_inventory_list) == len(old_entries) + insertions\
 
627
            - deletions
 
628
        new_inventory_list.sort()
 
629
        return new_inventory_list
 
630
 
 
631
merge_types = {     "merge3": (ApplyMerge3, "Native diff3-style merge"), 
 
632
                     "diff3": (Diff3Merge,  "Merge using external diff3"),
 
633
                     'weave': (WeaveMerge, "Weave-based merge")
 
634
              }
 
635