~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/merge.py

  • Committer: John Arbash Meinel
  • Date: 2008-10-04 14:10:13 UTC
  • mto: This revision was merged to the branch mainline in revision 3805.
  • Revision ID: john@arbash-meinel.com-20081004141013-yskxjlwtuy2k18ue
Playing around with expanding requests for btree index nodes into neighboring nodes.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005-2011 Canonical Ltd
 
1
# Copyright (C) 2005, 2006, 2008 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
 
 
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
 
 
18
import errno
 
19
from itertools import chain
 
20
import os
17
21
import warnings
18
22
 
19
 
from bzrlib.lazy_import import lazy_import
20
 
lazy_import(globals(), """
21
23
from bzrlib import (
22
 
    branch as _mod_branch,
23
 
    cleanup,
24
 
    conflicts as _mod_conflicts,
25
24
    debug,
26
 
    generate_ids,
 
25
    errors,
27
26
    graph as _mod_graph,
28
 
    merge3,
29
27
    osutils,
30
28
    patiencediff,
 
29
    registry,
31
30
    revision as _mod_revision,
32
 
    textfile,
33
 
    trace,
34
 
    transform,
35
31
    tree as _mod_tree,
36
32
    tsort,
37
 
    ui,
38
 
    versionedfile,
39
 
    workingtree,
40
 
    )
41
 
""")
42
 
from bzrlib import (
43
 
    decorators,
44
 
    errors,
45
 
    hooks,
46
 
    )
47
 
from bzrlib.symbol_versioning import (
48
 
    deprecated_in,
49
 
    deprecated_method,
50
 
    )
 
33
    )
 
34
from bzrlib.branch import Branch
 
35
from bzrlib.conflicts import ConflictList, Conflict
 
36
from bzrlib.errors import (BzrCommandError,
 
37
                           BzrError,
 
38
                           NoCommonAncestor,
 
39
                           NoCommits,
 
40
                           NoSuchRevision,
 
41
                           NoSuchFile,
 
42
                           NotBranchError,
 
43
                           NotVersionedError,
 
44
                           UnrelatedBranches,
 
45
                           UnsupportedOperation,
 
46
                           WorkingTreeNotRevision,
 
47
                           BinaryFile,
 
48
                           )
 
49
from bzrlib.graph import Graph
 
50
from bzrlib.merge3 import Merge3
 
51
from bzrlib.osutils import rename, pathjoin
 
52
from progress import DummyProgress, ProgressPhase
 
53
from bzrlib.revision import (NULL_REVISION, ensure_null)
 
54
from bzrlib.textfile import check_text_lines
 
55
from bzrlib.trace import mutter, warning, note, is_quiet
 
56
from bzrlib.transform import (TransformPreview, TreeTransform,
 
57
                              resolve_conflicts, cook_conflicts,
 
58
                              conflict_pass, FinalPaths, create_by_entry,
 
59
                              unique_add, ROOT_PARENT)
 
60
from bzrlib.versionedfile import PlanWeaveMerge
 
61
from bzrlib import ui
 
62
 
51
63
# TODO: Report back as changes are merged in
52
64
 
53
65
 
54
66
def transform_tree(from_tree, to_tree, interesting_ids=None):
55
 
    from_tree.lock_tree_write()
56
 
    operation = cleanup.OperationWithCleanups(merge_inner)
57
 
    operation.add_cleanup(from_tree.unlock)
58
 
    operation.run_simple(from_tree.branch, to_tree, from_tree,
59
 
        ignore_zero=True, interesting_ids=interesting_ids, this_tree=from_tree)
60
 
 
61
 
 
62
 
class MergeHooks(hooks.Hooks):
63
 
 
64
 
    def __init__(self):
65
 
        hooks.Hooks.__init__(self, "bzrlib.merge", "Merger.hooks")
66
 
        self.add_hook('merge_file_content',
67
 
            "Called with a bzrlib.merge.Merger object to create a per file "
68
 
            "merge object when starting a merge. "
69
 
            "Should return either None or a subclass of "
70
 
            "``bzrlib.merge.AbstractPerFileMerger``. "
71
 
            "Such objects will then be called per file "
72
 
            "that needs to be merged (including when one "
73
 
            "side has deleted the file and the other has changed it). "
74
 
            "See the AbstractPerFileMerger API docs for details on how it is "
75
 
            "used by merge.",
76
 
            (2, 1))
77
 
 
78
 
 
79
 
class AbstractPerFileMerger(object):
80
 
    """PerFileMerger objects are used by plugins extending merge for bzrlib.
81
 
 
82
 
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
83
 
    
84
 
    :ivar merger: The Merge3Merger performing the merge.
85
 
    """
86
 
 
87
 
    def __init__(self, merger):
88
 
        """Create a PerFileMerger for use with merger."""
89
 
        self.merger = merger
90
 
 
91
 
    def merge_contents(self, merge_params):
92
 
        """Attempt to merge the contents of a single file.
93
 
        
94
 
        :param merge_params: A bzrlib.merge.MergeHookParams
95
 
        :return: A tuple of (status, chunks), where status is one of
96
 
            'not_applicable', 'success', 'conflicted', or 'delete'.  If status
97
 
            is 'success' or 'conflicted', then chunks should be an iterable of
98
 
            strings for the new file contents.
99
 
        """
100
 
        return ('not applicable', None)
101
 
 
102
 
 
103
 
class PerFileMerger(AbstractPerFileMerger):
104
 
    """Merge individual files when self.file_matches returns True.
105
 
 
106
 
    This class is intended to be subclassed.  The file_matches and
107
 
    merge_matching methods should be overridden with concrete implementations.
108
 
    """
109
 
 
110
 
    def file_matches(self, params):
111
 
        """Return True if merge_matching should be called on this file.
112
 
 
113
 
        Only called with merges of plain files with no clear winner.
114
 
 
115
 
        Subclasses must override this.
116
 
        """
117
 
        raise NotImplementedError(self.file_matches)
118
 
 
119
 
    def get_filename(self, params, tree):
120
 
        """Lookup the filename (i.e. basename, not path), given a Tree (e.g.
121
 
        self.merger.this_tree) and a MergeHookParams.
122
 
        """
123
 
        return osutils.basename(tree.id2path(params.file_id))
124
 
 
125
 
    def get_filepath(self, params, tree):
126
 
        """Calculate the path to the file in a tree.
127
 
 
128
 
        :param params: A MergeHookParams describing the file to merge
129
 
        :param tree: a Tree, e.g. self.merger.this_tree.
130
 
        """
131
 
        return tree.id2path(params.file_id)
132
 
 
133
 
    def merge_contents(self, params):
134
 
        """Merge the contents of a single file."""
135
 
        # Check whether this custom merge logic should be used.
136
 
        if (
137
 
            # OTHER is a straight winner, rely on default merge.
138
 
            params.winner == 'other' or
139
 
            # THIS and OTHER aren't both files.
140
 
            not params.is_file_merge() or
141
 
            # The filename doesn't match *.xml
142
 
            not self.file_matches(params)):
143
 
            return 'not_applicable', None
144
 
        return self.merge_matching(params)
145
 
 
146
 
    def merge_matching(self, params):
147
 
        """Merge the contents of a single file that has matched the criteria
148
 
        in PerFileMerger.merge_contents (is a conflict, is a file,
149
 
        self.file_matches is True).
150
 
 
151
 
        Subclasses must override this.
152
 
        """
153
 
        raise NotImplementedError(self.merge_matching)
154
 
 
155
 
 
156
 
class ConfigurableFileMerger(PerFileMerger):
157
 
    """Merge individual files when configured via a .conf file.
158
 
 
159
 
    This is a base class for concrete custom file merging logic. Concrete
160
 
    classes should implement ``merge_text``.
161
 
 
162
 
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
163
 
    
164
 
    :ivar affected_files: The configured file paths to merge.
165
 
 
166
 
    :cvar name_prefix: The prefix to use when looking up configuration
167
 
        details. <name_prefix>_merge_files describes the files targeted by the
168
 
        hook for example.
169
 
        
170
 
    :cvar default_files: The default file paths to merge when no configuration
171
 
        is present.
172
 
    """
173
 
 
174
 
    name_prefix = None
175
 
    default_files = None
176
 
 
177
 
    def __init__(self, merger):
178
 
        super(ConfigurableFileMerger, self).__init__(merger)
179
 
        self.affected_files = None
180
 
        self.default_files = self.__class__.default_files or []
181
 
        self.name_prefix = self.__class__.name_prefix
182
 
        if self.name_prefix is None:
183
 
            raise ValueError("name_prefix must be set.")
184
 
 
185
 
    def file_matches(self, params):
186
 
        """Check whether the file should call the merge hook.
187
 
 
188
 
        <name_prefix>_merge_files configuration variable is a list of files
189
 
        that should use the hook.
190
 
        """
191
 
        affected_files = self.affected_files
192
 
        if affected_files is None:
193
 
            config = self.merger.this_branch.get_config()
194
 
            # Until bzr provides a better policy for caching the config, we
195
 
            # just add the part we're interested in to the params to avoid
196
 
            # reading the config files repeatedly (bazaar.conf, location.conf,
197
 
            # branch.conf).
198
 
            config_key = self.name_prefix + '_merge_files'
199
 
            affected_files = config.get_user_option_as_list(config_key)
200
 
            if affected_files is None:
201
 
                # If nothing was specified in the config, use the default.
202
 
                affected_files = self.default_files
203
 
            self.affected_files = affected_files
204
 
        if affected_files:
205
 
            filepath = self.get_filepath(params, self.merger.this_tree)
206
 
            if filepath in affected_files:
207
 
                return True
208
 
        return False
209
 
 
210
 
    def merge_matching(self, params):
211
 
        return self.merge_text(params)
212
 
 
213
 
    def merge_text(self, params):
214
 
        """Merge the byte contents of a single file.
215
 
 
216
 
        This is called after checking that the merge should be performed in
217
 
        merge_contents, and it should behave as per
218
 
        ``bzrlib.merge.AbstractPerFileMerger.merge_contents``.
219
 
        """
220
 
        raise NotImplementedError(self.merge_text)
221
 
 
222
 
 
223
 
class MergeHookParams(object):
224
 
    """Object holding parameters passed to merge_file_content hooks.
225
 
 
226
 
    There are some fields hooks can access:
227
 
 
228
 
    :ivar file_id: the file ID of the file being merged
229
 
    :ivar trans_id: the transform ID for the merge of this file
230
 
    :ivar this_kind: kind of file_id in 'this' tree
231
 
    :ivar other_kind: kind of file_id in 'other' tree
232
 
    :ivar winner: one of 'this', 'other', 'conflict'
233
 
    """
234
 
 
235
 
    def __init__(self, merger, file_id, trans_id, this_kind, other_kind,
236
 
            winner):
237
 
        self._merger = merger
238
 
        self.file_id = file_id
239
 
        self.trans_id = trans_id
240
 
        self.this_kind = this_kind
241
 
        self.other_kind = other_kind
242
 
        self.winner = winner
243
 
 
244
 
    def is_file_merge(self):
245
 
        """True if this_kind and other_kind are both 'file'."""
246
 
        return self.this_kind == 'file' and self.other_kind == 'file'
247
 
 
248
 
    @decorators.cachedproperty
249
 
    def base_lines(self):
250
 
        """The lines of the 'base' version of the file."""
251
 
        return self._merger.get_lines(self._merger.base_tree, self.file_id)
252
 
 
253
 
    @decorators.cachedproperty
254
 
    def this_lines(self):
255
 
        """The lines of the 'this' version of the file."""
256
 
        return self._merger.get_lines(self._merger.this_tree, self.file_id)
257
 
 
258
 
    @decorators.cachedproperty
259
 
    def other_lines(self):
260
 
        """The lines of the 'other' version of the file."""
261
 
        return self._merger.get_lines(self._merger.other_tree, self.file_id)
 
67
    merge_inner(from_tree.branch, to_tree, from_tree, ignore_zero=True,
 
68
                interesting_ids=interesting_ids, this_tree=from_tree)
262
69
 
263
70
 
264
71
class Merger(object):
265
 
 
266
 
    hooks = MergeHooks()
267
 
 
268
72
    def __init__(self, this_branch, other_tree=None, base_tree=None,
269
 
                 this_tree=None, pb=None, change_reporter=None,
 
73
                 this_tree=None, pb=DummyProgress(), change_reporter=None,
270
74
                 recurse='down', revision_graph=None):
271
75
        object.__init__(self)
272
76
        self.this_branch = this_branch
285
89
        self.interesting_files = None
286
90
        self.show_base = False
287
91
        self.reprocess = False
288
 
        if pb is not None:
289
 
            warnings.warn("pb parameter to Merger() is deprecated and ignored")
 
92
        self._pb = pb
290
93
        self.pp = None
291
94
        self.recurse = recurse
292
95
        self.change_reporter = change_reporter
297
100
        self._is_criss_cross = None
298
101
        self._lca_trees = None
299
102
 
300
 
    def cache_trees_with_revision_ids(self, trees):
301
 
        """Cache any tree in trees if it has a revision_id."""
302
 
        for maybe_tree in trees:
303
 
            if maybe_tree is None:
304
 
                continue
305
 
            try:
306
 
                rev_id = maybe_tree.get_revision_id()
307
 
            except AttributeError:
308
 
                continue
309
 
            self._cached_trees[rev_id] = maybe_tree
310
 
 
311
103
    @property
312
104
    def revision_graph(self):
313
105
        if self._revision_graph is None:
340
132
                                      _set_base_is_other_ancestor)
341
133
 
342
134
    @staticmethod
343
 
    def from_uncommitted(tree, other_tree, pb=None, base_tree=None):
 
135
    def from_uncommitted(tree, other_tree, pb):
344
136
        """Return a Merger for uncommitted changes in other_tree.
345
137
 
346
138
        :param tree: The tree to merge into
347
139
        :param other_tree: The tree to get uncommitted changes from
348
140
        :param pb: A progress indicator
349
 
        :param base_tree: The basis to use for the merge.  If unspecified,
350
 
            other_tree.basis_tree() will be used.
351
141
        """
352
 
        if base_tree is None:
353
 
            base_tree = other_tree.basis_tree()
354
 
        merger = Merger(tree.branch, other_tree, base_tree, tree, pb)
 
142
        merger = Merger(tree.branch, other_tree, other_tree.basis_tree(), tree,
 
143
                        pb)
355
144
        merger.base_rev_id = merger.base_tree.get_revision_id()
356
145
        merger.other_rev_id = None
357
146
        merger.other_basis = merger.base_rev_id
375
164
                base_revision_id, tree.branch.last_revision())):
376
165
                base_revision_id = None
377
166
            else:
378
 
                trace.warning('Performing cherrypick')
 
167
                warning('Performing cherrypick')
379
168
        merger = klass.from_revision_ids(pb, tree, other_revision_id,
380
169
                                         base_revision_id, revision_graph=
381
170
                                         revision_graph)
387
176
                          tree_branch=None):
388
177
        """Return a Merger for revision-ids.
389
178
 
390
 
        :param pb: A progress indicator
391
179
        :param tree: The tree to merge changes into
392
180
        :param other: The revision-id to use as OTHER
393
181
        :param base: The revision-id to use as BASE.  If not specified, will
398
186
            not supplied, other_branch or tree.branch will be used.
399
187
        :param revision_graph: If you have a revision_graph precomputed, pass
400
188
            it in, otherwise it will be created for you.
401
 
        :param tree_branch: The branch associated with tree.  If not supplied,
402
 
            tree.branch will be used.
 
189
        :param pb: A progress indicator
403
190
        """
404
191
        if tree_branch is None:
405
192
            tree_branch = tree.branch
428
215
        return self._cached_trees[revision_id]
429
216
 
430
217
    def _get_tree(self, treespec, possible_transports=None):
 
218
        from bzrlib import workingtree
431
219
        location, revno = treespec
432
220
        if revno is None:
433
221
            tree = workingtree.WorkingTree.open_containing(location)[0]
434
222
            return tree.branch, tree
435
 
        branch = _mod_branch.Branch.open_containing(
436
 
            location, possible_transports)[0]
 
223
        branch = Branch.open_containing(location, possible_transports)[0]
437
224
        if revno == -1:
438
225
            revision_id = branch.last_revision()
439
226
        else:
440
227
            revision_id = branch.get_rev_id(revno)
441
 
        revision_id = _mod_revision.ensure_null(revision_id)
 
228
        revision_id = ensure_null(revision_id)
442
229
        return branch, self.revision_tree(revision_id, branch)
443
230
 
444
 
    @deprecated_method(deprecated_in((2, 1, 0)))
445
231
    def ensure_revision_trees(self):
446
232
        if self.this_revision_tree is None:
447
233
            self.this_basis_tree = self.revision_tree(self.this_basis)
450
236
 
451
237
        if self.other_rev_id is None:
452
238
            other_basis_tree = self.revision_tree(self.other_basis)
453
 
            if other_basis_tree.has_changes(self.other_tree):
454
 
                raise errors.WorkingTreeNotRevision(self.this_tree)
 
239
            changes = other_basis_tree.changes_from(self.other_tree)
 
240
            if changes.has_changed():
 
241
                raise WorkingTreeNotRevision(self.this_tree)
455
242
            other_rev_id = self.other_basis
456
243
            self.other_tree = other_basis_tree
457
244
 
458
 
    @deprecated_method(deprecated_in((2, 1, 0)))
459
245
    def file_revisions(self, file_id):
460
246
        self.ensure_revision_trees()
 
247
        def get_id(tree, file_id):
 
248
            revision_id = tree.inventory[file_id].revision
 
249
            return revision_id
461
250
        if self.this_rev_id is None:
462
251
            if self.this_basis_tree.get_file_sha1(file_id) != \
463
252
                self.this_tree.get_file_sha1(file_id):
464
 
                raise errors.WorkingTreeNotRevision(self.this_tree)
 
253
                raise WorkingTreeNotRevision(self.this_tree)
465
254
 
466
255
        trees = (self.this_basis_tree, self.other_tree)
467
 
        return [tree.get_file_revision(file_id) for tree in trees]
 
256
        return [get_id(tree, file_id) for tree in trees]
468
257
 
469
 
    @deprecated_method(deprecated_in((2, 1, 0)))
470
258
    def check_basis(self, check_clean, require_commits=True):
471
259
        if self.this_basis is None and require_commits is True:
472
 
            raise errors.BzrCommandError(
473
 
                "This branch has no commits."
474
 
                " (perhaps you would prefer 'bzr pull')")
 
260
            raise BzrCommandError("This branch has no commits."
 
261
                                  " (perhaps you would prefer 'bzr pull')")
475
262
        if check_clean:
476
263
            self.compare_basis()
477
264
            if self.this_basis != self.this_rev_id:
478
265
                raise errors.UncommittedChanges(self.this_tree)
479
266
 
480
 
    @deprecated_method(deprecated_in((2, 1, 0)))
481
267
    def compare_basis(self):
482
268
        try:
483
269
            basis_tree = self.revision_tree(self.this_tree.last_revision())
484
270
        except errors.NoSuchRevision:
485
271
            basis_tree = self.this_tree.basis_tree()
486
 
        if not self.this_tree.has_changes(basis_tree):
 
272
        changes = self.this_tree.changes_from(basis_tree)
 
273
        if not changes.has_changed():
487
274
            self.this_rev_id = self.this_basis
488
275
 
489
276
    def set_interesting_files(self, file_list):
490
277
        self.interesting_files = file_list
491
278
 
492
279
    def set_pending(self):
493
 
        if (not self.base_is_ancestor or not self.base_is_other_ancestor
494
 
            or self.other_rev_id is None):
 
280
        if not self.base_is_ancestor or not self.base_is_other_ancestor or self.other_rev_id is None:
495
281
            return
496
282
        self._add_parent()
497
283
 
498
284
    def _add_parent(self):
499
285
        new_parents = self.this_tree.get_parent_ids() + [self.other_rev_id]
500
286
        new_parent_trees = []
501
 
        operation = cleanup.OperationWithCleanups(
502
 
            self.this_tree.set_parent_trees)
503
287
        for revision_id in new_parents:
504
288
            try:
505
289
                tree = self.revision_tree(revision_id)
507
291
                tree = None
508
292
            else:
509
293
                tree.lock_read()
510
 
                operation.add_cleanup(tree.unlock)
511
294
            new_parent_trees.append((revision_id, tree))
512
 
        operation.run_simple(new_parent_trees, allow_leftmost_as_ghost=True)
 
295
        try:
 
296
            self.this_tree.set_parent_trees(new_parent_trees,
 
297
                                            allow_leftmost_as_ghost=True)
 
298
        finally:
 
299
            for _revision_id, tree in new_parent_trees:
 
300
                if tree is not None:
 
301
                    tree.unlock()
513
302
 
514
303
    def set_other(self, other_revision, possible_transports=None):
515
304
        """Set the revision and tree to merge from.
524
313
            self.other_rev_id = _mod_revision.ensure_null(
525
314
                self.other_branch.last_revision())
526
315
            if _mod_revision.is_null(self.other_rev_id):
527
 
                raise errors.NoCommits(self.other_branch)
 
316
                raise NoCommits(self.other_branch)
528
317
            self.other_basis = self.other_rev_id
529
318
        elif other_revision[1] is not None:
530
319
            self.other_rev_id = self.other_branch.get_rev_id(other_revision[1])
533
322
            self.other_rev_id = None
534
323
            self.other_basis = self.other_branch.last_revision()
535
324
            if self.other_basis is None:
536
 
                raise errors.NoCommits(self.other_branch)
 
325
                raise NoCommits(self.other_branch)
537
326
        if self.other_rev_id is not None:
538
327
            self._cached_trees[self.other_rev_id] = self.other_tree
539
328
        self._maybe_fetch(self.other_branch,self.this_branch, self.other_basis)
566
355
            target.fetch(source, revision_id)
567
356
 
568
357
    def find_base(self):
569
 
        revisions = [_mod_revision.ensure_null(self.this_basis),
570
 
                     _mod_revision.ensure_null(self.other_basis)]
571
 
        if _mod_revision.NULL_REVISION in revisions:
572
 
            self.base_rev_id = _mod_revision.NULL_REVISION
 
358
        revisions = [ensure_null(self.this_basis),
 
359
                     ensure_null(self.other_basis)]
 
360
        if NULL_REVISION in revisions:
 
361
            self.base_rev_id = NULL_REVISION
573
362
            self.base_tree = self.revision_tree(self.base_rev_id)
574
363
            self._is_criss_cross = False
575
364
        else:
576
365
            lcas = self.revision_graph.find_lca(revisions[0], revisions[1])
577
366
            self._is_criss_cross = False
578
367
            if len(lcas) == 0:
579
 
                self.base_rev_id = _mod_revision.NULL_REVISION
 
368
                self.base_rev_id = NULL_REVISION
580
369
            elif len(lcas) == 1:
581
370
                self.base_rev_id = list(lcas)[0]
582
371
            else: # len(lcas) > 1
583
 
                self._is_criss_cross = True
584
372
                if len(lcas) > 2:
585
373
                    # find_unique_lca can only handle 2 nodes, so we have to
586
374
                    # start back at the beginning. It is a shame to traverse
591
379
                else:
592
380
                    self.base_rev_id = self.revision_graph.find_unique_lca(
593
381
                                            *lcas)
594
 
                sorted_lca_keys = self.revision_graph.find_merge_order(                
595
 
                    revisions[0], lcas)
596
 
                if self.base_rev_id == _mod_revision.NULL_REVISION:
597
 
                    self.base_rev_id = sorted_lca_keys[0]
598
 
                
599
 
            if self.base_rev_id == _mod_revision.NULL_REVISION:
600
 
                raise errors.UnrelatedBranches()
 
382
                self._is_criss_cross = True
 
383
            if self.base_rev_id == NULL_REVISION:
 
384
                raise UnrelatedBranches()
601
385
            if self._is_criss_cross:
602
 
                trace.warning('Warning: criss-cross merge encountered.  See bzr'
603
 
                              ' help criss-cross.')
604
 
                trace.mutter('Criss-cross lcas: %r' % lcas)
605
 
                if self.base_rev_id in lcas:
606
 
                    trace.mutter('Unable to find unique lca. '
607
 
                                 'Fallback %r as best option.' % self.base_rev_id)
608
 
                interesting_revision_ids = set(lcas)
609
 
                interesting_revision_ids.add(self.base_rev_id)
 
386
                warning('Warning: criss-cross merge encountered.  See bzr'
 
387
                        ' help criss-cross.')
 
388
                interesting_revision_ids = [self.base_rev_id]
 
389
                interesting_revision_ids.extend(lcas)
610
390
                interesting_trees = dict((t.get_revision_id(), t)
611
391
                    for t in self.this_branch.repository.revision_trees(
612
392
                        interesting_revision_ids))
613
393
                self._cached_trees.update(interesting_trees)
614
 
                if self.base_rev_id in lcas:
615
 
                    self.base_tree = interesting_trees[self.base_rev_id]
616
 
                else:
617
 
                    self.base_tree = interesting_trees.pop(self.base_rev_id)
 
394
                self.base_tree = interesting_trees.pop(self.base_rev_id)
 
395
                sorted_lca_keys = self.revision_graph.find_merge_order(
 
396
                    revisions[0], lcas)
618
397
                self._lca_trees = [interesting_trees[key]
619
398
                                   for key in sorted_lca_keys]
620
399
            else:
621
400
                self.base_tree = self.revision_tree(self.base_rev_id)
622
401
        self.base_is_ancestor = True
623
402
        self.base_is_other_ancestor = True
624
 
        trace.mutter('Base revid: %r' % self.base_rev_id)
625
403
 
626
404
    def set_base(self, base_revision):
627
405
        """Set the base revision to use for the merge.
628
406
 
629
407
        :param base_revision: A 2-list containing a path and revision number.
630
408
        """
631
 
        trace.mutter("doing merge() with no base_revision specified")
 
409
        mutter("doing merge() with no base_revision specified")
632
410
        if base_revision == [None, None]:
633
411
            self.find_base()
634
412
        else:
647
425
                  'other_tree': self.other_tree,
648
426
                  'interesting_ids': self.interesting_ids,
649
427
                  'interesting_files': self.interesting_files,
650
 
                  'this_branch': self.this_branch,
 
428
                  'pp': self.pp,
651
429
                  'do_merge': False}
652
430
        if self.merge_type.requires_base:
653
431
            kwargs['base_tree'] = self.base_tree
654
432
        if self.merge_type.supports_reprocess:
655
433
            kwargs['reprocess'] = self.reprocess
656
434
        elif self.reprocess:
657
 
            raise errors.BzrError(
658
 
                "Conflict reduction is not supported for merge"
659
 
                " type %s." % self.merge_type)
 
435
            raise BzrError("Conflict reduction is not supported for merge"
 
436
                                  " type %s." % self.merge_type)
660
437
        if self.merge_type.supports_show_base:
661
438
            kwargs['show_base'] = self.show_base
662
439
        elif self.show_base:
663
 
            raise errors.BzrError("Showing base is not supported for this"
664
 
                                  " merge type. %s" % self.merge_type)
 
440
            raise BzrError("Showing base is not supported for this"
 
441
                           " merge type. %s" % self.merge_type)
665
442
        if (not getattr(self.merge_type, 'supports_reverse_cherrypick', True)
666
443
            and not self.base_is_other_ancestor):
667
444
            raise errors.CannotReverseCherrypick()
671
448
        if self._is_criss_cross and getattr(self.merge_type,
672
449
                                            'supports_lca_trees', False):
673
450
            kwargs['lca_trees'] = self._lca_trees
674
 
        return self.merge_type(pb=None,
 
451
        return self.merge_type(pb=self._pb,
675
452
                               change_reporter=self.change_reporter,
676
453
                               **kwargs)
677
454
 
678
 
    def _do_merge_to(self):
679
 
        merge = self.make_merger()
680
 
        if self.other_branch is not None:
681
 
            self.other_branch.update_references(self.this_branch)
 
455
    def _do_merge_to(self, merge):
682
456
        merge.do_merge()
683
457
        if self.recurse == 'down':
684
458
            for relpath, file_id in self.this_tree.iter_references():
696
470
                    sub_tree.branch.repository.revision_tree(base_revision)
697
471
                sub_merge.base_rev_id = base_revision
698
472
                sub_merge.do_merge()
699
 
        return merge
700
 
 
 
473
        
701
474
    def do_merge(self):
702
 
        operation = cleanup.OperationWithCleanups(self._do_merge_to)
703
475
        self.this_tree.lock_tree_write()
704
 
        operation.add_cleanup(self.this_tree.unlock)
705
 
        if self.base_tree is not None:
706
 
            self.base_tree.lock_read()
707
 
            operation.add_cleanup(self.base_tree.unlock)
708
 
        if self.other_tree is not None:
709
 
            self.other_tree.lock_read()
710
 
            operation.add_cleanup(self.other_tree.unlock)
711
 
        merge = operation.run_simple()
 
476
        try:
 
477
            if self.base_tree is not None:
 
478
                self.base_tree.lock_read()
 
479
            try:
 
480
                if self.other_tree is not None:
 
481
                    self.other_tree.lock_read()
 
482
                try:
 
483
                    merge = self.make_merger()
 
484
                    self._do_merge_to(merge)
 
485
                finally:
 
486
                    if self.other_tree is not None:
 
487
                        self.other_tree.unlock()
 
488
            finally:
 
489
                if self.base_tree is not None:
 
490
                    self.base_tree.unlock()
 
491
        finally:
 
492
            self.this_tree.unlock()
712
493
        if len(merge.cooked_conflicts) == 0:
713
 
            if not self.ignore_zero and not trace.is_quiet():
714
 
                trace.note("All changes applied successfully.")
 
494
            if not self.ignore_zero and not is_quiet():
 
495
                note("All changes applied successfully.")
715
496
        else:
716
 
            trace.note("%d conflicts encountered."
717
 
                       % len(merge.cooked_conflicts))
 
497
            note("%d conflicts encountered." % len(merge.cooked_conflicts))
718
498
 
719
499
        return len(merge.cooked_conflicts)
720
500
 
747
527
    winner_idx = {"this": 2, "other": 1, "conflict": 1}
748
528
    supports_lca_trees = True
749
529
 
750
 
    def __init__(self, working_tree, this_tree, base_tree, other_tree,
 
530
    def __init__(self, working_tree, this_tree, base_tree, other_tree, 
751
531
                 interesting_ids=None, reprocess=False, show_base=False,
752
 
                 pb=None, pp=None, change_reporter=None,
 
532
                 pb=DummyProgress(), pp=None, change_reporter=None,
753
533
                 interesting_files=None, do_merge=True,
754
 
                 cherrypick=False, lca_trees=None, this_branch=None):
 
534
                 cherrypick=False, lca_trees=None):
755
535
        """Initialize the merger object and perform the merge.
756
536
 
757
537
        :param working_tree: The working tree to apply the merge to
758
538
        :param this_tree: The local tree in the merge operation
759
539
        :param base_tree: The common tree in the merge operation
760
 
        :param other_tree: The other tree to merge changes from
761
 
        :param this_branch: The branch associated with this_tree.  Defaults to
762
 
            this_tree.branch if not supplied.
 
540
        :param other_tree: The other other tree to merge changes from
763
541
        :param interesting_ids: The file_ids of files that should be
764
542
            participate in the merge.  May not be combined with
765
543
            interesting_files.
766
544
        :param: reprocess If True, perform conflict-reduction processing.
767
545
        :param show_base: If True, show the base revision in text conflicts.
768
546
            (incompatible with reprocess)
769
 
        :param pb: ignored
 
547
        :param pb: A Progress bar
770
548
        :param pp: A ProgressPhase object
771
549
        :param change_reporter: An object that should report changes made
772
550
        :param interesting_files: The tree-relative paths of files that should
783
561
        if interesting_files is not None and interesting_ids is not None:
784
562
            raise ValueError(
785
563
                'specify either interesting_ids or interesting_files')
786
 
        if this_branch is None:
787
 
            this_branch = this_tree.branch
788
564
        self.interesting_ids = interesting_ids
789
565
        self.interesting_files = interesting_files
790
566
        self.this_tree = working_tree
791
567
        self.base_tree = base_tree
792
568
        self.other_tree = other_tree
793
 
        self.this_branch = this_branch
794
569
        self._raw_conflicts = []
795
570
        self.cooked_conflicts = []
796
571
        self.reprocess = reprocess
801
576
        # making sure we haven't missed any corner cases.
802
577
        # if lca_trees is None:
803
578
        #     self._lca_trees = [self.base_tree]
 
579
        self.pb = pb
 
580
        self.pp = pp
804
581
        self.change_reporter = change_reporter
805
582
        self.cherrypick = cherrypick
 
583
        if self.pp is None:
 
584
            self.pp = ProgressPhase("Merge phase", 3, self.pb)
806
585
        if do_merge:
807
586
            self.do_merge()
808
 
        if pp is not None:
809
 
            warnings.warn("pp argument to Merge3Merger is deprecated")
810
 
        if pb is not None:
811
 
            warnings.warn("pb argument to Merge3Merger is deprecated")
812
587
 
813
588
    def do_merge(self):
814
 
        operation = cleanup.OperationWithCleanups(self._do_merge)
815
589
        self.this_tree.lock_tree_write()
816
 
        operation.add_cleanup(self.this_tree.unlock)
817
590
        self.base_tree.lock_read()
818
 
        operation.add_cleanup(self.base_tree.unlock)
819
591
        self.other_tree.lock_read()
820
 
        operation.add_cleanup(self.other_tree.unlock)
821
 
        operation.run()
822
 
 
823
 
    def _do_merge(self, operation):
824
 
        self.tt = transform.TreeTransform(self.this_tree, None)
825
 
        operation.add_cleanup(self.tt.finalize)
826
 
        self._compute_transform()
827
 
        results = self.tt.apply(no_conflicts=True)
828
 
        self.write_modified(results)
 
592
        self.tt = TreeTransform(self.this_tree, self.pb)
829
593
        try:
830
 
            self.this_tree.add_conflicts(self.cooked_conflicts)
831
 
        except errors.UnsupportedOperation:
832
 
            pass
 
594
            self.pp.next_phase()
 
595
            self._compute_transform()
 
596
            self.pp.next_phase()
 
597
            results = self.tt.apply(no_conflicts=True)
 
598
            self.write_modified(results)
 
599
            try:
 
600
                self.this_tree.add_conflicts(self.cooked_conflicts)
 
601
            except UnsupportedOperation:
 
602
                pass
 
603
        finally:
 
604
            self.tt.finalize()
 
605
            self.other_tree.unlock()
 
606
            self.base_tree.unlock()
 
607
            self.this_tree.unlock()
 
608
            self.pb.clear()
833
609
 
834
610
    def make_preview_transform(self):
835
 
        operation = cleanup.OperationWithCleanups(self._make_preview_transform)
836
611
        self.base_tree.lock_read()
837
 
        operation.add_cleanup(self.base_tree.unlock)
838
612
        self.other_tree.lock_read()
839
 
        operation.add_cleanup(self.other_tree.unlock)
840
 
        return operation.run_simple()
841
 
 
842
 
    def _make_preview_transform(self):
843
 
        self.tt = transform.TransformPreview(self.this_tree)
844
 
        self._compute_transform()
 
613
        self.tt = TransformPreview(self.this_tree)
 
614
        try:
 
615
            self.pp.next_phase()
 
616
            self._compute_transform()
 
617
            self.pp.next_phase()
 
618
        finally:
 
619
            self.other_tree.unlock()
 
620
            self.base_tree.unlock()
 
621
            self.pb.clear()
845
622
        return self.tt
846
623
 
847
624
    def _compute_transform(self):
853
630
            resolver = self._lca_multi_way
854
631
        child_pb = ui.ui_factory.nested_progress_bar()
855
632
        try:
856
 
            factories = Merger.hooks['merge_file_content']
857
 
            hooks = [factory(self) for factory in factories] + [self]
858
 
            self.active_hooks = [hook for hook in hooks if hook is not None]
859
633
            for num, (file_id, changed, parents3, names3,
860
634
                      executable3) in enumerate(entries):
861
635
                child_pb.update('Preparing file merge', num, len(entries))
862
636
                self._merge_names(file_id, parents3, names3, resolver=resolver)
863
637
                if changed:
864
 
                    file_status = self._do_merge_contents(file_id)
 
638
                    file_status = self.merge_contents(file_id)
865
639
                else:
866
640
                    file_status = 'unmodified'
867
641
                self._merge_executable(file_id,
868
642
                    executable3, file_status, resolver=resolver)
869
643
        finally:
870
644
            child_pb.finished()
871
 
        self.tt.fixup_new_roots()
872
 
        self._finish_computing_transform()
873
 
 
874
 
    def _finish_computing_transform(self):
875
 
        """Finalize the transform and report the changes.
876
 
 
877
 
        This is the second half of _compute_transform.
878
 
        """
 
645
        self.fix_root()
 
646
        self.pp.next_phase()
879
647
        child_pb = ui.ui_factory.nested_progress_bar()
880
648
        try:
881
 
            fs_conflicts = transform.resolve_conflicts(self.tt, child_pb,
882
 
                lambda t, c: transform.conflict_pass(t, c, self.other_tree))
 
649
            fs_conflicts = resolve_conflicts(self.tt, child_pb,
 
650
                lambda t, c: conflict_pass(t, c, self.other_tree))
883
651
        finally:
884
652
            child_pb.finished()
885
653
        if self.change_reporter is not None:
888
656
                self.tt.iter_changes(), self.change_reporter)
889
657
        self.cook_conflicts(fs_conflicts)
890
658
        for conflict in self.cooked_conflicts:
891
 
            trace.warning(unicode(conflict))
 
659
            warning(conflict)
892
660
 
893
661
    def _entries3(self):
894
662
        """Gather data about files modified between three trees.
901
669
        """
902
670
        result = []
903
671
        iterator = self.other_tree.iter_changes(self.base_tree,
904
 
                specific_files=self.interesting_files,
 
672
                include_unchanged=True, specific_files=self.interesting_files,
905
673
                extra_trees=[self.this_tree])
906
674
        this_entries = dict((e.file_id, e) for p, e in
907
675
                            self.this_tree.iter_entries_by_dir(
933
701
        it then compares with THIS and BASE.
934
702
 
935
703
        For the multi-valued entries, the format will be (BASE, [lca1, lca2])
936
 
 
937
 
        :return: [(file_id, changed, parents, names, executable)], where:
938
 
 
939
 
            * file_id: Simple file_id of the entry
940
 
            * changed: Boolean, True if the kind or contents changed else False
941
 
            * parents: ((base, [parent_id, in, lcas]), parent_id_other,
942
 
                        parent_id_this)
943
 
            * names:   ((base, [name, in, lcas]), name_in_other, name_in_this)
944
 
            * executable: ((base, [exec, in, lcas]), exec_in_other,
945
 
                        exec_in_this)
 
704
        :return: [(file_id, changed, parents, names, executable)]
 
705
            file_id     Simple file_id of the entry
 
706
            changed     Boolean, True if the kind or contents changed
 
707
                        else False
 
708
            parents     ((base, [parent_id, in, lcas]), parent_id_other,
 
709
                         parent_id_this)
 
710
            names       ((base, [name, in, lcas]), name_in_other, name_in_this)
 
711
            executable  ((base, [exec, in, lcas]), exec_in_other, exec_in_this)
946
712
        """
947
713
        if self.interesting_files is not None:
948
714
            lookup_trees = [self.this_tree, self.base_tree]
990
756
                else:
991
757
                    lca_entries.append(lca_ie)
992
758
 
993
 
            if base_inventory.has_id(file_id):
 
759
            if file_id in base_inventory:
994
760
                base_ie = base_inventory[file_id]
995
761
            else:
996
762
                base_ie = _none_entry
997
763
 
998
 
            if this_inventory.has_id(file_id):
 
764
            if file_id in this_inventory:
999
765
                this_ie = this_inventory[file_id]
1000
766
            else:
1001
767
                this_ie = _none_entry
1023
789
            content_changed = True
1024
790
            if kind_winner == 'this':
1025
791
                # No kind change in OTHER, see if there are *any* changes
1026
 
                if other_ie.kind == 'directory':
 
792
                if other_ie.kind == None:
 
793
                    # No content and 'this' wins the kind, so skip this?
 
794
                    # continue
 
795
                    pass
 
796
                elif other_ie.kind == 'directory':
1027
797
                    if parent_id_winner == 'this' and name_winner == 'this':
1028
798
                        # No change for this directory in OTHER, skip
1029
799
                        continue
1030
800
                    content_changed = False
1031
 
                elif other_ie.kind is None or other_ie.kind == 'file':
 
801
                elif other_ie.kind == 'file':
1032
802
                    def get_sha1(ie, tree):
1033
803
                        if ie.kind != 'file':
1034
804
                            return None
1081
851
                        continue
1082
852
                else:
1083
853
                    raise AssertionError('unhandled kind: %s' % other_ie.kind)
 
854
                # XXX: We need to handle kind == 'symlink'
1084
855
 
1085
856
            # If we have gotten this far, that means something has changed
1086
857
            result.append((file_id, content_changed,
1093
864
                          ))
1094
865
        return result
1095
866
 
1096
 
    @deprecated_method(deprecated_in((2, 4, 0)))
 
867
 
1097
868
    def fix_root(self):
1098
 
        if self.tt.final_kind(self.tt.root) is None:
 
869
        try:
 
870
            self.tt.final_kind(self.tt.root)
 
871
        except NoSuchFile:
1099
872
            self.tt.cancel_deletion(self.tt.root)
1100
873
        if self.tt.final_file_id(self.tt.root) is None:
1101
 
            self.tt.version_file(self.tt.tree_file_id(self.tt.root),
 
874
            self.tt.version_file(self.tt.tree_file_id(self.tt.root), 
1102
875
                                 self.tt.root)
 
876
        if self.other_tree.inventory.root is None:
 
877
            return
1103
878
        other_root_file_id = self.other_tree.get_root_id()
1104
 
        if other_root_file_id is None:
1105
 
            return
1106
879
        other_root = self.tt.trans_id_file_id(other_root_file_id)
1107
880
        if other_root == self.tt.root:
1108
881
            return
1109
 
        if self.this_tree.inventory.has_id(
1110
 
            self.other_tree.inventory.root.file_id):
1111
 
            # the other tree's root is a non-root in the current tree (as
1112
 
            # when a previously unrelated branch is merged into another)
1113
 
            return
1114
 
        if self.tt.final_kind(other_root) is not None:
1115
 
            other_root_is_present = True
1116
 
        else:
1117
 
            # other_root doesn't have a physical representation. We still need
1118
 
            # to move any references to the actual root of the tree.
1119
 
            other_root_is_present = False
1120
 
        # 'other_tree.inventory.root' is not present in this tree. We are
1121
 
        # calling adjust_path for children which *want* to be present with a
1122
 
        # correct place to go.
1123
 
        for _, child in self.other_tree.inventory.root.children.iteritems():
 
882
        try:
 
883
            self.tt.final_kind(other_root)
 
884
        except NoSuchFile:
 
885
            return
 
886
        if self.other_tree.inventory.root.file_id in self.this_tree.inventory:
 
887
            # the other tree's root is a non-root in the current tree
 
888
            return
 
889
        self.reparent_children(self.other_tree.inventory.root, self.tt.root)
 
890
        self.tt.cancel_creation(other_root)
 
891
        self.tt.cancel_versioning(other_root)
 
892
 
 
893
    def reparent_children(self, ie, target):
 
894
        for thing, child in ie.children.iteritems():
1124
895
            trans_id = self.tt.trans_id_file_id(child.file_id)
1125
 
            if not other_root_is_present:
1126
 
                if self.tt.final_kind(trans_id) is not None:
1127
 
                    # The item exist in the final tree and has a defined place
1128
 
                    # to go already.
1129
 
                    continue
1130
 
            # Move the item into the root
1131
 
            try:
1132
 
                final_name = self.tt.final_name(trans_id)
1133
 
            except errors.NoFinalPath:
1134
 
                # This file is not present anymore, ignore it.
1135
 
                continue
1136
 
            self.tt.adjust_path(final_name, self.tt.root, trans_id)
1137
 
        if other_root_is_present:
1138
 
            self.tt.cancel_creation(other_root)
1139
 
            self.tt.cancel_versioning(other_root)
 
896
            self.tt.adjust_path(self.tt.final_name(trans_id), target, trans_id)
1140
897
 
1141
898
    def write_modified(self, results):
1142
899
        modified_hashes = {}
1163
920
        if entry is None:
1164
921
            return None
1165
922
        return entry.name
1166
 
 
 
923
    
1167
924
    @staticmethod
1168
925
    def contents_sha1(tree, file_id):
1169
926
        """Determine the sha1 of the file contents (used as a key method)."""
1170
 
        if not tree.has_id(file_id):
 
927
        if file_id not in tree:
1171
928
            return None
1172
929
        return tree.get_file_sha1(file_id)
1173
930
 
1174
931
    @staticmethod
1175
932
    def executable(tree, file_id):
1176
933
        """Determine the executability of a file-id (used as a key method)."""
1177
 
        if not tree.has_id(file_id):
 
934
        if file_id not in tree:
1178
935
            return None
1179
936
        if tree.kind(file_id) != "file":
1180
937
            return False
1183
940
    @staticmethod
1184
941
    def kind(tree, file_id):
1185
942
        """Determine the kind of a file-id (used as a key method)."""
1186
 
        if not tree.has_id(file_id):
 
943
        if file_id not in tree:
1187
944
            return None
1188
945
        return tree.kind(file_id)
1189
946
 
1190
947
    @staticmethod
1191
948
    def _three_way(base, other, this):
 
949
        #if base == other, either they all agree, or only THIS has changed.
1192
950
        if base == other:
1193
 
            # if 'base == other', either they all agree, or only 'this' has
1194
 
            # changed.
1195
951
            return 'this'
1196
952
        elif this not in (base, other):
1197
 
            # 'this' is neither 'base' nor 'other', so both sides changed
1198
953
            return 'conflict'
 
954
        # "Ambiguous clean merge" -- both sides have made the same change.
1199
955
        elif this == other:
1200
 
            # "Ambiguous clean merge" -- both sides have made the same change.
1201
956
            return "this"
 
957
        # this == base: only other has changed.
1202
958
        else:
1203
 
            # this == base: only other has changed.
1204
959
            return "other"
1205
960
 
1206
961
    @staticmethod
1219
974
        :return: 'this', 'other', or 'conflict' depending on whether an entry
1220
975
            changed or not.
1221
976
        """
1222
 
        # See doc/developers/lca_tree_merging.txt for details about this
 
977
        # See doc/developers/lca_merge_resolution.txt for details about this
1223
978
        # algorithm.
1224
979
        if other == this:
1225
980
            # Either Ambiguously clean, or nothing was actually changed. We
1250
1005
                # only has an lca value
1251
1006
                return 'other'
1252
1007
 
1253
 
        # At this point, the lcas disagree, and the tip disagree
 
1008
        # At this point, the lcas disagree, and the tips disagree
1254
1009
        return 'conflict'
1255
1010
 
1256
1011
    @staticmethod
1257
 
    @deprecated_method(deprecated_in((2, 2, 0)))
1258
1012
    def scalar_three_way(this_tree, base_tree, other_tree, file_id, key):
1259
1013
        """Do a three-way test on a scalar.
1260
1014
        Return "this", "other" or "conflict", depending whether a value wins.
1275
1029
 
1276
1030
    def merge_names(self, file_id):
1277
1031
        def get_entry(tree):
1278
 
            if tree.has_id(file_id):
 
1032
            if file_id in tree.inventory:
1279
1033
                return tree.inventory[file_id]
1280
1034
            else:
1281
1035
                return None
1310
1064
                parent_id_winner = "other"
1311
1065
        if name_winner == "this" and parent_id_winner == "this":
1312
1066
            return
1313
 
        if name_winner == 'conflict' or parent_id_winner == 'conflict':
1314
 
            # Creating helpers (.OTHER or .THIS) here cause problems down the
1315
 
            # road if a ContentConflict needs to be created so we should not do
1316
 
            # that
1317
 
            trans_id = self.tt.trans_id_file_id(file_id)
1318
 
            self._raw_conflicts.append(('path conflict', trans_id, file_id,
1319
 
                                        this_parent, this_name,
1320
 
                                        other_parent, other_name))
1321
 
        if not self.other_tree.has_id(file_id):
1322
 
            # it doesn't matter whether the result was 'other' or
1323
 
            # 'conflict'-- if it has no file id, we leave it alone.
 
1067
        if name_winner == "conflict":
 
1068
            trans_id = self.tt.trans_id_file_id(file_id)
 
1069
            self._raw_conflicts.append(('name conflict', trans_id, 
 
1070
                                        this_name, other_name))
 
1071
        if parent_id_winner == "conflict":
 
1072
            trans_id = self.tt.trans_id_file_id(file_id)
 
1073
            self._raw_conflicts.append(('parent conflict', trans_id, 
 
1074
                                        this_parent, other_parent))
 
1075
        if other_name is None:
 
1076
            # it doesn't matter whether the result was 'other' or 
 
1077
            # 'conflict'-- if there's no 'other', we leave it alone.
1324
1078
            return
 
1079
        # if we get here, name_winner and parent_winner are set to safe values.
 
1080
        trans_id = self.tt.trans_id_file_id(file_id)
1325
1081
        parent_id = parents[self.winner_idx[parent_id_winner]]
1326
 
        name = names[self.winner_idx[name_winner]]
1327
 
        if parent_id is not None or name is not None:
1328
 
            # if we get here, name_winner and parent_winner are set to safe
1329
 
            # values.
1330
 
            if parent_id is None and name is not None:
1331
 
                # if parent_id is None and name is non-None, current file is
1332
 
                # the tree root.
1333
 
                if names[self.winner_idx[parent_id_winner]] != '':
1334
 
                    raise AssertionError(
1335
 
                        'File looks like a root, but named %s' %
1336
 
                        names[self.winner_idx[parent_id_winner]])
1337
 
                parent_trans_id = transform.ROOT_PARENT
1338
 
            else:
1339
 
                parent_trans_id = self.tt.trans_id_file_id(parent_id)
1340
 
            self.tt.adjust_path(name, parent_trans_id,
1341
 
                                self.tt.trans_id_file_id(file_id))
 
1082
        if parent_id is not None:
 
1083
            parent_trans_id = self.tt.trans_id_file_id(parent_id)
 
1084
            self.tt.adjust_path(names[self.winner_idx[name_winner]],
 
1085
                                parent_trans_id, trans_id)
1342
1086
 
1343
 
    def _do_merge_contents(self, file_id):
1344
 
        """Performs a merge on file_id contents."""
 
1087
    def merge_contents(self, file_id):
 
1088
        """Performa a merge on file_id contents."""
1345
1089
        def contents_pair(tree):
1346
 
            if not tree.has_id(file_id):
 
1090
            if file_id not in tree:
1347
1091
                return (None, None)
1348
1092
            kind = tree.kind(file_id)
1349
1093
            if kind == "file":
1354
1098
                contents = None
1355
1099
            return kind, contents
1356
1100
 
 
1101
        def contents_conflict():
 
1102
            trans_id = self.tt.trans_id_file_id(file_id)
 
1103
            name = self.tt.final_name(trans_id)
 
1104
            parent_id = self.tt.final_parent(trans_id)
 
1105
            if file_id in self.this_tree.inventory:
 
1106
                self.tt.unversion_file(trans_id)
 
1107
                if file_id in self.this_tree:
 
1108
                    self.tt.delete_contents(trans_id)
 
1109
            file_group = self._dump_conflicts(name, parent_id, file_id, 
 
1110
                                              set_version=True)
 
1111
            self._raw_conflicts.append(('contents conflict', file_group))
 
1112
 
1357
1113
        # See SPOT run.  run, SPOT, run.
1358
1114
        # So we're not QUITE repeating ourselves; we do tricky things with
1359
1115
        # file kind...
1360
1116
        base_pair = contents_pair(self.base_tree)
1361
1117
        other_pair = contents_pair(self.other_tree)
1362
 
        if self._lca_trees:
1363
 
            this_pair = contents_pair(self.this_tree)
1364
 
            lca_pairs = [contents_pair(tree) for tree in self._lca_trees]
1365
 
            winner = self._lca_multi_way((base_pair, lca_pairs), other_pair,
1366
 
                                         this_pair, allow_overriding_lca=False)
1367
 
        else:
1368
 
            if base_pair == other_pair:
1369
 
                winner = 'this'
1370
 
            else:
1371
 
                # We delayed evaluating this_pair as long as we can to avoid
1372
 
                # unnecessary sha1 calculation
1373
 
                this_pair = contents_pair(self.this_tree)
1374
 
                winner = self._three_way(base_pair, other_pair, this_pair)
1375
 
        if winner == 'this':
1376
 
            # No interesting changes introduced by OTHER
1377
 
            return "unmodified"
1378
 
        # We have a hypothetical conflict, but if we have files, then we
1379
 
        # can try to merge the content
1380
 
        trans_id = self.tt.trans_id_file_id(file_id)
1381
 
        params = MergeHookParams(self, file_id, trans_id, this_pair[0],
1382
 
            other_pair[0], winner)
1383
 
        hooks = self.active_hooks
1384
 
        hook_status = 'not_applicable'
1385
 
        for hook in hooks:
1386
 
            hook_status, lines = hook.merge_contents(params)
1387
 
            if hook_status != 'not_applicable':
1388
 
                # Don't try any more hooks, this one applies.
1389
 
                break
1390
 
        result = "modified"
1391
 
        if hook_status == 'not_applicable':
1392
 
            # This is a contents conflict, because none of the available
1393
 
            # functions could merge it.
1394
 
            result = None
1395
 
            name = self.tt.final_name(trans_id)
1396
 
            parent_id = self.tt.final_parent(trans_id)
1397
 
            if self.this_tree.has_id(file_id):
1398
 
                self.tt.unversion_file(trans_id)
1399
 
            file_group = self._dump_conflicts(name, parent_id, file_id,
1400
 
                                              set_version=True)
1401
 
            self._raw_conflicts.append(('contents conflict', file_group))
1402
 
        elif hook_status == 'success':
1403
 
            self.tt.create_file(lines, trans_id)
1404
 
        elif hook_status == 'conflicted':
1405
 
            # XXX: perhaps the hook should be able to provide
1406
 
            # the BASE/THIS/OTHER files?
1407
 
            self.tt.create_file(lines, trans_id)
1408
 
            self._raw_conflicts.append(('text conflict', trans_id))
1409
 
            name = self.tt.final_name(trans_id)
1410
 
            parent_id = self.tt.final_parent(trans_id)
1411
 
            self._dump_conflicts(name, parent_id, file_id)
1412
 
        elif hook_status == 'delete':
1413
 
            self.tt.unversion_file(trans_id)
1414
 
            result = "deleted"
1415
 
        elif hook_status == 'done':
1416
 
            # The hook function did whatever it needs to do directly, no
1417
 
            # further action needed here.
1418
 
            pass
1419
 
        else:
1420
 
            raise AssertionError('unknown hook_status: %r' % (hook_status,))
1421
 
        if not self.this_tree.has_id(file_id) and result == "modified":
1422
 
            self.tt.version_file(file_id, trans_id)
1423
 
        # The merge has been performed, so the old contents should not be
1424
 
        # retained.
1425
 
        self.tt.delete_contents(trans_id)
1426
 
        return result
1427
 
 
1428
 
    def _default_other_winner_merge(self, merge_hook_params):
1429
 
        """Replace this contents with other."""
1430
 
        file_id = merge_hook_params.file_id
1431
 
        trans_id = merge_hook_params.trans_id
1432
 
        file_in_this = self.this_tree.has_id(file_id)
1433
 
        if self.other_tree.has_id(file_id):
1434
 
            # OTHER changed the file
1435
 
            wt = self.this_tree
1436
 
            if wt.supports_content_filtering():
1437
 
                # We get the path from the working tree if it exists.
1438
 
                # That fails though when OTHER is adding a file, so
1439
 
                # we fall back to the other tree to find the path if
1440
 
                # it doesn't exist locally.
1441
 
                try:
1442
 
                    filter_tree_path = wt.id2path(file_id)
1443
 
                except errors.NoSuchId:
1444
 
                    filter_tree_path = self.other_tree.id2path(file_id)
1445
 
            else:
1446
 
                # Skip the id2path lookup for older formats
1447
 
                filter_tree_path = None
1448
 
            transform.create_from_tree(self.tt, trans_id,
1449
 
                             self.other_tree, file_id,
1450
 
                             filter_tree_path=filter_tree_path)
1451
 
            return 'done', None
1452
 
        elif file_in_this:
1453
 
            # OTHER deleted the file
1454
 
            return 'delete', None
1455
 
        else:
1456
 
            raise AssertionError(
1457
 
                'winner is OTHER, but file_id %r not in THIS or OTHER tree'
1458
 
                % (file_id,))
1459
 
 
1460
 
    def merge_contents(self, merge_hook_params):
1461
 
        """Fallback merge logic after user installed hooks."""
1462
 
        # This function is used in merge hooks as the fallback instance.
1463
 
        # Perhaps making this function and the functions it calls be a 
1464
 
        # a separate class would be better.
1465
 
        if merge_hook_params.winner == 'other':
1466
 
            # OTHER is a straight winner, so replace this contents with other
1467
 
            return self._default_other_winner_merge(merge_hook_params)
1468
 
        elif merge_hook_params.is_file_merge():
1469
 
            # THIS and OTHER are both files, so text merge.  Either
1470
 
            # BASE is a file, or both converted to files, so at least we
1471
 
            # have agreement that output should be a file.
1472
 
            try:
1473
 
                self.text_merge(merge_hook_params.file_id,
1474
 
                    merge_hook_params.trans_id)
1475
 
            except errors.BinaryFile:
1476
 
                return 'not_applicable', None
1477
 
            return 'done', None
1478
 
        else:
1479
 
            return 'not_applicable', None
 
1118
        if base_pair == other_pair:
 
1119
            # OTHER introduced no changes
 
1120
            return "unmodified"
 
1121
        this_pair = contents_pair(self.this_tree)
 
1122
        if this_pair == other_pair:
 
1123
            # THIS and OTHER introduced the same changes
 
1124
            return "unmodified"
 
1125
        else:
 
1126
            trans_id = self.tt.trans_id_file_id(file_id)
 
1127
            if this_pair == base_pair:
 
1128
                # only OTHER introduced changes
 
1129
                if file_id in self.this_tree:
 
1130
                    # Remove any existing contents
 
1131
                    self.tt.delete_contents(trans_id)
 
1132
                if file_id in self.other_tree:
 
1133
                    # OTHER changed the file
 
1134
                    create_by_entry(self.tt,
 
1135
                                    self.other_tree.inventory[file_id],
 
1136
                                    self.other_tree, trans_id)
 
1137
                    if file_id not in self.this_tree:
 
1138
                        self.tt.version_file(file_id, trans_id)
 
1139
                    return "modified"
 
1140
                elif file_id in self.this_tree.inventory:
 
1141
                    # OTHER deleted the file
 
1142
                    self.tt.unversion_file(trans_id)
 
1143
                    return "deleted"
 
1144
            #BOTH THIS and OTHER introduced changes; scalar conflict
 
1145
            elif this_pair[0] == "file" and other_pair[0] == "file":
 
1146
                # THIS and OTHER are both files, so text merge.  Either
 
1147
                # BASE is a file, or both converted to files, so at least we
 
1148
                # have agreement that output should be a file.
 
1149
                try:
 
1150
                    self.text_merge(file_id, trans_id)
 
1151
                except BinaryFile:
 
1152
                    return contents_conflict()
 
1153
                if file_id not in self.this_tree:
 
1154
                    self.tt.version_file(file_id, trans_id)
 
1155
                try:
 
1156
                    self.tt.tree_kind(trans_id)
 
1157
                    self.tt.delete_contents(trans_id)
 
1158
                except NoSuchFile:
 
1159
                    pass
 
1160
                return "modified"
 
1161
            else:
 
1162
                # Scalar conflict, can't text merge.  Dump conflicts
 
1163
                return contents_conflict()
1480
1164
 
1481
1165
    def get_lines(self, tree, file_id):
1482
1166
        """Return the lines in a file, or an empty list."""
1483
 
        if tree.has_id(file_id):
1484
 
            return tree.get_file_lines(file_id)
 
1167
        if file_id in tree:
 
1168
            return tree.get_file(file_id).readlines()
1485
1169
        else:
1486
1170
            return []
1487
1171
 
1489
1173
        """Perform a three-way text merge on a file_id"""
1490
1174
        # it's possible that we got here with base as a different type.
1491
1175
        # if so, we just want two-way text conflicts.
1492
 
        if self.base_tree.has_id(file_id) and \
 
1176
        if file_id in self.base_tree and \
1493
1177
            self.base_tree.kind(file_id) == "file":
1494
1178
            base_lines = self.get_lines(self.base_tree, file_id)
1495
1179
        else:
1496
1180
            base_lines = []
1497
1181
        other_lines = self.get_lines(self.other_tree, file_id)
1498
1182
        this_lines = self.get_lines(self.this_tree, file_id)
1499
 
        m3 = merge3.Merge3(base_lines, this_lines, other_lines,
1500
 
                           is_cherrypick=self.cherrypick)
 
1183
        m3 = Merge3(base_lines, this_lines, other_lines,
 
1184
                    is_cherrypick=self.cherrypick)
1501
1185
        start_marker = "!START OF MERGE CONFLICT!" + "I HOPE THIS IS UNIQUE"
1502
1186
        if self.show_base is True:
1503
1187
            base_marker = '|' * 7
1506
1190
 
1507
1191
        def iter_merge3(retval):
1508
1192
            retval["text_conflicts"] = False
1509
 
            for line in m3.merge_lines(name_a = "TREE",
1510
 
                                       name_b = "MERGE-SOURCE",
 
1193
            for line in m3.merge_lines(name_a = "TREE", 
 
1194
                                       name_b = "MERGE-SOURCE", 
1511
1195
                                       name_base = "BASE-REVISION",
1512
 
                                       start_marker=start_marker,
 
1196
                                       start_marker=start_marker, 
1513
1197
                                       base_marker=base_marker,
1514
1198
                                       reprocess=self.reprocess):
1515
1199
                if line.startswith(start_marker):
1524
1208
            self._raw_conflicts.append(('text conflict', trans_id))
1525
1209
            name = self.tt.final_name(trans_id)
1526
1210
            parent_id = self.tt.final_parent(trans_id)
1527
 
            file_group = self._dump_conflicts(name, parent_id, file_id,
 
1211
            file_group = self._dump_conflicts(name, parent_id, file_id, 
1528
1212
                                              this_lines, base_lines,
1529
1213
                                              other_lines)
1530
1214
            file_group.append(trans_id)
1531
1215
 
1532
 
    def _dump_conflicts(self, name, parent_id, file_id, this_lines=None,
 
1216
    def _dump_conflicts(self, name, parent_id, file_id, this_lines=None, 
1533
1217
                        base_lines=None, other_lines=None, set_version=False,
1534
1218
                        no_base=False):
1535
1219
        """Emit conflict files.
1537
1221
        determined automatically.  If set_version is true, the .OTHER, .THIS
1538
1222
        or .BASE (in that order) will be created as versioned files.
1539
1223
        """
1540
 
        data = [('OTHER', self.other_tree, other_lines),
 
1224
        data = [('OTHER', self.other_tree, other_lines), 
1541
1225
                ('THIS', self.this_tree, this_lines)]
1542
1226
        if not no_base:
1543
1227
            data.append(('BASE', self.base_tree, base_lines))
1544
 
 
1545
 
        # We need to use the actual path in the working tree of the file here,
1546
 
        # ignoring the conflict suffixes
1547
 
        wt = self.this_tree
1548
 
        if wt.supports_content_filtering():
1549
 
            try:
1550
 
                filter_tree_path = wt.id2path(file_id)
1551
 
            except errors.NoSuchId:
1552
 
                # file has been deleted
1553
 
                filter_tree_path = None
1554
 
        else:
1555
 
            # Skip the id2path lookup for older formats
1556
 
            filter_tree_path = None
1557
 
 
1558
1228
        versioned = False
1559
1229
        file_group = []
1560
1230
        for suffix, tree, lines in data:
1561
 
            if tree.has_id(file_id):
 
1231
            if file_id in tree:
1562
1232
                trans_id = self._conflict_file(name, parent_id, tree, file_id,
1563
 
                                               suffix, lines, filter_tree_path)
 
1233
                                               suffix, lines)
1564
1234
                file_group.append(trans_id)
1565
1235
                if set_version and not versioned:
1566
1236
                    self.tt.version_file(file_id, trans_id)
1567
1237
                    versioned = True
1568
1238
        return file_group
1569
 
 
1570
 
    def _conflict_file(self, name, parent_id, tree, file_id, suffix,
1571
 
                       lines=None, filter_tree_path=None):
 
1239
           
 
1240
    def _conflict_file(self, name, parent_id, tree, file_id, suffix, 
 
1241
                       lines=None):
1572
1242
        """Emit a single conflict file."""
1573
1243
        name = name + '.' + suffix
1574
1244
        trans_id = self.tt.create_path(name, parent_id)
1575
 
        transform.create_from_tree(self.tt, trans_id, tree, file_id, lines,
1576
 
            filter_tree_path)
 
1245
        entry = tree.inventory[file_id]
 
1246
        create_by_entry(self.tt, entry, tree, trans_id, lines)
1577
1247
        return trans_id
1578
1248
 
1579
1249
    def merge_executable(self, file_id, file_status):
1600
1270
        if winner == 'this' and file_status != "modified":
1601
1271
            return
1602
1272
        trans_id = self.tt.trans_id_file_id(file_id)
1603
 
        if self.tt.final_kind(trans_id) != "file":
 
1273
        try:
 
1274
            if self.tt.final_kind(trans_id) != "file":
 
1275
                return
 
1276
        except NoSuchFile:
1604
1277
            return
1605
1278
        if winner == "this":
1606
1279
            executability = this_executable
1607
1280
        else:
1608
 
            if self.other_tree.has_id(file_id):
 
1281
            if file_id in self.other_tree:
1609
1282
                executability = other_executable
1610
 
            elif self.this_tree.has_id(file_id):
 
1283
            elif file_id in self.this_tree:
1611
1284
                executability = this_executable
1612
 
            elif self.base_tree_has_id(file_id):
 
1285
            elif file_id in self.base_tree:
1613
1286
                executability = base_executable
1614
1287
        if executability is not None:
1615
1288
            trans_id = self.tt.trans_id_file_id(file_id)
1617
1290
 
1618
1291
    def cook_conflicts(self, fs_conflicts):
1619
1292
        """Convert all conflicts into a form that doesn't depend on trans_id"""
1620
 
        content_conflict_file_ids = set()
1621
 
        cooked_conflicts = transform.cook_conflicts(fs_conflicts, self.tt)
1622
 
        fp = transform.FinalPaths(self.tt)
 
1293
        from conflicts import Conflict
 
1294
        name_conflicts = {}
 
1295
        self.cooked_conflicts.extend(cook_conflicts(fs_conflicts, self.tt))
 
1296
        fp = FinalPaths(self.tt)
1623
1297
        for conflict in self._raw_conflicts:
1624
1298
            conflict_type = conflict[0]
1625
 
            if conflict_type == 'path conflict':
1626
 
                (trans_id, file_id,
1627
 
                this_parent, this_name,
1628
 
                other_parent, other_name) = conflict[1:]
1629
 
                if this_parent is None or this_name is None:
1630
 
                    this_path = '<deleted>'
1631
 
                else:
1632
 
                    parent_path =  fp.get_path(
1633
 
                        self.tt.trans_id_file_id(this_parent))
1634
 
                    this_path = osutils.pathjoin(parent_path, this_name)
1635
 
                if other_parent is None or other_name is None:
1636
 
                    other_path = '<deleted>'
1637
 
                else:
1638
 
                    if other_parent == self.other_tree.get_root_id():
1639
 
                        # The tree transform doesn't know about the other root,
1640
 
                        # so we special case here to avoid a NoFinalPath
1641
 
                        # exception
1642
 
                        parent_path = ''
1643
 
                    else:
1644
 
                        parent_path =  fp.get_path(
1645
 
                            self.tt.trans_id_file_id(other_parent))
1646
 
                    other_path = osutils.pathjoin(parent_path, other_name)
1647
 
                c = _mod_conflicts.Conflict.factory(
1648
 
                    'path conflict', path=this_path,
1649
 
                    conflict_path=other_path,
1650
 
                    file_id=file_id)
1651
 
            elif conflict_type == 'contents conflict':
 
1299
            if conflict_type in ('name conflict', 'parent conflict'):
 
1300
                trans_id = conflict[1]
 
1301
                conflict_args = conflict[2:]
 
1302
                if trans_id not in name_conflicts:
 
1303
                    name_conflicts[trans_id] = {}
 
1304
                unique_add(name_conflicts[trans_id], conflict_type, 
 
1305
                           conflict_args)
 
1306
            if conflict_type == 'contents conflict':
1652
1307
                for trans_id in conflict[1]:
1653
1308
                    file_id = self.tt.final_file_id(trans_id)
1654
1309
                    if file_id is not None:
1658
1313
                    if path.endswith(suffix):
1659
1314
                        path = path[:-len(suffix)]
1660
1315
                        break
1661
 
                c = _mod_conflicts.Conflict.factory(conflict_type,
1662
 
                                                    path=path, file_id=file_id)
1663
 
                content_conflict_file_ids.add(file_id)
1664
 
            elif conflict_type == 'text conflict':
 
1316
                c = Conflict.factory(conflict_type, path=path, file_id=file_id)
 
1317
                self.cooked_conflicts.append(c)
 
1318
            if conflict_type == 'text conflict':
1665
1319
                trans_id = conflict[1]
1666
1320
                path = fp.get_path(trans_id)
1667
1321
                file_id = self.tt.final_file_id(trans_id)
1668
 
                c = _mod_conflicts.Conflict.factory(conflict_type,
1669
 
                                                    path=path, file_id=file_id)
 
1322
                c = Conflict.factory(conflict_type, path=path, file_id=file_id)
 
1323
                self.cooked_conflicts.append(c)
 
1324
 
 
1325
        for trans_id, conflicts in name_conflicts.iteritems():
 
1326
            try:
 
1327
                this_parent, other_parent = conflicts['parent conflict']
 
1328
                if this_parent == other_parent:
 
1329
                    raise AssertionError()
 
1330
            except KeyError:
 
1331
                this_parent = other_parent = \
 
1332
                    self.tt.final_file_id(self.tt.final_parent(trans_id))
 
1333
            try:
 
1334
                this_name, other_name = conflicts['name conflict']
 
1335
                if this_name == other_name:
 
1336
                    raise AssertionError()
 
1337
            except KeyError:
 
1338
                this_name = other_name = self.tt.final_name(trans_id)
 
1339
            other_path = fp.get_path(trans_id)
 
1340
            if this_parent is not None and this_name is not None:
 
1341
                this_parent_path = \
 
1342
                    fp.get_path(self.tt.trans_id_file_id(this_parent))
 
1343
                this_path = pathjoin(this_parent_path, this_name)
1670
1344
            else:
1671
 
                raise AssertionError('bad conflict type: %r' % (conflict,))
1672
 
            cooked_conflicts.append(c)
1673
 
 
1674
 
        self.cooked_conflicts = []
1675
 
        # We want to get rid of path conflicts when a corresponding contents
1676
 
        # conflict exists. This can occur when one branch deletes a file while
1677
 
        # the other renames *and* modifies it. In this case, the content
1678
 
        # conflict is enough.
1679
 
        for c in cooked_conflicts:
1680
 
            if (c.typestring == 'path conflict'
1681
 
                and c.file_id in content_conflict_file_ids):
1682
 
                continue
 
1345
                this_path = "<deleted>"
 
1346
            file_id = self.tt.final_file_id(trans_id)
 
1347
            c = Conflict.factory('path conflict', path=this_path,
 
1348
                                 conflict_path=other_path, file_id=file_id)
1683
1349
            self.cooked_conflicts.append(c)
1684
 
        self.cooked_conflicts.sort(key=_mod_conflicts.Conflict.sort_key)
 
1350
        self.cooked_conflicts.sort(key=Conflict.sort_key)
1685
1351
 
1686
1352
 
1687
1353
class WeaveMerger(Merge3Merger):
1691
1357
    supports_reverse_cherrypick = False
1692
1358
    history_based = True
1693
1359
 
1694
 
    def _generate_merge_plan(self, file_id, base):
1695
 
        return self.this_tree.plan_file_merge(file_id, self.other_tree,
 
1360
    def _merged_lines(self, file_id):
 
1361
        """Generate the merged lines.
 
1362
        There is no distinction between lines that are meant to contain <<<<<<<
 
1363
        and conflicts.
 
1364
        """
 
1365
        if self.cherrypick:
 
1366
            base = self.base_tree
 
1367
        else:
 
1368
            base = None
 
1369
        plan = self.this_tree.plan_file_merge(file_id, self.other_tree,
1696
1370
                                              base=base)
1697
 
 
1698
 
    def _merged_lines(self, file_id):
1699
 
        """Generate the merged lines.
1700
 
        There is no distinction between lines that are meant to contain <<<<<<<
1701
 
        and conflicts.
1702
 
        """
1703
 
        if self.cherrypick:
1704
 
            base = self.base_tree
1705
 
        else:
1706
 
            base = None
1707
 
        plan = self._generate_merge_plan(file_id, base)
1708
1371
        if 'merge' in debug.debug_flags:
1709
1372
            plan = list(plan)
1710
1373
            trans_id = self.tt.trans_id_file_id(file_id)
1711
1374
            name = self.tt.final_name(trans_id) + '.plan'
1712
 
            contents = ('%11s|%s' % l for l in plan)
 
1375
            contents = ('%10s|%s' % l for l in plan)
1713
1376
            self.tt.new_file(name, self.tt.final_parent(trans_id), contents)
1714
 
        textmerge = versionedfile.PlanWeaveMerge(plan, '<<<<<<< TREE\n',
1715
 
                                                 '>>>>>>> MERGE-SOURCE\n')
1716
 
        lines, conflicts = textmerge.merge_lines(self.reprocess)
1717
 
        if conflicts:
1718
 
            base_lines = textmerge.base_from_plan()
1719
 
        else:
1720
 
            base_lines = None
1721
 
        return lines, base_lines
 
1377
        textmerge = PlanWeaveMerge(plan, '<<<<<<< TREE\n',
 
1378
            '>>>>>>> MERGE-SOURCE\n')
 
1379
        return textmerge.merge_lines(self.reprocess)
1722
1380
 
1723
1381
    def text_merge(self, file_id, trans_id):
1724
1382
        """Perform a (weave) text merge for a given file and file-id.
1725
1383
        If conflicts are encountered, .THIS and .OTHER files will be emitted,
1726
1384
        and a conflict will be noted.
1727
1385
        """
1728
 
        lines, base_lines = self._merged_lines(file_id)
 
1386
        lines, conflicts = self._merged_lines(file_id)
1729
1387
        lines = list(lines)
1730
 
        # Note we're checking whether the OUTPUT is binary in this case,
 
1388
        # Note we're checking whether the OUTPUT is binary in this case, 
1731
1389
        # because we don't want to get into weave merge guts.
1732
 
        textfile.check_text_lines(lines)
 
1390
        check_text_lines(lines)
1733
1391
        self.tt.create_file(lines, trans_id)
1734
 
        if base_lines is not None:
1735
 
            # Conflict
 
1392
        if conflicts:
1736
1393
            self._raw_conflicts.append(('text conflict', trans_id))
1737
1394
            name = self.tt.final_name(trans_id)
1738
1395
            parent_id = self.tt.final_parent(trans_id)
1739
 
            file_group = self._dump_conflicts(name, parent_id, file_id,
1740
 
                                              no_base=False,
1741
 
                                              base_lines=base_lines)
 
1396
            file_group = self._dump_conflicts(name, parent_id, file_id, 
 
1397
                                              no_base=True)
1742
1398
            file_group.append(trans_id)
1743
1399
 
1744
1400
 
1745
1401
class LCAMerger(WeaveMerger):
1746
1402
 
1747
 
    def _generate_merge_plan(self, file_id, base):
1748
 
        return self.this_tree.plan_file_lca_merge(file_id, self.other_tree,
 
1403
    def _merged_lines(self, file_id):
 
1404
        """Generate the merged lines.
 
1405
        There is no distinction between lines that are meant to contain <<<<<<<
 
1406
        and conflicts.
 
1407
        """
 
1408
        if self.cherrypick:
 
1409
            base = self.base_tree
 
1410
        else:
 
1411
            base = None
 
1412
        plan = self.this_tree.plan_file_lca_merge(file_id, self.other_tree,
1749
1413
                                                  base=base)
 
1414
        if 'merge' in debug.debug_flags:
 
1415
            plan = list(plan)
 
1416
            trans_id = self.tt.trans_id_file_id(file_id)
 
1417
            name = self.tt.final_name(trans_id) + '.plan'
 
1418
            contents = ('%10s|%s' % l for l in plan)
 
1419
            self.tt.new_file(name, self.tt.final_parent(trans_id), contents)
 
1420
        textmerge = PlanWeaveMerge(plan, '<<<<<<< TREE\n',
 
1421
            '>>>>>>> MERGE-SOURCE\n')
 
1422
        return textmerge.merge_lines(self.reprocess)
 
1423
 
1750
1424
 
1751
1425
class Diff3Merger(Merge3Merger):
1752
1426
    """Three-way merger using external diff3 for text merging"""
1753
1427
 
1754
1428
    def dump_file(self, temp_dir, name, tree, file_id):
1755
 
        out_path = osutils.pathjoin(temp_dir, name)
 
1429
        out_path = pathjoin(temp_dir, name)
1756
1430
        out_file = open(out_path, "wb")
1757
1431
        try:
1758
1432
            in_file = tree.get_file(file_id)
1770
1444
        import bzrlib.patch
1771
1445
        temp_dir = osutils.mkdtemp(prefix="bzr-")
1772
1446
        try:
1773
 
            new_file = osutils.pathjoin(temp_dir, "new")
 
1447
            new_file = pathjoin(temp_dir, "new")
1774
1448
            this = self.dump_file(temp_dir, "this", self.this_tree, file_id)
1775
1449
            base = self.dump_file(temp_dir, "base", self.base_tree, file_id)
1776
1450
            other = self.dump_file(temp_dir, "other", self.other_tree, file_id)
1777
1451
            status = bzrlib.patch.diff3(new_file, this, base, other)
1778
1452
            if status not in (0, 1):
1779
 
                raise errors.BzrError("Unhandled diff3 exit code")
 
1453
                raise BzrError("Unhandled diff3 exit code")
1780
1454
            f = open(new_file, 'rb')
1781
1455
            try:
1782
1456
                self.tt.create_file(f, trans_id)
1791
1465
            osutils.rmtree(temp_dir)
1792
1466
 
1793
1467
 
1794
 
class PathNotInTree(errors.BzrError):
1795
 
 
1796
 
    _fmt = """Merge-into failed because %(tree)s does not contain %(path)s."""
1797
 
 
1798
 
    def __init__(self, path, tree):
1799
 
        errors.BzrError.__init__(self, path=path, tree=tree)
1800
 
 
1801
 
 
1802
 
class MergeIntoMerger(Merger):
1803
 
    """Merger that understands other_tree will be merged into a subdir.
1804
 
 
1805
 
    This also changes the Merger api so that it uses real Branch, revision_id,
1806
 
    and RevisonTree objects, rather than using revision specs.
1807
 
    """
1808
 
 
1809
 
    def __init__(self, this_tree, other_branch, other_tree, target_subdir,
1810
 
            source_subpath, other_rev_id=None):
1811
 
        """Create a new MergeIntoMerger object.
1812
 
 
1813
 
        source_subpath in other_tree will be effectively copied to
1814
 
        target_subdir in this_tree.
1815
 
 
1816
 
        :param this_tree: The tree that we will be merging into.
1817
 
        :param other_branch: The Branch we will be merging from.
1818
 
        :param other_tree: The RevisionTree object we want to merge.
1819
 
        :param target_subdir: The relative path where we want to merge
1820
 
            other_tree into this_tree
1821
 
        :param source_subpath: The relative path specifying the subtree of
1822
 
            other_tree to merge into this_tree.
1823
 
        """
1824
 
        # It is assumed that we are merging a tree that is not in our current
1825
 
        # ancestry, which means we are using the "EmptyTree" as our basis.
1826
 
        null_ancestor_tree = this_tree.branch.repository.revision_tree(
1827
 
                                _mod_revision.NULL_REVISION)
1828
 
        super(MergeIntoMerger, self).__init__(
1829
 
            this_branch=this_tree.branch,
1830
 
            this_tree=this_tree,
1831
 
            other_tree=other_tree,
1832
 
            base_tree=null_ancestor_tree,
1833
 
            )
1834
 
        self._target_subdir = target_subdir
1835
 
        self._source_subpath = source_subpath
1836
 
        self.other_branch = other_branch
1837
 
        if other_rev_id is None:
1838
 
            other_rev_id = other_tree.get_revision_id()
1839
 
        self.other_rev_id = self.other_basis = other_rev_id
1840
 
        self.base_is_ancestor = True
1841
 
        self.backup_files = True
1842
 
        self.merge_type = Merge3Merger
1843
 
        self.show_base = False
1844
 
        self.reprocess = False
1845
 
        self.interesting_ids = None
1846
 
        self.merge_type = _MergeTypeParameterizer(MergeIntoMergeType,
1847
 
              target_subdir=self._target_subdir,
1848
 
              source_subpath=self._source_subpath)
1849
 
        if self._source_subpath != '':
1850
 
            # If this isn't a partial merge make sure the revisions will be
1851
 
            # present.
1852
 
            self._maybe_fetch(self.other_branch, self.this_branch,
1853
 
                self.other_basis)
1854
 
 
1855
 
    def set_pending(self):
1856
 
        if self._source_subpath != '':
1857
 
            return
1858
 
        Merger.set_pending(self)
1859
 
 
1860
 
 
1861
 
class _MergeTypeParameterizer(object):
1862
 
    """Wrap a merge-type class to provide extra parameters.
1863
 
    
1864
 
    This is hack used by MergeIntoMerger to pass some extra parameters to its
1865
 
    merge_type.  Merger.do_merge() sets up its own set of parameters to pass to
1866
 
    the 'merge_type' member.  It is difficult override do_merge without
1867
 
    re-writing the whole thing, so instead we create a wrapper which will pass
1868
 
    the extra parameters.
1869
 
    """
1870
 
 
1871
 
    def __init__(self, merge_type, **kwargs):
1872
 
        self._extra_kwargs = kwargs
1873
 
        self._merge_type = merge_type
1874
 
 
1875
 
    def __call__(self, *args, **kwargs):
1876
 
        kwargs.update(self._extra_kwargs)
1877
 
        return self._merge_type(*args, **kwargs)
1878
 
 
1879
 
    def __getattr__(self, name):
1880
 
        return getattr(self._merge_type, name)
1881
 
 
1882
 
 
1883
 
class MergeIntoMergeType(Merge3Merger):
1884
 
    """Merger that incorporates a tree (or part of a tree) into another."""
1885
 
 
1886
 
    def __init__(self, *args, **kwargs):
1887
 
        """Initialize the merger object.
1888
 
 
1889
 
        :param args: See Merge3Merger.__init__'s args.
1890
 
        :param kwargs: See Merge3Merger.__init__'s keyword args, except for
1891
 
            source_subpath and target_subdir.
1892
 
        :keyword source_subpath: The relative path specifying the subtree of
1893
 
            other_tree to merge into this_tree.
1894
 
        :keyword target_subdir: The relative path where we want to merge
1895
 
            other_tree into this_tree
1896
 
        """
1897
 
        # All of the interesting work happens during Merge3Merger.__init__(),
1898
 
        # so we have have to hack in to get our extra parameters set.
1899
 
        self._source_subpath = kwargs.pop('source_subpath')
1900
 
        self._target_subdir = kwargs.pop('target_subdir')
1901
 
        super(MergeIntoMergeType, self).__init__(*args, **kwargs)
1902
 
 
1903
 
    def _compute_transform(self):
1904
 
        child_pb = ui.ui_factory.nested_progress_bar()
1905
 
        try:
1906
 
            entries = self._entries_to_incorporate()
1907
 
            entries = list(entries)
1908
 
            for num, (entry, parent_id) in enumerate(entries):
1909
 
                child_pb.update('Preparing file merge', num, len(entries))
1910
 
                parent_trans_id = self.tt.trans_id_file_id(parent_id)
1911
 
                trans_id = transform.new_by_entry(self.tt, entry,
1912
 
                    parent_trans_id, self.other_tree)
1913
 
        finally:
1914
 
            child_pb.finished()
1915
 
        self._finish_computing_transform()
1916
 
 
1917
 
    def _entries_to_incorporate(self):
1918
 
        """Yields pairs of (inventory_entry, new_parent)."""
1919
 
        other_inv = self.other_tree.inventory
1920
 
        subdir_id = other_inv.path2id(self._source_subpath)
1921
 
        if subdir_id is None:
1922
 
            # XXX: The error would be clearer if it gave the URL of the source
1923
 
            # branch, but we don't have a reference to that here.
1924
 
            raise PathNotInTree(self._source_subpath, "Source tree")
1925
 
        subdir = other_inv[subdir_id]
1926
 
        parent_in_target = osutils.dirname(self._target_subdir)
1927
 
        target_id = self.this_tree.inventory.path2id(parent_in_target)
1928
 
        if target_id is None:
1929
 
            raise PathNotInTree(self._target_subdir, "Target tree")
1930
 
        name_in_target = osutils.basename(self._target_subdir)
1931
 
        merge_into_root = subdir.copy()
1932
 
        merge_into_root.name = name_in_target
1933
 
        if self.this_tree.inventory.has_id(merge_into_root.file_id):
1934
 
            # Give the root a new file-id.
1935
 
            # This can happen fairly easily if the directory we are
1936
 
            # incorporating is the root, and both trees have 'TREE_ROOT' as
1937
 
            # their root_id.  Users will expect this to Just Work, so we
1938
 
            # change the file-id here.
1939
 
            # Non-root file-ids could potentially conflict too.  That's really
1940
 
            # an edge case, so we don't do anything special for those.  We let
1941
 
            # them cause conflicts.
1942
 
            merge_into_root.file_id = generate_ids.gen_file_id(name_in_target)
1943
 
        yield (merge_into_root, target_id)
1944
 
        if subdir.kind != 'directory':
1945
 
            # No children, so we are done.
1946
 
            return
1947
 
        for ignored_path, entry in other_inv.iter_entries_by_dir(subdir_id):
1948
 
            parent_id = entry.parent_id
1949
 
            if parent_id == subdir.file_id:
1950
 
                # The root's parent ID has changed, so make sure children of
1951
 
                # the root refer to the new ID.
1952
 
                parent_id = merge_into_root.file_id
1953
 
            yield (entry, parent_id)
1954
 
 
1955
 
 
1956
1468
def merge_inner(this_branch, other_tree, base_tree, ignore_zero=False,
1957
1469
                backup_files=False,
1958
1470
                merge_type=Merge3Merger,
1962
1474
                other_rev_id=None,
1963
1475
                interesting_files=None,
1964
1476
                this_tree=None,
1965
 
                pb=None,
 
1477
                pb=DummyProgress(),
1966
1478
                change_reporter=None):
1967
 
    """Primary interface for merging.
1968
 
 
1969
 
    Typical use is probably::
1970
 
 
1971
 
        merge_inner(branch, branch.get_revision_tree(other_revision),
1972
 
                    branch.get_revision_tree(base_revision))
1973
 
    """
 
1479
    """Primary interface for merging. 
 
1480
 
 
1481
        typical use is probably 
 
1482
        'merge_inner(branch, branch.get_revision_tree(other_revision),
 
1483
                     branch.get_revision_tree(base_revision))'
 
1484
        """
1974
1485
    if this_tree is None:
1975
 
        raise errors.BzrError("bzrlib.merge.merge_inner requires a this_tree "
1976
 
                              "parameter")
 
1486
        raise BzrError("bzrlib.merge.merge_inner requires a this_tree "
 
1487
            "parameter as of bzrlib version 0.8.")
1977
1488
    merger = Merger(this_branch, other_tree, base_tree, this_tree=this_tree,
1978
1489
                    pb=pb, change_reporter=change_reporter)
1979
1490
    merger.backup_files = backup_files
1992
1503
    get_revision_id = getattr(base_tree, 'get_revision_id', None)
1993
1504
    if get_revision_id is None:
1994
1505
        get_revision_id = base_tree.last_revision
1995
 
    merger.cache_trees_with_revision_ids([other_tree, base_tree, this_tree])
1996
1506
    merger.set_base_revision(get_revision_id(), this_branch)
1997
1507
    return merger.do_merge()
1998
1508
 
2066
1576
 
2067
1577
    def get_lines(self, revisions):
2068
1578
        """Get lines for revisions from the backing VersionedFiles.
2069
 
 
 
1579
        
2070
1580
        :raises RevisionNotPresent: on absent texts.
2071
1581
        """
2072
1582
        keys = [(self._key_prefix + (rev,)) for rev in revisions]
2074
1584
        for record in self.vf.get_record_stream(keys, 'unordered', True):
2075
1585
            if record.storage_kind == 'absent':
2076
1586
                raise errors.RevisionNotPresent(record.key, self.vf)
2077
 
            result[record.key[-1]] = osutils.chunks_to_lines(
2078
 
                record.get_bytes_as('chunked'))
 
1587
            result[record.key[-1]] = osutils.split_lines(
 
1588
                record.get_bytes_as('fulltext'))
2079
1589
        return result
2080
1590
 
2081
1591
    def plan_merge(self):
2197
1707
        super(_PlanMerge, self).__init__(a_rev, b_rev, vf, key_prefix)
2198
1708
        self.a_key = self._key_prefix + (self.a_rev,)
2199
1709
        self.b_key = self._key_prefix + (self.b_rev,)
2200
 
        self.graph = _mod_graph.Graph(self.vf)
 
1710
        self.graph = Graph(self.vf)
2201
1711
        heads = self.graph.heads((self.a_key, self.b_key))
2202
1712
        if len(heads) == 1:
2203
1713
            # one side dominates, so we can just return its values, yay for
2208
1718
                other = b_rev
2209
1719
            else:
2210
1720
                other = a_rev
2211
 
            trace.mutter('found dominating revision for %s\n%s > %s', self.vf,
2212
 
                         self._head_key[-1], other)
 
1721
            mutter('found dominating revision for %s\n%s > %s', self.vf,
 
1722
                   self._head_key[-1], other)
2213
1723
            self._weave = None
2214
1724
        else:
2215
1725
            self._head_key = None
2229
1739
        while True:
2230
1740
            next_lcas = self.graph.find_lca(*cur_ancestors)
2231
1741
            # Map a plain NULL_REVISION to a simple no-ancestors
2232
 
            if next_lcas == set([_mod_revision.NULL_REVISION]):
 
1742
            if next_lcas == set([NULL_REVISION]):
2233
1743
                next_lcas = ()
2234
1744
            # Order the lca's based on when they were merged into the tip
2235
1745
            # While the actual merge portion of weave merge uses a set() of
2247
1757
            elif len(next_lcas) > 2:
2248
1758
                # More than 2 lca's, fall back to grabbing all nodes between
2249
1759
                # this and the unique lca.
2250
 
                trace.mutter('More than 2 LCAs, falling back to all nodes for:'
2251
 
                             ' %s, %s\n=> %s',
2252
 
                             self.a_key, self.b_key, cur_ancestors)
 
1760
                mutter('More than 2 LCAs, falling back to all nodes for:'
 
1761
                       ' %s, %s\n=> %s', self.a_key, self.b_key, cur_ancestors)
2253
1762
                cur_lcas = next_lcas
2254
1763
                while len(cur_lcas) > 1:
2255
1764
                    cur_lcas = self.graph.find_lca(*cur_lcas)
2258
1767
                    unique_lca = None
2259
1768
                else:
2260
1769
                    unique_lca = list(cur_lcas)[0]
2261
 
                    if unique_lca == _mod_revision.NULL_REVISION:
 
1770
                    if unique_lca == NULL_REVISION:
2262
1771
                        # find_lca will return a plain 'NULL_REVISION' rather
2263
1772
                        # than a key tuple when there is no common ancestor, we
2264
1773
                        # prefer to just use None, because it doesn't confuse
2272
1781
 
2273
1782
    def _find_unique_parents(self, tip_keys, base_key):
2274
1783
        """Find ancestors of tip that aren't ancestors of base.
2275
 
 
 
1784
        
2276
1785
        :param tip_keys: Nodes that are interesting
2277
1786
        :param base_key: Cull all ancestors of this node
2278
1787
        :return: The parent map for all revisions between tip_keys and
2287
1796
            # We remove NULL_REVISION because it isn't a proper tuple key, and
2288
1797
            # thus confuses things like _get_interesting_texts, and our logic
2289
1798
            # to add the texts into the memory weave.
2290
 
            if _mod_revision.NULL_REVISION in parent_map:
2291
 
                parent_map.pop(_mod_revision.NULL_REVISION)
 
1799
            if NULL_REVISION in parent_map:
 
1800
                parent_map.pop(NULL_REVISION)
2292
1801
        else:
2293
1802
            interesting = set()
2294
1803
            for tip in tip_keys:
2338
1847
    @staticmethod
2339
1848
    def _prune_tails(parent_map, child_map, tails_to_remove):
2340
1849
        """Remove tails from the parent map.
2341
 
 
 
1850
        
2342
1851
        This will remove the supplied revisions until no more children have 0
2343
1852
        parents.
2344
1853
 
2433
1942
class _PlanLCAMerge(_PlanMergeBase):
2434
1943
    """
2435
1944
    This merge algorithm differs from _PlanMerge in that:
2436
 
 
2437
1945
    1. comparisons are done against LCAs only
2438
1946
    2. cases where a contested line is new versus one LCA but old versus
2439
1947
       another are marked as conflicts, by emitting the line as conflicted-a
2447
1955
        lcas = graph.find_lca(key_prefix + (a_rev,), key_prefix + (b_rev,))
2448
1956
        self.lcas = set()
2449
1957
        for lca in lcas:
2450
 
            if lca == _mod_revision.NULL_REVISION:
 
1958
            if lca == NULL_REVISION:
2451
1959
                self.lcas.add(lca)
2452
1960
            else:
2453
1961
                self.lcas.add(lca[-1])
2480
1988
 
2481
1989
        If a line is killed and new, this indicates that the two merge
2482
1990
        revisions contain differing conflict resolutions.
2483
 
 
2484
1991
        :param revision_id: The id of the revision in which the lines are
2485
1992
            unique
2486
1993
        :param unique_line_numbers: The line numbers of unique lines.
2487
 
        :return: a tuple of (new_this, killed_other)
 
1994
        :return a tuple of (new_this, killed_other):
2488
1995
        """
2489
1996
        new = set()
2490
1997
        killed = set()