/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/merge.py

  • Committer: Andrew Bennetts
  • Date: 2010-04-22 07:35:06 UTC
  • mto: This revision was merged to the branch mainline in revision 5193.
  • Revision ID: andrew.bennetts@canonical.com-20100422073506-7i5pqyhzdj5pcelx
Create a PerFileMerger helper class that is midway between AbstractPerFileMerger and ConfigurableFileMerger.  It allows the example merge plugin in the docs (the always conflict *.xml files) to be much, much simpler.

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005-2010 Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
16
 
 
17
import warnings
 
18
 
 
19
from bzrlib import (
 
20
    branch as _mod_branch,
 
21
    conflicts as _mod_conflicts,
 
22
    debug,
 
23
    decorators,
 
24
    errors,
 
25
    graph as _mod_graph,
 
26
    hooks,
 
27
    merge3,
 
28
    osutils,
 
29
    patiencediff,
 
30
    revision as _mod_revision,
 
31
    textfile,
 
32
    trace,
 
33
    transform,
 
34
    tree as _mod_tree,
 
35
    tsort,
 
36
    ui,
 
37
    versionedfile
 
38
    )
 
39
from bzrlib.cleanup import OperationWithCleanups
 
40
from bzrlib.symbol_versioning import (
 
41
    deprecated_in,
 
42
    deprecated_method,
 
43
    )
 
44
# TODO: Report back as changes are merged in
 
45
 
 
46
 
 
47
def transform_tree(from_tree, to_tree, interesting_ids=None):
 
48
    from_tree.lock_tree_write()
 
49
    operation = OperationWithCleanups(merge_inner)
 
50
    operation.add_cleanup(from_tree.unlock)
 
51
    operation.run_simple(from_tree.branch, to_tree, from_tree,
 
52
        ignore_zero=True, interesting_ids=interesting_ids, this_tree=from_tree)
 
53
 
 
54
 
 
55
class MergeHooks(hooks.Hooks):
 
56
 
 
57
    def __init__(self):
 
58
        hooks.Hooks.__init__(self)
 
59
        self.create_hook(hooks.HookPoint('merge_file_content',
 
60
            "Called with a bzrlib.merge.Merger object to create a per file "
 
61
            "merge object when starting a merge. "
 
62
            "Should return either None or a subclass of "
 
63
            "``bzrlib.merge.AbstractPerFileMerger``. "
 
64
            "Such objects will then be called per file "
 
65
            "that needs to be merged (including when one "
 
66
            "side has deleted the file and the other has changed it). "
 
67
            "See the AbstractPerFileMerger API docs for details on how it is "
 
68
            "used by merge.",
 
69
            (2, 1), None))
 
70
 
 
71
 
 
72
class AbstractPerFileMerger(object):
 
73
    """PerFileMerger objects are used by plugins extending merge for bzrlib.
 
74
 
 
75
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
 
76
    
 
77
    :ivar merger: The Merge3Merger performing the merge.
 
78
    """
 
79
 
 
80
    def __init__(self, merger):
 
81
        """Create a PerFileMerger for use with merger."""
 
82
        self.merger = merger
 
83
 
 
84
    def merge_contents(self, merge_params):
 
85
        """Attempt to merge the contents of a single file.
 
86
        
 
87
        :param merge_params: A bzrlib.merge.MergeHookParams
 
88
        :return : A tuple of (status, chunks), where status is one of
 
89
            'not_applicable', 'success', 'conflicted', or 'delete'.  If status
 
90
            is 'success' or 'conflicted', then chunks should be an iterable of
 
91
            strings for the new file contents.
 
92
        """
 
93
        return ('not applicable', None)
 
94
 
 
95
 
 
96
class PerFileMerger(AbstractPerFileMerger):
 
97
    """Merge individual files when self.file_matches returns True.
 
98
 
 
99
    This class is intended to be subclassed.  The file_matches and
 
100
    merge_matching methods should be overridden with concrete implementations.
 
101
    """
 
102
 
 
103
    def file_matches(self, params):
 
104
        """Return True if merge_matching should be called on this file.
 
105
 
 
106
        Only called with merges of plain files with no clear winner.
 
107
 
 
108
        Subclasses must override this.
 
109
        """
 
110
        raise NotImplementedError(self.file_matches)
 
111
 
 
112
    def get_filename(self, params, tree):
 
113
        """Lookup the filename (i.e. basename, not path), given a Tree (e.g.
 
114
        self.merger.this_tree) and a MergeHookParams.
 
115
        """
 
116
        return tree.inventory[params.file_id].name
 
117
 
 
118
    def get_filepath(self, params, tree):
 
119
        """Calculate the path to the file in a tree.
 
120
 
 
121
        :param params: A MergeHookParams describing the file to merge
 
122
        :param tree: a Tree, e.g. self.merger.this_tree.
 
123
        """
 
124
        return tree.id2path(params.file_id)
 
125
 
 
126
    def merge_contents(self, params):
 
127
        """Merge the contents of a single file."""
 
128
        # Check whether this custom merge logic should be used.
 
129
        if (
 
130
            # OTHER is a straight winner, rely on default merge.
 
131
            params.winner == 'other' or
 
132
            # THIS and OTHER aren't both files.
 
133
            not params.is_file_merge() or
 
134
            # The filename doesn't match *.xml
 
135
            not self.file_matches(params)):
 
136
            return 'not_applicable', None
 
137
        return self.merge_matching(self, params)
 
138
 
 
139
    def merge_matching(self, params):
 
140
        """Merge the contents of a single file that has matched the criteria
 
141
        in PerFileMerger.merge_contents (is a conflict, is a file,
 
142
        self.file_matches is True).
 
143
 
 
144
        Subclasses must override this.
 
145
        """
 
146
        raise NotImplementedError(self.merge_matching)
 
147
 
 
148
 
 
149
class ConfigurableFileMerger(PerFileMerger):
 
150
    """Merge individual files when configured via a .conf file.
 
151
 
 
152
    This is a base class for concrete custom file merging logic. Concrete
 
153
    classes should implement ``merge_text``.
 
154
 
 
155
    See ``bzrlib.plugins.news_merge.news_merge`` for an example concrete class.
 
156
    
 
157
    :ivar affected_files: The configured file paths to merge.
 
158
 
 
159
    :cvar name_prefix: The prefix to use when looking up configuration
 
160
        details. <name_prefix>_merge_files describes the files targeted by the
 
161
        hook for example.
 
162
        
 
163
    :cvar default_files: The default file paths to merge when no configuration
 
164
        is present.
 
165
    """
 
166
 
 
167
    name_prefix = None
 
168
    default_files = None
 
169
 
 
170
    def __init__(self, merger):
 
171
        super(ConfigurableFileMerger, self).__init__(merger)
 
172
        self.affected_files = None
 
173
        self.default_files = self.__class__.default_files or []
 
174
        self.name_prefix = self.__class__.name_prefix
 
175
        if self.name_prefix is None:
 
176
            raise ValueError("name_prefix must be set.")
 
177
 
 
178
    def file_matches(self, params):
 
179
        """Check whether the file should call the merge hook.
 
180
 
 
181
        <name_prefix>_merge_files configuration variable is a list of files
 
182
        that should use the hook.
 
183
        """
 
184
        affected_files = self.affected_files
 
185
        if affected_files is None:
 
186
            config = self.merger.this_branch.get_config()
 
187
            # Until bzr provides a better policy for caching the config, we
 
188
            # just add the part we're interested in to the params to avoid
 
189
            # reading the config files repeatedly (bazaar.conf, location.conf,
 
190
            # branch.conf).
 
191
            config_key = self.name_prefix + '_merge_files'
 
192
            affected_files = config.get_user_option_as_list(config_key)
 
193
            if affected_files is None:
 
194
                # If nothing was specified in the config, use the default.
 
195
                affected_files = self.default_files
 
196
            self.affected_files = affected_files
 
197
        if affected_files:
 
198
            filepath = self.get_filepath(params, self.merger.this_tree)
 
199
            if filepath in affected_files:
 
200
                return True
 
201
        return False
 
202
 
 
203
    def merge_matching(self, params):
 
204
        return self.merge_text(params)
 
205
 
 
206
    def merge_text(self, params):
 
207
        """Merge the byte contents of a single file.
 
208
 
 
209
        This is called after checking that the merge should be performed in
 
210
        merge_contents, and it should behave as per
 
211
        ``bzrlib.merge.AbstractPerFileMerger.merge_contents``.
 
212
        """
 
213
        raise NotImplementedError(self.merge_text)
 
214
 
 
215
 
 
216
class MergeHookParams(object):
 
217
    """Object holding parameters passed to merge_file_content hooks.
 
218
 
 
219
    There are some fields hooks can access:
 
220
 
 
221
    :ivar file_id: the file ID of the file being merged
 
222
    :ivar trans_id: the transform ID for the merge of this file
 
223
    :ivar this_kind: kind of file_id in 'this' tree
 
224
    :ivar other_kind: kind of file_id in 'other' tree
 
225
    :ivar winner: one of 'this', 'other', 'conflict'
 
226
    """
 
227
 
 
228
    def __init__(self, merger, file_id, trans_id, this_kind, other_kind,
 
229
            winner):
 
230
        self._merger = merger
 
231
        self.file_id = file_id
 
232
        self.trans_id = trans_id
 
233
        self.this_kind = this_kind
 
234
        self.other_kind = other_kind
 
235
        self.winner = winner
 
236
 
 
237
    def is_file_merge(self):
 
238
        """True if this_kind and other_kind are both 'file'."""
 
239
        return self.this_kind == 'file' and self.other_kind == 'file'
 
240
 
 
241
    @decorators.cachedproperty
 
242
    def base_lines(self):
 
243
        """The lines of the 'base' version of the file."""
 
244
        return self._merger.get_lines(self._merger.base_tree, self.file_id)
 
245
 
 
246
    @decorators.cachedproperty
 
247
    def this_lines(self):
 
248
        """The lines of the 'this' version of the file."""
 
249
        return self._merger.get_lines(self._merger.this_tree, self.file_id)
 
250
 
 
251
    @decorators.cachedproperty
 
252
    def other_lines(self):
 
253
        """The lines of the 'other' version of the file."""
 
254
        return self._merger.get_lines(self._merger.other_tree, self.file_id)
 
255
 
 
256
 
 
257
class Merger(object):
 
258
 
 
259
    hooks = MergeHooks()
 
260
 
 
261
    def __init__(self, this_branch, other_tree=None, base_tree=None,
 
262
                 this_tree=None, pb=None, change_reporter=None,
 
263
                 recurse='down', revision_graph=None):
 
264
        object.__init__(self)
 
265
        self.this_branch = this_branch
 
266
        self.this_basis = _mod_revision.ensure_null(
 
267
            this_branch.last_revision())
 
268
        self.this_rev_id = None
 
269
        self.this_tree = this_tree
 
270
        self.this_revision_tree = None
 
271
        self.this_basis_tree = None
 
272
        self.other_tree = other_tree
 
273
        self.other_branch = None
 
274
        self.base_tree = base_tree
 
275
        self.ignore_zero = False
 
276
        self.backup_files = False
 
277
        self.interesting_ids = None
 
278
        self.interesting_files = None
 
279
        self.show_base = False
 
280
        self.reprocess = False
 
281
        if pb is not None:
 
282
            warnings.warn("pb parameter to Merger() is deprecated and ignored")
 
283
        self.pp = None
 
284
        self.recurse = recurse
 
285
        self.change_reporter = change_reporter
 
286
        self._cached_trees = {}
 
287
        self._revision_graph = revision_graph
 
288
        self._base_is_ancestor = None
 
289
        self._base_is_other_ancestor = None
 
290
        self._is_criss_cross = None
 
291
        self._lca_trees = None
 
292
 
 
293
    def cache_trees_with_revision_ids(self, trees):
 
294
        """Cache any tree in trees if it has a revision_id."""
 
295
        for maybe_tree in trees:
 
296
            if maybe_tree is None:
 
297
                continue
 
298
            try:
 
299
                rev_id = maybe_tree.get_revision_id()
 
300
            except AttributeError:
 
301
                continue
 
302
            self._cached_trees[rev_id] = maybe_tree
 
303
 
 
304
    @property
 
305
    def revision_graph(self):
 
306
        if self._revision_graph is None:
 
307
            self._revision_graph = self.this_branch.repository.get_graph()
 
308
        return self._revision_graph
 
309
 
 
310
    def _set_base_is_ancestor(self, value):
 
311
        self._base_is_ancestor = value
 
312
 
 
313
    def _get_base_is_ancestor(self):
 
314
        if self._base_is_ancestor is None:
 
315
            self._base_is_ancestor = self.revision_graph.is_ancestor(
 
316
                self.base_rev_id, self.this_basis)
 
317
        return self._base_is_ancestor
 
318
 
 
319
    base_is_ancestor = property(_get_base_is_ancestor, _set_base_is_ancestor)
 
320
 
 
321
    def _set_base_is_other_ancestor(self, value):
 
322
        self._base_is_other_ancestor = value
 
323
 
 
324
    def _get_base_is_other_ancestor(self):
 
325
        if self._base_is_other_ancestor is None:
 
326
            if self.other_basis is None:
 
327
                return True
 
328
            self._base_is_other_ancestor = self.revision_graph.is_ancestor(
 
329
                self.base_rev_id, self.other_basis)
 
330
        return self._base_is_other_ancestor
 
331
 
 
332
    base_is_other_ancestor = property(_get_base_is_other_ancestor,
 
333
                                      _set_base_is_other_ancestor)
 
334
 
 
335
    @staticmethod
 
336
    def from_uncommitted(tree, other_tree, pb=None, base_tree=None):
 
337
        """Return a Merger for uncommitted changes in other_tree.
 
338
 
 
339
        :param tree: The tree to merge into
 
340
        :param other_tree: The tree to get uncommitted changes from
 
341
        :param pb: A progress indicator
 
342
        :param base_tree: The basis to use for the merge.  If unspecified,
 
343
            other_tree.basis_tree() will be used.
 
344
        """
 
345
        if base_tree is None:
 
346
            base_tree = other_tree.basis_tree()
 
347
        merger = Merger(tree.branch, other_tree, base_tree, tree, pb)
 
348
        merger.base_rev_id = merger.base_tree.get_revision_id()
 
349
        merger.other_rev_id = None
 
350
        merger.other_basis = merger.base_rev_id
 
351
        return merger
 
352
 
 
353
    @classmethod
 
354
    def from_mergeable(klass, tree, mergeable, pb):
 
355
        """Return a Merger for a bundle or merge directive.
 
356
 
 
357
        :param tree: The tree to merge changes into
 
358
        :param mergeable: A merge directive or bundle
 
359
        :param pb: A progress indicator
 
360
        """
 
361
        mergeable.install_revisions(tree.branch.repository)
 
362
        base_revision_id, other_revision_id, verified =\
 
363
            mergeable.get_merge_request(tree.branch.repository)
 
364
        revision_graph = tree.branch.repository.get_graph()
 
365
        if base_revision_id is not None:
 
366
            if (base_revision_id != _mod_revision.NULL_REVISION and
 
367
                revision_graph.is_ancestor(
 
368
                base_revision_id, tree.branch.last_revision())):
 
369
                base_revision_id = None
 
370
            else:
 
371
                trace.warning('Performing cherrypick')
 
372
        merger = klass.from_revision_ids(pb, tree, other_revision_id,
 
373
                                         base_revision_id, revision_graph=
 
374
                                         revision_graph)
 
375
        return merger, verified
 
376
 
 
377
    @staticmethod
 
378
    def from_revision_ids(pb, tree, other, base=None, other_branch=None,
 
379
                          base_branch=None, revision_graph=None,
 
380
                          tree_branch=None):
 
381
        """Return a Merger for revision-ids.
 
382
 
 
383
        :param pb: A progress indicator
 
384
        :param tree: The tree to merge changes into
 
385
        :param other: The revision-id to use as OTHER
 
386
        :param base: The revision-id to use as BASE.  If not specified, will
 
387
            be auto-selected.
 
388
        :param other_branch: A branch containing the other revision-id.  If
 
389
            not supplied, tree.branch is used.
 
390
        :param base_branch: A branch containing the base revision-id.  If
 
391
            not supplied, other_branch or tree.branch will be used.
 
392
        :param revision_graph: If you have a revision_graph precomputed, pass
 
393
            it in, otherwise it will be created for you.
 
394
        :param tree_branch: The branch associated with tree.  If not supplied,
 
395
            tree.branch will be used.
 
396
        """
 
397
        if tree_branch is None:
 
398
            tree_branch = tree.branch
 
399
        merger = Merger(tree_branch, this_tree=tree, pb=pb,
 
400
                        revision_graph=revision_graph)
 
401
        if other_branch is None:
 
402
            other_branch = tree.branch
 
403
        merger.set_other_revision(other, other_branch)
 
404
        if base is None:
 
405
            merger.find_base()
 
406
        else:
 
407
            if base_branch is None:
 
408
                base_branch = other_branch
 
409
            merger.set_base_revision(base, base_branch)
 
410
        return merger
 
411
 
 
412
    def revision_tree(self, revision_id, branch=None):
 
413
        if revision_id not in self._cached_trees:
 
414
            if branch is None:
 
415
                branch = self.this_branch
 
416
            try:
 
417
                tree = self.this_tree.revision_tree(revision_id)
 
418
            except errors.NoSuchRevisionInTree:
 
419
                tree = branch.repository.revision_tree(revision_id)
 
420
            self._cached_trees[revision_id] = tree
 
421
        return self._cached_trees[revision_id]
 
422
 
 
423
    def _get_tree(self, treespec, possible_transports=None):
 
424
        from bzrlib import workingtree
 
425
        location, revno = treespec
 
426
        if revno is None:
 
427
            tree = workingtree.WorkingTree.open_containing(location)[0]
 
428
            return tree.branch, tree
 
429
        branch = _mod_branch.Branch.open_containing(
 
430
            location, possible_transports)[0]
 
431
        if revno == -1:
 
432
            revision_id = branch.last_revision()
 
433
        else:
 
434
            revision_id = branch.get_rev_id(revno)
 
435
        revision_id = _mod_revision.ensure_null(revision_id)
 
436
        return branch, self.revision_tree(revision_id, branch)
 
437
 
 
438
    @deprecated_method(deprecated_in((2, 1, 0)))
 
439
    def ensure_revision_trees(self):
 
440
        if self.this_revision_tree is None:
 
441
            self.this_basis_tree = self.revision_tree(self.this_basis)
 
442
            if self.this_basis == self.this_rev_id:
 
443
                self.this_revision_tree = self.this_basis_tree
 
444
 
 
445
        if self.other_rev_id is None:
 
446
            other_basis_tree = self.revision_tree(self.other_basis)
 
447
            if other_basis_tree.has_changes(self.other_tree):
 
448
                raise errors.WorkingTreeNotRevision(self.this_tree)
 
449
            other_rev_id = self.other_basis
 
450
            self.other_tree = other_basis_tree
 
451
 
 
452
    @deprecated_method(deprecated_in((2, 1, 0)))
 
453
    def file_revisions(self, file_id):
 
454
        self.ensure_revision_trees()
 
455
        def get_id(tree, file_id):
 
456
            revision_id = tree.inventory[file_id].revision
 
457
            return revision_id
 
458
        if self.this_rev_id is None:
 
459
            if self.this_basis_tree.get_file_sha1(file_id) != \
 
460
                self.this_tree.get_file_sha1(file_id):
 
461
                raise errors.WorkingTreeNotRevision(self.this_tree)
 
462
 
 
463
        trees = (self.this_basis_tree, self.other_tree)
 
464
        return [get_id(tree, file_id) for tree in trees]
 
465
 
 
466
    @deprecated_method(deprecated_in((2, 1, 0)))
 
467
    def check_basis(self, check_clean, require_commits=True):
 
468
        if self.this_basis is None and require_commits is True:
 
469
            raise errors.BzrCommandError(
 
470
                "This branch has no commits."
 
471
                " (perhaps you would prefer 'bzr pull')")
 
472
        if check_clean:
 
473
            self.compare_basis()
 
474
            if self.this_basis != self.this_rev_id:
 
475
                raise errors.UncommittedChanges(self.this_tree)
 
476
 
 
477
    @deprecated_method(deprecated_in((2, 1, 0)))
 
478
    def compare_basis(self):
 
479
        try:
 
480
            basis_tree = self.revision_tree(self.this_tree.last_revision())
 
481
        except errors.NoSuchRevision:
 
482
            basis_tree = self.this_tree.basis_tree()
 
483
        if not self.this_tree.has_changes(basis_tree):
 
484
            self.this_rev_id = self.this_basis
 
485
 
 
486
    def set_interesting_files(self, file_list):
 
487
        self.interesting_files = file_list
 
488
 
 
489
    def set_pending(self):
 
490
        if (not self.base_is_ancestor or not self.base_is_other_ancestor
 
491
            or self.other_rev_id is None):
 
492
            return
 
493
        self._add_parent()
 
494
 
 
495
    def _add_parent(self):
 
496
        new_parents = self.this_tree.get_parent_ids() + [self.other_rev_id]
 
497
        new_parent_trees = []
 
498
        operation = OperationWithCleanups(self.this_tree.set_parent_trees)
 
499
        for revision_id in new_parents:
 
500
            try:
 
501
                tree = self.revision_tree(revision_id)
 
502
            except errors.NoSuchRevision:
 
503
                tree = None
 
504
            else:
 
505
                tree.lock_read()
 
506
                operation.add_cleanup(tree.unlock)
 
507
            new_parent_trees.append((revision_id, tree))
 
508
        operation.run_simple(new_parent_trees, allow_leftmost_as_ghost=True)
 
509
 
 
510
    def set_other(self, other_revision, possible_transports=None):
 
511
        """Set the revision and tree to merge from.
 
512
 
 
513
        This sets the other_tree, other_rev_id, other_basis attributes.
 
514
 
 
515
        :param other_revision: The [path, revision] list to merge from.
 
516
        """
 
517
        self.other_branch, self.other_tree = self._get_tree(other_revision,
 
518
                                                            possible_transports)
 
519
        if other_revision[1] == -1:
 
520
            self.other_rev_id = _mod_revision.ensure_null(
 
521
                self.other_branch.last_revision())
 
522
            if _mod_revision.is_null(self.other_rev_id):
 
523
                raise errors.NoCommits(self.other_branch)
 
524
            self.other_basis = self.other_rev_id
 
525
        elif other_revision[1] is not None:
 
526
            self.other_rev_id = self.other_branch.get_rev_id(other_revision[1])
 
527
            self.other_basis = self.other_rev_id
 
528
        else:
 
529
            self.other_rev_id = None
 
530
            self.other_basis = self.other_branch.last_revision()
 
531
            if self.other_basis is None:
 
532
                raise errors.NoCommits(self.other_branch)
 
533
        if self.other_rev_id is not None:
 
534
            self._cached_trees[self.other_rev_id] = self.other_tree
 
535
        self._maybe_fetch(self.other_branch,self.this_branch, self.other_basis)
 
536
 
 
537
    def set_other_revision(self, revision_id, other_branch):
 
538
        """Set 'other' based on a branch and revision id
 
539
 
 
540
        :param revision_id: The revision to use for a tree
 
541
        :param other_branch: The branch containing this tree
 
542
        """
 
543
        self.other_rev_id = revision_id
 
544
        self.other_branch = other_branch
 
545
        self._maybe_fetch(other_branch, self.this_branch, self.other_rev_id)
 
546
        self.other_tree = self.revision_tree(revision_id)
 
547
        self.other_basis = revision_id
 
548
 
 
549
    def set_base_revision(self, revision_id, branch):
 
550
        """Set 'base' based on a branch and revision id
 
551
 
 
552
        :param revision_id: The revision to use for a tree
 
553
        :param branch: The branch containing this tree
 
554
        """
 
555
        self.base_rev_id = revision_id
 
556
        self.base_branch = branch
 
557
        self._maybe_fetch(branch, self.this_branch, revision_id)
 
558
        self.base_tree = self.revision_tree(revision_id)
 
559
 
 
560
    def _maybe_fetch(self, source, target, revision_id):
 
561
        if not source.repository.has_same_location(target.repository):
 
562
            target.fetch(source, revision_id)
 
563
 
 
564
    def find_base(self):
 
565
        revisions = [_mod_revision.ensure_null(self.this_basis),
 
566
                     _mod_revision.ensure_null(self.other_basis)]
 
567
        if _mod_revision.NULL_REVISION in revisions:
 
568
            self.base_rev_id = _mod_revision.NULL_REVISION
 
569
            self.base_tree = self.revision_tree(self.base_rev_id)
 
570
            self._is_criss_cross = False
 
571
        else:
 
572
            lcas = self.revision_graph.find_lca(revisions[0], revisions[1])
 
573
            self._is_criss_cross = False
 
574
            if len(lcas) == 0:
 
575
                self.base_rev_id = _mod_revision.NULL_REVISION
 
576
            elif len(lcas) == 1:
 
577
                self.base_rev_id = list(lcas)[0]
 
578
            else: # len(lcas) > 1
 
579
                if len(lcas) > 2:
 
580
                    # find_unique_lca can only handle 2 nodes, so we have to
 
581
                    # start back at the beginning. It is a shame to traverse
 
582
                    # the graph again, but better than re-implementing
 
583
                    # find_unique_lca.
 
584
                    self.base_rev_id = self.revision_graph.find_unique_lca(
 
585
                                            revisions[0], revisions[1])
 
586
                else:
 
587
                    self.base_rev_id = self.revision_graph.find_unique_lca(
 
588
                                            *lcas)
 
589
                self._is_criss_cross = True
 
590
            if self.base_rev_id == _mod_revision.NULL_REVISION:
 
591
                raise errors.UnrelatedBranches()
 
592
            if self._is_criss_cross:
 
593
                trace.warning('Warning: criss-cross merge encountered.  See bzr'
 
594
                              ' help criss-cross.')
 
595
                trace.mutter('Criss-cross lcas: %r' % lcas)
 
596
                interesting_revision_ids = [self.base_rev_id]
 
597
                interesting_revision_ids.extend(lcas)
 
598
                interesting_trees = dict((t.get_revision_id(), t)
 
599
                    for t in self.this_branch.repository.revision_trees(
 
600
                        interesting_revision_ids))
 
601
                self._cached_trees.update(interesting_trees)
 
602
                self.base_tree = interesting_trees.pop(self.base_rev_id)
 
603
                sorted_lca_keys = self.revision_graph.find_merge_order(
 
604
                    revisions[0], lcas)
 
605
                self._lca_trees = [interesting_trees[key]
 
606
                                   for key in sorted_lca_keys]
 
607
            else:
 
608
                self.base_tree = self.revision_tree(self.base_rev_id)
 
609
        self.base_is_ancestor = True
 
610
        self.base_is_other_ancestor = True
 
611
        trace.mutter('Base revid: %r' % self.base_rev_id)
 
612
 
 
613
    def set_base(self, base_revision):
 
614
        """Set the base revision to use for the merge.
 
615
 
 
616
        :param base_revision: A 2-list containing a path and revision number.
 
617
        """
 
618
        trace.mutter("doing merge() with no base_revision specified")
 
619
        if base_revision == [None, None]:
 
620
            self.find_base()
 
621
        else:
 
622
            base_branch, self.base_tree = self._get_tree(base_revision)
 
623
            if base_revision[1] == -1:
 
624
                self.base_rev_id = base_branch.last_revision()
 
625
            elif base_revision[1] is None:
 
626
                self.base_rev_id = _mod_revision.NULL_REVISION
 
627
            else:
 
628
                self.base_rev_id = _mod_revision.ensure_null(
 
629
                    base_branch.get_rev_id(base_revision[1]))
 
630
            self._maybe_fetch(base_branch, self.this_branch, self.base_rev_id)
 
631
 
 
632
    def make_merger(self):
 
633
        kwargs = {'working_tree':self.this_tree, 'this_tree': self.this_tree,
 
634
                  'other_tree': self.other_tree,
 
635
                  'interesting_ids': self.interesting_ids,
 
636
                  'interesting_files': self.interesting_files,
 
637
                  'this_branch': self.this_branch,
 
638
                  'do_merge': False}
 
639
        if self.merge_type.requires_base:
 
640
            kwargs['base_tree'] = self.base_tree
 
641
        if self.merge_type.supports_reprocess:
 
642
            kwargs['reprocess'] = self.reprocess
 
643
        elif self.reprocess:
 
644
            raise errors.BzrError(
 
645
                "Conflict reduction is not supported for merge"
 
646
                " type %s." % self.merge_type)
 
647
        if self.merge_type.supports_show_base:
 
648
            kwargs['show_base'] = self.show_base
 
649
        elif self.show_base:
 
650
            raise errors.BzrError("Showing base is not supported for this"
 
651
                                  " merge type. %s" % self.merge_type)
 
652
        if (not getattr(self.merge_type, 'supports_reverse_cherrypick', True)
 
653
            and not self.base_is_other_ancestor):
 
654
            raise errors.CannotReverseCherrypick()
 
655
        if self.merge_type.supports_cherrypick:
 
656
            kwargs['cherrypick'] = (not self.base_is_ancestor or
 
657
                                    not self.base_is_other_ancestor)
 
658
        if self._is_criss_cross and getattr(self.merge_type,
 
659
                                            'supports_lca_trees', False):
 
660
            kwargs['lca_trees'] = self._lca_trees
 
661
        return self.merge_type(pb=None,
 
662
                               change_reporter=self.change_reporter,
 
663
                               **kwargs)
 
664
 
 
665
    def _do_merge_to(self):
 
666
        merge = self.make_merger()
 
667
        if self.other_branch is not None:
 
668
            self.other_branch.update_references(self.this_branch)
 
669
        merge.do_merge()
 
670
        if self.recurse == 'down':
 
671
            for relpath, file_id in self.this_tree.iter_references():
 
672
                sub_tree = self.this_tree.get_nested_tree(file_id, relpath)
 
673
                other_revision = self.other_tree.get_reference_revision(
 
674
                    file_id, relpath)
 
675
                if  other_revision == sub_tree.last_revision():
 
676
                    continue
 
677
                sub_merge = Merger(sub_tree.branch, this_tree=sub_tree)
 
678
                sub_merge.merge_type = self.merge_type
 
679
                other_branch = self.other_branch.reference_parent(file_id, relpath)
 
680
                sub_merge.set_other_revision(other_revision, other_branch)
 
681
                base_revision = self.base_tree.get_reference_revision(file_id)
 
682
                sub_merge.base_tree = \
 
683
                    sub_tree.branch.repository.revision_tree(base_revision)
 
684
                sub_merge.base_rev_id = base_revision
 
685
                sub_merge.do_merge()
 
686
        return merge
 
687
 
 
688
    def do_merge(self):
 
689
        operation = OperationWithCleanups(self._do_merge_to)
 
690
        self.this_tree.lock_tree_write()
 
691
        operation.add_cleanup(self.this_tree.unlock)
 
692
        if self.base_tree is not None:
 
693
            self.base_tree.lock_read()
 
694
            operation.add_cleanup(self.base_tree.unlock)
 
695
        if self.other_tree is not None:
 
696
            self.other_tree.lock_read()
 
697
            operation.add_cleanup(self.other_tree.unlock)
 
698
        merge = operation.run_simple()
 
699
        if len(merge.cooked_conflicts) == 0:
 
700
            if not self.ignore_zero and not trace.is_quiet():
 
701
                trace.note("All changes applied successfully.")
 
702
        else:
 
703
            trace.note("%d conflicts encountered."
 
704
                       % len(merge.cooked_conflicts))
 
705
 
 
706
        return len(merge.cooked_conflicts)
 
707
 
 
708
 
 
709
class _InventoryNoneEntry(object):
 
710
    """This represents an inventory entry which *isn't there*.
 
711
 
 
712
    It simplifies the merging logic if we always have an InventoryEntry, even
 
713
    if it isn't actually present
 
714
    """
 
715
    executable = None
 
716
    kind = None
 
717
    name = None
 
718
    parent_id = None
 
719
    revision = None
 
720
    symlink_target = None
 
721
    text_sha1 = None
 
722
 
 
723
_none_entry = _InventoryNoneEntry()
 
724
 
 
725
 
 
726
class Merge3Merger(object):
 
727
    """Three-way merger that uses the merge3 text merger"""
 
728
    requires_base = True
 
729
    supports_reprocess = True
 
730
    supports_show_base = True
 
731
    history_based = False
 
732
    supports_cherrypick = True
 
733
    supports_reverse_cherrypick = True
 
734
    winner_idx = {"this": 2, "other": 1, "conflict": 1}
 
735
    supports_lca_trees = True
 
736
 
 
737
    def __init__(self, working_tree, this_tree, base_tree, other_tree,
 
738
                 interesting_ids=None, reprocess=False, show_base=False,
 
739
                 pb=None, pp=None, change_reporter=None,
 
740
                 interesting_files=None, do_merge=True,
 
741
                 cherrypick=False, lca_trees=None, this_branch=None):
 
742
        """Initialize the merger object and perform the merge.
 
743
 
 
744
        :param working_tree: The working tree to apply the merge to
 
745
        :param this_tree: The local tree in the merge operation
 
746
        :param base_tree: The common tree in the merge operation
 
747
        :param other_tree: The other tree to merge changes from
 
748
        :param this_branch: The branch associated with this_tree
 
749
        :param interesting_ids: The file_ids of files that should be
 
750
            participate in the merge.  May not be combined with
 
751
            interesting_files.
 
752
        :param: reprocess If True, perform conflict-reduction processing.
 
753
        :param show_base: If True, show the base revision in text conflicts.
 
754
            (incompatible with reprocess)
 
755
        :param pb: ignored
 
756
        :param pp: A ProgressPhase object
 
757
        :param change_reporter: An object that should report changes made
 
758
        :param interesting_files: The tree-relative paths of files that should
 
759
            participate in the merge.  If these paths refer to directories,
 
760
            the contents of those directories will also be included.  May not
 
761
            be combined with interesting_ids.  If neither interesting_files nor
 
762
            interesting_ids is specified, all files may participate in the
 
763
            merge.
 
764
        :param lca_trees: Can be set to a dictionary of {revision_id:rev_tree}
 
765
            if the ancestry was found to include a criss-cross merge.
 
766
            Otherwise should be None.
 
767
        """
 
768
        object.__init__(self)
 
769
        if interesting_files is not None and interesting_ids is not None:
 
770
            raise ValueError(
 
771
                'specify either interesting_ids or interesting_files')
 
772
        self.interesting_ids = interesting_ids
 
773
        self.interesting_files = interesting_files
 
774
        self.this_tree = working_tree
 
775
        self.base_tree = base_tree
 
776
        self.other_tree = other_tree
 
777
        self.this_branch = this_branch
 
778
        self._raw_conflicts = []
 
779
        self.cooked_conflicts = []
 
780
        self.reprocess = reprocess
 
781
        self.show_base = show_base
 
782
        self._lca_trees = lca_trees
 
783
        # Uncommenting this will change the default algorithm to always use
 
784
        # _entries_lca. This can be useful for running the test suite and
 
785
        # making sure we haven't missed any corner cases.
 
786
        # if lca_trees is None:
 
787
        #     self._lca_trees = [self.base_tree]
 
788
        self.change_reporter = change_reporter
 
789
        self.cherrypick = cherrypick
 
790
        if do_merge:
 
791
            self.do_merge()
 
792
        if pp is not None:
 
793
            warnings.warn("pp argument to Merge3Merger is deprecated")
 
794
        if pb is not None:
 
795
            warnings.warn("pb argument to Merge3Merger is deprecated")
 
796
 
 
797
    def do_merge(self):
 
798
        operation = OperationWithCleanups(self._do_merge)
 
799
        self.this_tree.lock_tree_write()
 
800
        operation.add_cleanup(self.this_tree.unlock)
 
801
        self.base_tree.lock_read()
 
802
        operation.add_cleanup(self.base_tree.unlock)
 
803
        self.other_tree.lock_read()
 
804
        operation.add_cleanup(self.other_tree.unlock)
 
805
        operation.run()
 
806
 
 
807
    def _do_merge(self, operation):
 
808
        self.tt = transform.TreeTransform(self.this_tree, None)
 
809
        operation.add_cleanup(self.tt.finalize)
 
810
        self._compute_transform()
 
811
        results = self.tt.apply(no_conflicts=True)
 
812
        self.write_modified(results)
 
813
        try:
 
814
            self.this_tree.add_conflicts(self.cooked_conflicts)
 
815
        except errors.UnsupportedOperation:
 
816
            pass
 
817
 
 
818
    def make_preview_transform(self):
 
819
        operation = OperationWithCleanups(self._make_preview_transform)
 
820
        self.base_tree.lock_read()
 
821
        operation.add_cleanup(self.base_tree.unlock)
 
822
        self.other_tree.lock_read()
 
823
        operation.add_cleanup(self.other_tree.unlock)
 
824
        return operation.run_simple()
 
825
 
 
826
    def _make_preview_transform(self):
 
827
        self.tt = transform.TransformPreview(self.this_tree)
 
828
        self._compute_transform()
 
829
        return self.tt
 
830
 
 
831
    def _compute_transform(self):
 
832
        if self._lca_trees is None:
 
833
            entries = self._entries3()
 
834
            resolver = self._three_way
 
835
        else:
 
836
            entries = self._entries_lca()
 
837
            resolver = self._lca_multi_way
 
838
        child_pb = ui.ui_factory.nested_progress_bar()
 
839
        try:
 
840
            factories = Merger.hooks['merge_file_content']
 
841
            hooks = [factory(self) for factory in factories] + [self]
 
842
            self.active_hooks = [hook for hook in hooks if hook is not None]
 
843
            for num, (file_id, changed, parents3, names3,
 
844
                      executable3) in enumerate(entries):
 
845
                child_pb.update('Preparing file merge', num, len(entries))
 
846
                self._merge_names(file_id, parents3, names3, resolver=resolver)
 
847
                if changed:
 
848
                    file_status = self._do_merge_contents(file_id)
 
849
                else:
 
850
                    file_status = 'unmodified'
 
851
                self._merge_executable(file_id,
 
852
                    executable3, file_status, resolver=resolver)
 
853
        finally:
 
854
            child_pb.finished()
 
855
        self.fix_root()
 
856
        child_pb = ui.ui_factory.nested_progress_bar()
 
857
        try:
 
858
            fs_conflicts = transform.resolve_conflicts(self.tt, child_pb,
 
859
                lambda t, c: transform.conflict_pass(t, c, self.other_tree))
 
860
        finally:
 
861
            child_pb.finished()
 
862
        if self.change_reporter is not None:
 
863
            from bzrlib import delta
 
864
            delta.report_changes(
 
865
                self.tt.iter_changes(), self.change_reporter)
 
866
        self.cook_conflicts(fs_conflicts)
 
867
        for conflict in self.cooked_conflicts:
 
868
            trace.warning(conflict)
 
869
 
 
870
    def _entries3(self):
 
871
        """Gather data about files modified between three trees.
 
872
 
 
873
        Return a list of tuples of file_id, changed, parents3, names3,
 
874
        executable3.  changed is a boolean indicating whether the file contents
 
875
        or kind were changed.  parents3 is a tuple of parent ids for base,
 
876
        other and this.  names3 is a tuple of names for base, other and this.
 
877
        executable3 is a tuple of execute-bit values for base, other and this.
 
878
        """
 
879
        result = []
 
880
        iterator = self.other_tree.iter_changes(self.base_tree,
 
881
                include_unchanged=True, specific_files=self.interesting_files,
 
882
                extra_trees=[self.this_tree])
 
883
        this_entries = dict((e.file_id, e) for p, e in
 
884
                            self.this_tree.iter_entries_by_dir(
 
885
                            self.interesting_ids))
 
886
        for (file_id, paths, changed, versioned, parents, names, kind,
 
887
             executable) in iterator:
 
888
            if (self.interesting_ids is not None and
 
889
                file_id not in self.interesting_ids):
 
890
                continue
 
891
            entry = this_entries.get(file_id)
 
892
            if entry is not None:
 
893
                this_name = entry.name
 
894
                this_parent = entry.parent_id
 
895
                this_executable = entry.executable
 
896
            else:
 
897
                this_name = None
 
898
                this_parent = None
 
899
                this_executable = None
 
900
            parents3 = parents + (this_parent,)
 
901
            names3 = names + (this_name,)
 
902
            executable3 = executable + (this_executable,)
 
903
            result.append((file_id, changed, parents3, names3, executable3))
 
904
        return result
 
905
 
 
906
    def _entries_lca(self):
 
907
        """Gather data about files modified between multiple trees.
 
908
 
 
909
        This compares OTHER versus all LCA trees, and for interesting entries,
 
910
        it then compares with THIS and BASE.
 
911
 
 
912
        For the multi-valued entries, the format will be (BASE, [lca1, lca2])
 
913
        :return: [(file_id, changed, parents, names, executable)]
 
914
            file_id     Simple file_id of the entry
 
915
            changed     Boolean, True if the kind or contents changed
 
916
                        else False
 
917
            parents     ((base, [parent_id, in, lcas]), parent_id_other,
 
918
                         parent_id_this)
 
919
            names       ((base, [name, in, lcas]), name_in_other, name_in_this)
 
920
            executable  ((base, [exec, in, lcas]), exec_in_other, exec_in_this)
 
921
        """
 
922
        if self.interesting_files is not None:
 
923
            lookup_trees = [self.this_tree, self.base_tree]
 
924
            lookup_trees.extend(self._lca_trees)
 
925
            # I think we should include the lca trees as well
 
926
            interesting_ids = self.other_tree.paths2ids(self.interesting_files,
 
927
                                                        lookup_trees)
 
928
        else:
 
929
            interesting_ids = self.interesting_ids
 
930
        result = []
 
931
        walker = _mod_tree.MultiWalker(self.other_tree, self._lca_trees)
 
932
 
 
933
        base_inventory = self.base_tree.inventory
 
934
        this_inventory = self.this_tree.inventory
 
935
        for path, file_id, other_ie, lca_values in walker.iter_all():
 
936
            # Is this modified at all from any of the other trees?
 
937
            if other_ie is None:
 
938
                other_ie = _none_entry
 
939
            if interesting_ids is not None and file_id not in interesting_ids:
 
940
                continue
 
941
 
 
942
            # If other_revision is found in any of the lcas, that means this
 
943
            # node is uninteresting. This is because when merging, if there are
 
944
            # multiple heads(), we have to create a new node. So if we didn't,
 
945
            # we know that the ancestry is linear, and that OTHER did not
 
946
            # modify anything
 
947
            # See doc/developers/lca_merge_resolution.txt for details
 
948
            other_revision = other_ie.revision
 
949
            if other_revision is not None:
 
950
                # We can't use this shortcut when other_revision is None,
 
951
                # because it may be None because things are WorkingTrees, and
 
952
                # not because it is *actually* None.
 
953
                is_unmodified = False
 
954
                for lca_path, ie in lca_values:
 
955
                    if ie is not None and ie.revision == other_revision:
 
956
                        is_unmodified = True
 
957
                        break
 
958
                if is_unmodified:
 
959
                    continue
 
960
 
 
961
            lca_entries = []
 
962
            for lca_path, lca_ie in lca_values:
 
963
                if lca_ie is None:
 
964
                    lca_entries.append(_none_entry)
 
965
                else:
 
966
                    lca_entries.append(lca_ie)
 
967
 
 
968
            if file_id in base_inventory:
 
969
                base_ie = base_inventory[file_id]
 
970
            else:
 
971
                base_ie = _none_entry
 
972
 
 
973
            if file_id in this_inventory:
 
974
                this_ie = this_inventory[file_id]
 
975
            else:
 
976
                this_ie = _none_entry
 
977
 
 
978
            lca_kinds = []
 
979
            lca_parent_ids = []
 
980
            lca_names = []
 
981
            lca_executable = []
 
982
            for lca_ie in lca_entries:
 
983
                lca_kinds.append(lca_ie.kind)
 
984
                lca_parent_ids.append(lca_ie.parent_id)
 
985
                lca_names.append(lca_ie.name)
 
986
                lca_executable.append(lca_ie.executable)
 
987
 
 
988
            kind_winner = self._lca_multi_way(
 
989
                (base_ie.kind, lca_kinds),
 
990
                other_ie.kind, this_ie.kind)
 
991
            parent_id_winner = self._lca_multi_way(
 
992
                (base_ie.parent_id, lca_parent_ids),
 
993
                other_ie.parent_id, this_ie.parent_id)
 
994
            name_winner = self._lca_multi_way(
 
995
                (base_ie.name, lca_names),
 
996
                other_ie.name, this_ie.name)
 
997
 
 
998
            content_changed = True
 
999
            if kind_winner == 'this':
 
1000
                # No kind change in OTHER, see if there are *any* changes
 
1001
                if other_ie.kind == 'directory':
 
1002
                    if parent_id_winner == 'this' and name_winner == 'this':
 
1003
                        # No change for this directory in OTHER, skip
 
1004
                        continue
 
1005
                    content_changed = False
 
1006
                elif other_ie.kind is None or other_ie.kind == 'file':
 
1007
                    def get_sha1(ie, tree):
 
1008
                        if ie.kind != 'file':
 
1009
                            return None
 
1010
                        return tree.get_file_sha1(file_id)
 
1011
                    base_sha1 = get_sha1(base_ie, self.base_tree)
 
1012
                    lca_sha1s = [get_sha1(ie, tree) for ie, tree
 
1013
                                 in zip(lca_entries, self._lca_trees)]
 
1014
                    this_sha1 = get_sha1(this_ie, self.this_tree)
 
1015
                    other_sha1 = get_sha1(other_ie, self.other_tree)
 
1016
                    sha1_winner = self._lca_multi_way(
 
1017
                        (base_sha1, lca_sha1s), other_sha1, this_sha1,
 
1018
                        allow_overriding_lca=False)
 
1019
                    exec_winner = self._lca_multi_way(
 
1020
                        (base_ie.executable, lca_executable),
 
1021
                        other_ie.executable, this_ie.executable)
 
1022
                    if (parent_id_winner == 'this' and name_winner == 'this'
 
1023
                        and sha1_winner == 'this' and exec_winner == 'this'):
 
1024
                        # No kind, parent, name, exec, or content change for
 
1025
                        # OTHER, so this node is not considered interesting
 
1026
                        continue
 
1027
                    if sha1_winner == 'this':
 
1028
                        content_changed = False
 
1029
                elif other_ie.kind == 'symlink':
 
1030
                    def get_target(ie, tree):
 
1031
                        if ie.kind != 'symlink':
 
1032
                            return None
 
1033
                        return tree.get_symlink_target(file_id)
 
1034
                    base_target = get_target(base_ie, self.base_tree)
 
1035
                    lca_targets = [get_target(ie, tree) for ie, tree
 
1036
                                   in zip(lca_entries, self._lca_trees)]
 
1037
                    this_target = get_target(this_ie, self.this_tree)
 
1038
                    other_target = get_target(other_ie, self.other_tree)
 
1039
                    target_winner = self._lca_multi_way(
 
1040
                        (base_target, lca_targets),
 
1041
                        other_target, this_target)
 
1042
                    if (parent_id_winner == 'this' and name_winner == 'this'
 
1043
                        and target_winner == 'this'):
 
1044
                        # No kind, parent, name, or symlink target change
 
1045
                        # not interesting
 
1046
                        continue
 
1047
                    if target_winner == 'this':
 
1048
                        content_changed = False
 
1049
                elif other_ie.kind == 'tree-reference':
 
1050
                    # The 'changed' information seems to be handled at a higher
 
1051
                    # level. At least, _entries3 returns False for content
 
1052
                    # changed, even when at a new revision_id.
 
1053
                    content_changed = False
 
1054
                    if (parent_id_winner == 'this' and name_winner == 'this'):
 
1055
                        # Nothing interesting
 
1056
                        continue
 
1057
                else:
 
1058
                    raise AssertionError('unhandled kind: %s' % other_ie.kind)
 
1059
 
 
1060
            # If we have gotten this far, that means something has changed
 
1061
            result.append((file_id, content_changed,
 
1062
                           ((base_ie.parent_id, lca_parent_ids),
 
1063
                            other_ie.parent_id, this_ie.parent_id),
 
1064
                           ((base_ie.name, lca_names),
 
1065
                            other_ie.name, this_ie.name),
 
1066
                           ((base_ie.executable, lca_executable),
 
1067
                            other_ie.executable, this_ie.executable)
 
1068
                          ))
 
1069
        return result
 
1070
 
 
1071
 
 
1072
    def fix_root(self):
 
1073
        try:
 
1074
            self.tt.final_kind(self.tt.root)
 
1075
        except errors.NoSuchFile:
 
1076
            self.tt.cancel_deletion(self.tt.root)
 
1077
        if self.tt.final_file_id(self.tt.root) is None:
 
1078
            self.tt.version_file(self.tt.tree_file_id(self.tt.root),
 
1079
                                 self.tt.root)
 
1080
        other_root_file_id = self.other_tree.get_root_id()
 
1081
        if other_root_file_id is None:
 
1082
            return
 
1083
        other_root = self.tt.trans_id_file_id(other_root_file_id)
 
1084
        if other_root == self.tt.root:
 
1085
            return
 
1086
        if self.other_tree.inventory.root.file_id in self.this_tree.inventory:
 
1087
            # the other tree's root is a non-root in the current tree (as when
 
1088
            # a previously unrelated branch is merged into another)
 
1089
            return
 
1090
        try:
 
1091
            self.tt.final_kind(other_root)
 
1092
            other_root_is_present = True
 
1093
        except errors.NoSuchFile:
 
1094
            # other_root doesn't have a physical representation. We still need
 
1095
            # to move any references to the actual root of the tree.
 
1096
            other_root_is_present = False
 
1097
        # 'other_tree.inventory.root' is not present in this tree. We are
 
1098
        # calling adjust_path for children which *want* to be present with a
 
1099
        # correct place to go.
 
1100
        for thing, child in self.other_tree.inventory.root.children.iteritems():
 
1101
            trans_id = self.tt.trans_id_file_id(child.file_id)
 
1102
            if not other_root_is_present:
 
1103
                # FIXME: Make final_kind returns None instead of raising
 
1104
                # NoSuchFile to avoid the ugly construct below -- vila 20100402
 
1105
                try:
 
1106
                    self.tt.final_kind(trans_id)
 
1107
                    # The item exist in the final tree and has a defined place
 
1108
                    # to go already.
 
1109
                    continue
 
1110
                except errors.NoSuchFile, e:
 
1111
                    pass
 
1112
            # Move the item into the root
 
1113
            self.tt.adjust_path(self.tt.final_name(trans_id),
 
1114
                                self.tt.root, trans_id)
 
1115
        if other_root_is_present:
 
1116
            self.tt.cancel_creation(other_root)
 
1117
            self.tt.cancel_versioning(other_root)
 
1118
 
 
1119
    def write_modified(self, results):
 
1120
        modified_hashes = {}
 
1121
        for path in results.modified_paths:
 
1122
            file_id = self.this_tree.path2id(self.this_tree.relpath(path))
 
1123
            if file_id is None:
 
1124
                continue
 
1125
            hash = self.this_tree.get_file_sha1(file_id)
 
1126
            if hash is None:
 
1127
                continue
 
1128
            modified_hashes[file_id] = hash
 
1129
        self.this_tree.set_merge_modified(modified_hashes)
 
1130
 
 
1131
    @staticmethod
 
1132
    def parent(entry, file_id):
 
1133
        """Determine the parent for a file_id (used as a key method)"""
 
1134
        if entry is None:
 
1135
            return None
 
1136
        return entry.parent_id
 
1137
 
 
1138
    @staticmethod
 
1139
    def name(entry, file_id):
 
1140
        """Determine the name for a file_id (used as a key method)"""
 
1141
        if entry is None:
 
1142
            return None
 
1143
        return entry.name
 
1144
 
 
1145
    @staticmethod
 
1146
    def contents_sha1(tree, file_id):
 
1147
        """Determine the sha1 of the file contents (used as a key method)."""
 
1148
        if file_id not in tree:
 
1149
            return None
 
1150
        return tree.get_file_sha1(file_id)
 
1151
 
 
1152
    @staticmethod
 
1153
    def executable(tree, file_id):
 
1154
        """Determine the executability of a file-id (used as a key method)."""
 
1155
        if not tree.has_id(file_id):
 
1156
            return None
 
1157
        if tree.kind(file_id) != "file":
 
1158
            return False
 
1159
        return tree.is_executable(file_id)
 
1160
 
 
1161
    @staticmethod
 
1162
    def kind(tree, file_id):
 
1163
        """Determine the kind of a file-id (used as a key method)."""
 
1164
        if not tree.has_id(file_id):
 
1165
            return None
 
1166
        return tree.kind(file_id)
 
1167
 
 
1168
    @staticmethod
 
1169
    def _three_way(base, other, this):
 
1170
        if base == other:
 
1171
            # if 'base == other', either they all agree, or only 'this' has
 
1172
            # changed.
 
1173
            return 'this'
 
1174
        elif this not in (base, other):
 
1175
            # 'this' is neither 'base' nor 'other', so both sides changed
 
1176
            return 'conflict'
 
1177
        elif this == other:
 
1178
            # "Ambiguous clean merge" -- both sides have made the same change.
 
1179
            return "this"
 
1180
        else:
 
1181
            # this == base: only other has changed.
 
1182
            return "other"
 
1183
 
 
1184
    @staticmethod
 
1185
    def _lca_multi_way(bases, other, this, allow_overriding_lca=True):
 
1186
        """Consider LCAs when determining whether a change has occurred.
 
1187
 
 
1188
        If LCAS are all identical, this is the same as a _three_way comparison.
 
1189
 
 
1190
        :param bases: value in (BASE, [LCAS])
 
1191
        :param other: value in OTHER
 
1192
        :param this: value in THIS
 
1193
        :param allow_overriding_lca: If there is more than one unique lca
 
1194
            value, allow OTHER to override THIS if it has a new value, and
 
1195
            THIS only has an lca value, or vice versa. This is appropriate for
 
1196
            truly scalar values, not as much for non-scalars.
 
1197
        :return: 'this', 'other', or 'conflict' depending on whether an entry
 
1198
            changed or not.
 
1199
        """
 
1200
        # See doc/developers/lca_tree_merging.txt for details about this
 
1201
        # algorithm.
 
1202
        if other == this:
 
1203
            # Either Ambiguously clean, or nothing was actually changed. We
 
1204
            # don't really care
 
1205
            return 'this'
 
1206
        base_val, lca_vals = bases
 
1207
        # Remove 'base_val' from the lca_vals, because it is not interesting
 
1208
        filtered_lca_vals = [lca_val for lca_val in lca_vals
 
1209
                                      if lca_val != base_val]
 
1210
        if len(filtered_lca_vals) == 0:
 
1211
            return Merge3Merger._three_way(base_val, other, this)
 
1212
 
 
1213
        unique_lca_vals = set(filtered_lca_vals)
 
1214
        if len(unique_lca_vals) == 1:
 
1215
            return Merge3Merger._three_way(unique_lca_vals.pop(), other, this)
 
1216
 
 
1217
        if allow_overriding_lca:
 
1218
            if other in unique_lca_vals:
 
1219
                if this in unique_lca_vals:
 
1220
                    # Each side picked a different lca, conflict
 
1221
                    return 'conflict'
 
1222
                else:
 
1223
                    # This has a value which supersedes both lca values, and
 
1224
                    # other only has an lca value
 
1225
                    return 'this'
 
1226
            elif this in unique_lca_vals:
 
1227
                # OTHER has a value which supersedes both lca values, and this
 
1228
                # only has an lca value
 
1229
                return 'other'
 
1230
 
 
1231
        # At this point, the lcas disagree, and the tip disagree
 
1232
        return 'conflict'
 
1233
 
 
1234
    @staticmethod
 
1235
    @deprecated_method(deprecated_in((2, 2, 0)))
 
1236
    def scalar_three_way(this_tree, base_tree, other_tree, file_id, key):
 
1237
        """Do a three-way test on a scalar.
 
1238
        Return "this", "other" or "conflict", depending whether a value wins.
 
1239
        """
 
1240
        key_base = key(base_tree, file_id)
 
1241
        key_other = key(other_tree, file_id)
 
1242
        #if base == other, either they all agree, or only THIS has changed.
 
1243
        if key_base == key_other:
 
1244
            return "this"
 
1245
        key_this = key(this_tree, file_id)
 
1246
        # "Ambiguous clean merge"
 
1247
        if key_this == key_other:
 
1248
            return "this"
 
1249
        elif key_this == key_base:
 
1250
            return "other"
 
1251
        else:
 
1252
            return "conflict"
 
1253
 
 
1254
    def merge_names(self, file_id):
 
1255
        def get_entry(tree):
 
1256
            if tree.has_id(file_id):
 
1257
                return tree.inventory[file_id]
 
1258
            else:
 
1259
                return None
 
1260
        this_entry = get_entry(self.this_tree)
 
1261
        other_entry = get_entry(self.other_tree)
 
1262
        base_entry = get_entry(self.base_tree)
 
1263
        entries = (base_entry, other_entry, this_entry)
 
1264
        names = []
 
1265
        parents = []
 
1266
        for entry in entries:
 
1267
            if entry is None:
 
1268
                names.append(None)
 
1269
                parents.append(None)
 
1270
            else:
 
1271
                names.append(entry.name)
 
1272
                parents.append(entry.parent_id)
 
1273
        return self._merge_names(file_id, parents, names,
 
1274
                                 resolver=self._three_way)
 
1275
 
 
1276
    def _merge_names(self, file_id, parents, names, resolver):
 
1277
        """Perform a merge on file_id names and parents"""
 
1278
        base_name, other_name, this_name = names
 
1279
        base_parent, other_parent, this_parent = parents
 
1280
 
 
1281
        name_winner = resolver(*names)
 
1282
 
 
1283
        parent_id_winner = resolver(*parents)
 
1284
        if this_name is None:
 
1285
            if name_winner == "this":
 
1286
                name_winner = "other"
 
1287
            if parent_id_winner == "this":
 
1288
                parent_id_winner = "other"
 
1289
        if name_winner == "this" and parent_id_winner == "this":
 
1290
            return
 
1291
        if name_winner == 'conflict' or parent_id_winner == 'conflict':
 
1292
            # Creating helpers (.OTHER or .THIS) here cause problems down the
 
1293
            # road if a ContentConflict needs to be created so we should not do
 
1294
            # that
 
1295
            trans_id = self.tt.trans_id_file_id(file_id)
 
1296
            self._raw_conflicts.append(('path conflict', trans_id, file_id,
 
1297
                                        this_parent, this_name,
 
1298
                                        other_parent, other_name))
 
1299
        if other_name is None:
 
1300
            # it doesn't matter whether the result was 'other' or
 
1301
            # 'conflict'-- if there's no 'other', we leave it alone.
 
1302
            return
 
1303
        parent_id = parents[self.winner_idx[parent_id_winner]]
 
1304
        if parent_id is not None:
 
1305
            # if we get here, name_winner and parent_winner are set to safe
 
1306
            # values.
 
1307
            self.tt.adjust_path(names[self.winner_idx[name_winner]],
 
1308
                                self.tt.trans_id_file_id(parent_id),
 
1309
                                self.tt.trans_id_file_id(file_id))
 
1310
 
 
1311
    def _do_merge_contents(self, file_id):
 
1312
        """Performs a merge on file_id contents."""
 
1313
        def contents_pair(tree):
 
1314
            if file_id not in tree:
 
1315
                return (None, None)
 
1316
            kind = tree.kind(file_id)
 
1317
            if kind == "file":
 
1318
                contents = tree.get_file_sha1(file_id)
 
1319
            elif kind == "symlink":
 
1320
                contents = tree.get_symlink_target(file_id)
 
1321
            else:
 
1322
                contents = None
 
1323
            return kind, contents
 
1324
 
 
1325
        # See SPOT run.  run, SPOT, run.
 
1326
        # So we're not QUITE repeating ourselves; we do tricky things with
 
1327
        # file kind...
 
1328
        base_pair = contents_pair(self.base_tree)
 
1329
        other_pair = contents_pair(self.other_tree)
 
1330
        if self._lca_trees:
 
1331
            this_pair = contents_pair(self.this_tree)
 
1332
            lca_pairs = [contents_pair(tree) for tree in self._lca_trees]
 
1333
            winner = self._lca_multi_way((base_pair, lca_pairs), other_pair,
 
1334
                                         this_pair, allow_overriding_lca=False)
 
1335
        else:
 
1336
            if base_pair == other_pair:
 
1337
                winner = 'this'
 
1338
            else:
 
1339
                # We delayed evaluating this_pair as long as we can to avoid
 
1340
                # unnecessary sha1 calculation
 
1341
                this_pair = contents_pair(self.this_tree)
 
1342
                winner = self._three_way(base_pair, other_pair, this_pair)
 
1343
        if winner == 'this':
 
1344
            # No interesting changes introduced by OTHER
 
1345
            return "unmodified"
 
1346
        # We have a hypothetical conflict, but if we have files, then we
 
1347
        # can try to merge the content
 
1348
        trans_id = self.tt.trans_id_file_id(file_id)
 
1349
        params = MergeHookParams(self, file_id, trans_id, this_pair[0],
 
1350
            other_pair[0], winner)
 
1351
        hooks = self.active_hooks
 
1352
        hook_status = 'not_applicable'
 
1353
        for hook in hooks:
 
1354
            hook_status, lines = hook.merge_contents(params)
 
1355
            if hook_status != 'not_applicable':
 
1356
                # Don't try any more hooks, this one applies.
 
1357
                break
 
1358
        result = "modified"
 
1359
        if hook_status == 'not_applicable':
 
1360
            # This is a contents conflict, because none of the available
 
1361
            # functions could merge it.
 
1362
            result = None
 
1363
            name = self.tt.final_name(trans_id)
 
1364
            parent_id = self.tt.final_parent(trans_id)
 
1365
            if self.this_tree.has_id(file_id):
 
1366
                self.tt.unversion_file(trans_id)
 
1367
            file_group = self._dump_conflicts(name, parent_id, file_id,
 
1368
                                              set_version=True)
 
1369
            self._raw_conflicts.append(('contents conflict', file_group))
 
1370
        elif hook_status == 'success':
 
1371
            self.tt.create_file(lines, trans_id)
 
1372
        elif hook_status == 'conflicted':
 
1373
            # XXX: perhaps the hook should be able to provide
 
1374
            # the BASE/THIS/OTHER files?
 
1375
            self.tt.create_file(lines, trans_id)
 
1376
            self._raw_conflicts.append(('text conflict', trans_id))
 
1377
            name = self.tt.final_name(trans_id)
 
1378
            parent_id = self.tt.final_parent(trans_id)
 
1379
            self._dump_conflicts(name, parent_id, file_id)
 
1380
        elif hook_status == 'delete':
 
1381
            self.tt.unversion_file(trans_id)
 
1382
            result = "deleted"
 
1383
        elif hook_status == 'done':
 
1384
            # The hook function did whatever it needs to do directly, no
 
1385
            # further action needed here.
 
1386
            pass
 
1387
        else:
 
1388
            raise AssertionError('unknown hook_status: %r' % (hook_status,))
 
1389
        if not self.this_tree.has_id(file_id) and result == "modified":
 
1390
            self.tt.version_file(file_id, trans_id)
 
1391
        # The merge has been performed, so the old contents should not be
 
1392
        # retained.
 
1393
        try:
 
1394
            self.tt.delete_contents(trans_id)
 
1395
        except errors.NoSuchFile:
 
1396
            pass
 
1397
        return result
 
1398
 
 
1399
    def _default_other_winner_merge(self, merge_hook_params):
 
1400
        """Replace this contents with other."""
 
1401
        file_id = merge_hook_params.file_id
 
1402
        trans_id = merge_hook_params.trans_id
 
1403
        file_in_this = self.this_tree.has_id(file_id)
 
1404
        if self.other_tree.has_id(file_id):
 
1405
            # OTHER changed the file
 
1406
            wt = self.this_tree
 
1407
            if wt.supports_content_filtering():
 
1408
                # We get the path from the working tree if it exists.
 
1409
                # That fails though when OTHER is adding a file, so
 
1410
                # we fall back to the other tree to find the path if
 
1411
                # it doesn't exist locally.
 
1412
                try:
 
1413
                    filter_tree_path = wt.id2path(file_id)
 
1414
                except errors.NoSuchId:
 
1415
                    filter_tree_path = self.other_tree.id2path(file_id)
 
1416
            else:
 
1417
                # Skip the id2path lookup for older formats
 
1418
                filter_tree_path = None
 
1419
            transform.create_from_tree(self.tt, trans_id,
 
1420
                             self.other_tree, file_id,
 
1421
                             filter_tree_path=filter_tree_path)
 
1422
            return 'done', None
 
1423
        elif file_in_this:
 
1424
            # OTHER deleted the file
 
1425
            return 'delete', None
 
1426
        else:
 
1427
            raise AssertionError(
 
1428
                'winner is OTHER, but file_id %r not in THIS or OTHER tree'
 
1429
                % (file_id,))
 
1430
 
 
1431
    def merge_contents(self, merge_hook_params):
 
1432
        """Fallback merge logic after user installed hooks."""
 
1433
        # This function is used in merge hooks as the fallback instance.
 
1434
        # Perhaps making this function and the functions it calls be a 
 
1435
        # a separate class would be better.
 
1436
        if merge_hook_params.winner == 'other':
 
1437
            # OTHER is a straight winner, so replace this contents with other
 
1438
            return self._default_other_winner_merge(merge_hook_params)
 
1439
        elif merge_hook_params.is_file_merge():
 
1440
            # THIS and OTHER are both files, so text merge.  Either
 
1441
            # BASE is a file, or both converted to files, so at least we
 
1442
            # have agreement that output should be a file.
 
1443
            try:
 
1444
                self.text_merge(merge_hook_params.file_id,
 
1445
                    merge_hook_params.trans_id)
 
1446
            except errors.BinaryFile:
 
1447
                return 'not_applicable', None
 
1448
            return 'done', None
 
1449
        else:
 
1450
            return 'not_applicable', None
 
1451
 
 
1452
    def get_lines(self, tree, file_id):
 
1453
        """Return the lines in a file, or an empty list."""
 
1454
        if tree.has_id(file_id):
 
1455
            return tree.get_file(file_id).readlines()
 
1456
        else:
 
1457
            return []
 
1458
 
 
1459
    def text_merge(self, file_id, trans_id):
 
1460
        """Perform a three-way text merge on a file_id"""
 
1461
        # it's possible that we got here with base as a different type.
 
1462
        # if so, we just want two-way text conflicts.
 
1463
        if self.base_tree.has_id(file_id) and \
 
1464
            self.base_tree.kind(file_id) == "file":
 
1465
            base_lines = self.get_lines(self.base_tree, file_id)
 
1466
        else:
 
1467
            base_lines = []
 
1468
        other_lines = self.get_lines(self.other_tree, file_id)
 
1469
        this_lines = self.get_lines(self.this_tree, file_id)
 
1470
        m3 = merge3.Merge3(base_lines, this_lines, other_lines,
 
1471
                           is_cherrypick=self.cherrypick)
 
1472
        start_marker = "!START OF MERGE CONFLICT!" + "I HOPE THIS IS UNIQUE"
 
1473
        if self.show_base is True:
 
1474
            base_marker = '|' * 7
 
1475
        else:
 
1476
            base_marker = None
 
1477
 
 
1478
        def iter_merge3(retval):
 
1479
            retval["text_conflicts"] = False
 
1480
            for line in m3.merge_lines(name_a = "TREE",
 
1481
                                       name_b = "MERGE-SOURCE",
 
1482
                                       name_base = "BASE-REVISION",
 
1483
                                       start_marker=start_marker,
 
1484
                                       base_marker=base_marker,
 
1485
                                       reprocess=self.reprocess):
 
1486
                if line.startswith(start_marker):
 
1487
                    retval["text_conflicts"] = True
 
1488
                    yield line.replace(start_marker, '<' * 7)
 
1489
                else:
 
1490
                    yield line
 
1491
        retval = {}
 
1492
        merge3_iterator = iter_merge3(retval)
 
1493
        self.tt.create_file(merge3_iterator, trans_id)
 
1494
        if retval["text_conflicts"] is True:
 
1495
            self._raw_conflicts.append(('text conflict', trans_id))
 
1496
            name = self.tt.final_name(trans_id)
 
1497
            parent_id = self.tt.final_parent(trans_id)
 
1498
            file_group = self._dump_conflicts(name, parent_id, file_id,
 
1499
                                              this_lines, base_lines,
 
1500
                                              other_lines)
 
1501
            file_group.append(trans_id)
 
1502
 
 
1503
    def _dump_conflicts(self, name, parent_id, file_id, this_lines=None,
 
1504
                        base_lines=None, other_lines=None, set_version=False,
 
1505
                        no_base=False):
 
1506
        """Emit conflict files.
 
1507
        If this_lines, base_lines, or other_lines are omitted, they will be
 
1508
        determined automatically.  If set_version is true, the .OTHER, .THIS
 
1509
        or .BASE (in that order) will be created as versioned files.
 
1510
        """
 
1511
        data = [('OTHER', self.other_tree, other_lines),
 
1512
                ('THIS', self.this_tree, this_lines)]
 
1513
        if not no_base:
 
1514
            data.append(('BASE', self.base_tree, base_lines))
 
1515
 
 
1516
        # We need to use the actual path in the working tree of the file here,
 
1517
        # ignoring the conflict suffixes
 
1518
        wt = self.this_tree
 
1519
        if wt.supports_content_filtering():
 
1520
            try:
 
1521
                filter_tree_path = wt.id2path(file_id)
 
1522
            except errors.NoSuchId:
 
1523
                # file has been deleted
 
1524
                filter_tree_path = None
 
1525
        else:
 
1526
            # Skip the id2path lookup for older formats
 
1527
            filter_tree_path = None
 
1528
 
 
1529
        versioned = False
 
1530
        file_group = []
 
1531
        for suffix, tree, lines in data:
 
1532
            if tree.has_id(file_id):
 
1533
                trans_id = self._conflict_file(name, parent_id, tree, file_id,
 
1534
                                               suffix, lines, filter_tree_path)
 
1535
                file_group.append(trans_id)
 
1536
                if set_version and not versioned:
 
1537
                    self.tt.version_file(file_id, trans_id)
 
1538
                    versioned = True
 
1539
        return file_group
 
1540
 
 
1541
    def _conflict_file(self, name, parent_id, tree, file_id, suffix,
 
1542
                       lines=None, filter_tree_path=None):
 
1543
        """Emit a single conflict file."""
 
1544
        name = name + '.' + suffix
 
1545
        trans_id = self.tt.create_path(name, parent_id)
 
1546
        transform.create_from_tree(self.tt, trans_id, tree, file_id, lines,
 
1547
            filter_tree_path)
 
1548
        return trans_id
 
1549
 
 
1550
    def merge_executable(self, file_id, file_status):
 
1551
        """Perform a merge on the execute bit."""
 
1552
        executable = [self.executable(t, file_id) for t in (self.base_tree,
 
1553
                      self.other_tree, self.this_tree)]
 
1554
        self._merge_executable(file_id, executable, file_status,
 
1555
                               resolver=self._three_way)
 
1556
 
 
1557
    def _merge_executable(self, file_id, executable, file_status,
 
1558
                          resolver):
 
1559
        """Perform a merge on the execute bit."""
 
1560
        base_executable, other_executable, this_executable = executable
 
1561
        if file_status == "deleted":
 
1562
            return
 
1563
        winner = resolver(*executable)
 
1564
        if winner == "conflict":
 
1565
        # There must be a None in here, if we have a conflict, but we
 
1566
        # need executability since file status was not deleted.
 
1567
            if self.executable(self.other_tree, file_id) is None:
 
1568
                winner = "this"
 
1569
            else:
 
1570
                winner = "other"
 
1571
        if winner == 'this' and file_status != "modified":
 
1572
            return
 
1573
        trans_id = self.tt.trans_id_file_id(file_id)
 
1574
        try:
 
1575
            if self.tt.final_kind(trans_id) != "file":
 
1576
                return
 
1577
        except errors.NoSuchFile:
 
1578
            return
 
1579
        if winner == "this":
 
1580
            executability = this_executable
 
1581
        else:
 
1582
            if self.other_tree.has_id(file_id):
 
1583
                executability = other_executable
 
1584
            elif self.this_tree.has_id(file_id):
 
1585
                executability = this_executable
 
1586
            elif self.base_tree_has_id(file_id):
 
1587
                executability = base_executable
 
1588
        if executability is not None:
 
1589
            trans_id = self.tt.trans_id_file_id(file_id)
 
1590
            self.tt.set_executability(executability, trans_id)
 
1591
 
 
1592
    def cook_conflicts(self, fs_conflicts):
 
1593
        """Convert all conflicts into a form that doesn't depend on trans_id"""
 
1594
        self.cooked_conflicts.extend(transform.cook_conflicts(
 
1595
                fs_conflicts, self.tt))
 
1596
        fp = transform.FinalPaths(self.tt)
 
1597
        for conflict in self._raw_conflicts:
 
1598
            conflict_type = conflict[0]
 
1599
            if conflict_type == 'path conflict':
 
1600
                (trans_id, file_id,
 
1601
                this_parent, this_name,
 
1602
                other_parent, other_name) = conflict[1:]
 
1603
                if this_parent is None or this_name is None:
 
1604
                    this_path = '<deleted>'
 
1605
                else:
 
1606
                    parent_path =  fp.get_path(
 
1607
                        self.tt.trans_id_file_id(this_parent))
 
1608
                    this_path = osutils.pathjoin(parent_path, this_name)
 
1609
                if other_parent is None or other_name is None:
 
1610
                    other_path = '<deleted>'
 
1611
                else:
 
1612
                    parent_path =  fp.get_path(
 
1613
                        self.tt.trans_id_file_id(other_parent))
 
1614
                    other_path = osutils.pathjoin(parent_path, other_name)
 
1615
                c = _mod_conflicts.Conflict.factory(
 
1616
                    'path conflict', path=this_path,
 
1617
                    conflict_path=other_path,
 
1618
                    file_id=file_id)
 
1619
            elif conflict_type == 'contents conflict':
 
1620
                for trans_id in conflict[1]:
 
1621
                    file_id = self.tt.final_file_id(trans_id)
 
1622
                    if file_id is not None:
 
1623
                        break
 
1624
                path = fp.get_path(trans_id)
 
1625
                for suffix in ('.BASE', '.THIS', '.OTHER'):
 
1626
                    if path.endswith(suffix):
 
1627
                        path = path[:-len(suffix)]
 
1628
                        break
 
1629
                c = _mod_conflicts.Conflict.factory(conflict_type,
 
1630
                                                    path=path, file_id=file_id)
 
1631
            elif conflict_type == 'text conflict':
 
1632
                trans_id = conflict[1]
 
1633
                path = fp.get_path(trans_id)
 
1634
                file_id = self.tt.final_file_id(trans_id)
 
1635
                c = _mod_conflicts.Conflict.factory(conflict_type,
 
1636
                                                    path=path, file_id=file_id)
 
1637
            else:
 
1638
                raise AssertionError('bad conflict type: %r' % (conflict,))
 
1639
            self.cooked_conflicts.append(c)
 
1640
        self.cooked_conflicts.sort(key=_mod_conflicts.Conflict.sort_key)
 
1641
 
 
1642
 
 
1643
class WeaveMerger(Merge3Merger):
 
1644
    """Three-way tree merger, text weave merger."""
 
1645
    supports_reprocess = True
 
1646
    supports_show_base = False
 
1647
    supports_reverse_cherrypick = False
 
1648
    history_based = True
 
1649
 
 
1650
    def _generate_merge_plan(self, file_id, base):
 
1651
        return self.this_tree.plan_file_merge(file_id, self.other_tree,
 
1652
                                              base=base)
 
1653
 
 
1654
    def _merged_lines(self, file_id):
 
1655
        """Generate the merged lines.
 
1656
        There is no distinction between lines that are meant to contain <<<<<<<
 
1657
        and conflicts.
 
1658
        """
 
1659
        if self.cherrypick:
 
1660
            base = self.base_tree
 
1661
        else:
 
1662
            base = None
 
1663
        plan = self._generate_merge_plan(file_id, base)
 
1664
        if 'merge' in debug.debug_flags:
 
1665
            plan = list(plan)
 
1666
            trans_id = self.tt.trans_id_file_id(file_id)
 
1667
            name = self.tt.final_name(trans_id) + '.plan'
 
1668
            contents = ('%11s|%s' % l for l in plan)
 
1669
            self.tt.new_file(name, self.tt.final_parent(trans_id), contents)
 
1670
        textmerge = versionedfile.PlanWeaveMerge(plan, '<<<<<<< TREE\n',
 
1671
                                                 '>>>>>>> MERGE-SOURCE\n')
 
1672
        lines, conflicts = textmerge.merge_lines(self.reprocess)
 
1673
        if conflicts:
 
1674
            base_lines = textmerge.base_from_plan()
 
1675
        else:
 
1676
            base_lines = None
 
1677
        return lines, base_lines
 
1678
 
 
1679
    def text_merge(self, file_id, trans_id):
 
1680
        """Perform a (weave) text merge for a given file and file-id.
 
1681
        If conflicts are encountered, .THIS and .OTHER files will be emitted,
 
1682
        and a conflict will be noted.
 
1683
        """
 
1684
        lines, base_lines = self._merged_lines(file_id)
 
1685
        lines = list(lines)
 
1686
        # Note we're checking whether the OUTPUT is binary in this case,
 
1687
        # because we don't want to get into weave merge guts.
 
1688
        textfile.check_text_lines(lines)
 
1689
        self.tt.create_file(lines, trans_id)
 
1690
        if base_lines is not None:
 
1691
            # Conflict
 
1692
            self._raw_conflicts.append(('text conflict', trans_id))
 
1693
            name = self.tt.final_name(trans_id)
 
1694
            parent_id = self.tt.final_parent(trans_id)
 
1695
            file_group = self._dump_conflicts(name, parent_id, file_id,
 
1696
                                              no_base=False,
 
1697
                                              base_lines=base_lines)
 
1698
            file_group.append(trans_id)
 
1699
 
 
1700
 
 
1701
class LCAMerger(WeaveMerger):
 
1702
 
 
1703
    def _generate_merge_plan(self, file_id, base):
 
1704
        return self.this_tree.plan_file_lca_merge(file_id, self.other_tree,
 
1705
                                                  base=base)
 
1706
 
 
1707
class Diff3Merger(Merge3Merger):
 
1708
    """Three-way merger using external diff3 for text merging"""
 
1709
 
 
1710
    def dump_file(self, temp_dir, name, tree, file_id):
 
1711
        out_path = osutils.pathjoin(temp_dir, name)
 
1712
        out_file = open(out_path, "wb")
 
1713
        try:
 
1714
            in_file = tree.get_file(file_id)
 
1715
            for line in in_file:
 
1716
                out_file.write(line)
 
1717
        finally:
 
1718
            out_file.close()
 
1719
        return out_path
 
1720
 
 
1721
    def text_merge(self, file_id, trans_id):
 
1722
        """Perform a diff3 merge using a specified file-id and trans-id.
 
1723
        If conflicts are encountered, .BASE, .THIS. and .OTHER conflict files
 
1724
        will be dumped, and a will be conflict noted.
 
1725
        """
 
1726
        import bzrlib.patch
 
1727
        temp_dir = osutils.mkdtemp(prefix="bzr-")
 
1728
        try:
 
1729
            new_file = osutils.pathjoin(temp_dir, "new")
 
1730
            this = self.dump_file(temp_dir, "this", self.this_tree, file_id)
 
1731
            base = self.dump_file(temp_dir, "base", self.base_tree, file_id)
 
1732
            other = self.dump_file(temp_dir, "other", self.other_tree, file_id)
 
1733
            status = bzrlib.patch.diff3(new_file, this, base, other)
 
1734
            if status not in (0, 1):
 
1735
                raise errors.BzrError("Unhandled diff3 exit code")
 
1736
            f = open(new_file, 'rb')
 
1737
            try:
 
1738
                self.tt.create_file(f, trans_id)
 
1739
            finally:
 
1740
                f.close()
 
1741
            if status == 1:
 
1742
                name = self.tt.final_name(trans_id)
 
1743
                parent_id = self.tt.final_parent(trans_id)
 
1744
                self._dump_conflicts(name, parent_id, file_id)
 
1745
                self._raw_conflicts.append(('text conflict', trans_id))
 
1746
        finally:
 
1747
            osutils.rmtree(temp_dir)
 
1748
 
 
1749
 
 
1750
def merge_inner(this_branch, other_tree, base_tree, ignore_zero=False,
 
1751
                backup_files=False,
 
1752
                merge_type=Merge3Merger,
 
1753
                interesting_ids=None,
 
1754
                show_base=False,
 
1755
                reprocess=False,
 
1756
                other_rev_id=None,
 
1757
                interesting_files=None,
 
1758
                this_tree=None,
 
1759
                pb=None,
 
1760
                change_reporter=None):
 
1761
    """Primary interface for merging.
 
1762
 
 
1763
        typical use is probably
 
1764
        'merge_inner(branch, branch.get_revision_tree(other_revision),
 
1765
                     branch.get_revision_tree(base_revision))'
 
1766
        """
 
1767
    if this_tree is None:
 
1768
        raise errors.BzrError("bzrlib.merge.merge_inner requires a this_tree "
 
1769
                              "parameter as of bzrlib version 0.8.")
 
1770
    merger = Merger(this_branch, other_tree, base_tree, this_tree=this_tree,
 
1771
                    pb=pb, change_reporter=change_reporter)
 
1772
    merger.backup_files = backup_files
 
1773
    merger.merge_type = merge_type
 
1774
    merger.interesting_ids = interesting_ids
 
1775
    merger.ignore_zero = ignore_zero
 
1776
    if interesting_files:
 
1777
        if interesting_ids:
 
1778
            raise ValueError('Only supply interesting_ids'
 
1779
                             ' or interesting_files')
 
1780
        merger.interesting_files = interesting_files
 
1781
    merger.show_base = show_base
 
1782
    merger.reprocess = reprocess
 
1783
    merger.other_rev_id = other_rev_id
 
1784
    merger.other_basis = other_rev_id
 
1785
    get_revision_id = getattr(base_tree, 'get_revision_id', None)
 
1786
    if get_revision_id is None:
 
1787
        get_revision_id = base_tree.last_revision
 
1788
    merger.cache_trees_with_revision_ids([other_tree, base_tree, this_tree])
 
1789
    merger.set_base_revision(get_revision_id(), this_branch)
 
1790
    return merger.do_merge()
 
1791
 
 
1792
def get_merge_type_registry():
 
1793
    """Merge type registry is in bzrlib.option to avoid circular imports.
 
1794
 
 
1795
    This method provides a sanctioned way to retrieve it.
 
1796
    """
 
1797
    from bzrlib import option
 
1798
    return option._merge_type_registry
 
1799
 
 
1800
 
 
1801
def _plan_annotate_merge(annotated_a, annotated_b, ancestors_a, ancestors_b):
 
1802
    def status_a(revision, text):
 
1803
        if revision in ancestors_b:
 
1804
            return 'killed-b', text
 
1805
        else:
 
1806
            return 'new-a', text
 
1807
 
 
1808
    def status_b(revision, text):
 
1809
        if revision in ancestors_a:
 
1810
            return 'killed-a', text
 
1811
        else:
 
1812
            return 'new-b', text
 
1813
 
 
1814
    plain_a = [t for (a, t) in annotated_a]
 
1815
    plain_b = [t for (a, t) in annotated_b]
 
1816
    matcher = patiencediff.PatienceSequenceMatcher(None, plain_a, plain_b)
 
1817
    blocks = matcher.get_matching_blocks()
 
1818
    a_cur = 0
 
1819
    b_cur = 0
 
1820
    for ai, bi, l in blocks:
 
1821
        # process all mismatched sections
 
1822
        # (last mismatched section is handled because blocks always
 
1823
        # includes a 0-length last block)
 
1824
        for revision, text in annotated_a[a_cur:ai]:
 
1825
            yield status_a(revision, text)
 
1826
        for revision, text in annotated_b[b_cur:bi]:
 
1827
            yield status_b(revision, text)
 
1828
        # and now the matched section
 
1829
        a_cur = ai + l
 
1830
        b_cur = bi + l
 
1831
        for text_a in plain_a[ai:a_cur]:
 
1832
            yield "unchanged", text_a
 
1833
 
 
1834
 
 
1835
class _PlanMergeBase(object):
 
1836
 
 
1837
    def __init__(self, a_rev, b_rev, vf, key_prefix):
 
1838
        """Contructor.
 
1839
 
 
1840
        :param a_rev: Revision-id of one revision to merge
 
1841
        :param b_rev: Revision-id of the other revision to merge
 
1842
        :param vf: A VersionedFiles containing both revisions
 
1843
        :param key_prefix: A prefix for accessing keys in vf, typically
 
1844
            (file_id,).
 
1845
        """
 
1846
        self.a_rev = a_rev
 
1847
        self.b_rev = b_rev
 
1848
        self.vf = vf
 
1849
        self._last_lines = None
 
1850
        self._last_lines_revision_id = None
 
1851
        self._cached_matching_blocks = {}
 
1852
        self._key_prefix = key_prefix
 
1853
        self._precache_tip_lines()
 
1854
 
 
1855
    def _precache_tip_lines(self):
 
1856
        lines = self.get_lines([self.a_rev, self.b_rev])
 
1857
        self.lines_a = lines[self.a_rev]
 
1858
        self.lines_b = lines[self.b_rev]
 
1859
 
 
1860
    def get_lines(self, revisions):
 
1861
        """Get lines for revisions from the backing VersionedFiles.
 
1862
 
 
1863
        :raises RevisionNotPresent: on absent texts.
 
1864
        """
 
1865
        keys = [(self._key_prefix + (rev,)) for rev in revisions]
 
1866
        result = {}
 
1867
        for record in self.vf.get_record_stream(keys, 'unordered', True):
 
1868
            if record.storage_kind == 'absent':
 
1869
                raise errors.RevisionNotPresent(record.key, self.vf)
 
1870
            result[record.key[-1]] = osutils.chunks_to_lines(
 
1871
                record.get_bytes_as('chunked'))
 
1872
        return result
 
1873
 
 
1874
    def plan_merge(self):
 
1875
        """Generate a 'plan' for merging the two revisions.
 
1876
 
 
1877
        This involves comparing their texts and determining the cause of
 
1878
        differences.  If text A has a line and text B does not, then either the
 
1879
        line was added to text A, or it was deleted from B.  Once the causes
 
1880
        are combined, they are written out in the format described in
 
1881
        VersionedFile.plan_merge
 
1882
        """
 
1883
        blocks = self._get_matching_blocks(self.a_rev, self.b_rev)
 
1884
        unique_a, unique_b = self._unique_lines(blocks)
 
1885
        new_a, killed_b = self._determine_status(self.a_rev, unique_a)
 
1886
        new_b, killed_a = self._determine_status(self.b_rev, unique_b)
 
1887
        return self._iter_plan(blocks, new_a, killed_b, new_b, killed_a)
 
1888
 
 
1889
    def _iter_plan(self, blocks, new_a, killed_b, new_b, killed_a):
 
1890
        last_i = 0
 
1891
        last_j = 0
 
1892
        for i, j, n in blocks:
 
1893
            for a_index in range(last_i, i):
 
1894
                if a_index in new_a:
 
1895
                    if a_index in killed_b:
 
1896
                        yield 'conflicted-a', self.lines_a[a_index]
 
1897
                    else:
 
1898
                        yield 'new-a', self.lines_a[a_index]
 
1899
                else:
 
1900
                    yield 'killed-b', self.lines_a[a_index]
 
1901
            for b_index in range(last_j, j):
 
1902
                if b_index in new_b:
 
1903
                    if b_index in killed_a:
 
1904
                        yield 'conflicted-b', self.lines_b[b_index]
 
1905
                    else:
 
1906
                        yield 'new-b', self.lines_b[b_index]
 
1907
                else:
 
1908
                    yield 'killed-a', self.lines_b[b_index]
 
1909
            # handle common lines
 
1910
            for a_index in range(i, i+n):
 
1911
                yield 'unchanged', self.lines_a[a_index]
 
1912
            last_i = i+n
 
1913
            last_j = j+n
 
1914
 
 
1915
    def _get_matching_blocks(self, left_revision, right_revision):
 
1916
        """Return a description of which sections of two revisions match.
 
1917
 
 
1918
        See SequenceMatcher.get_matching_blocks
 
1919
        """
 
1920
        cached = self._cached_matching_blocks.get((left_revision,
 
1921
                                                   right_revision))
 
1922
        if cached is not None:
 
1923
            return cached
 
1924
        if self._last_lines_revision_id == left_revision:
 
1925
            left_lines = self._last_lines
 
1926
            right_lines = self.get_lines([right_revision])[right_revision]
 
1927
        else:
 
1928
            lines = self.get_lines([left_revision, right_revision])
 
1929
            left_lines = lines[left_revision]
 
1930
            right_lines = lines[right_revision]
 
1931
        self._last_lines = right_lines
 
1932
        self._last_lines_revision_id = right_revision
 
1933
        matcher = patiencediff.PatienceSequenceMatcher(None, left_lines,
 
1934
                                                       right_lines)
 
1935
        return matcher.get_matching_blocks()
 
1936
 
 
1937
    def _unique_lines(self, matching_blocks):
 
1938
        """Analyse matching_blocks to determine which lines are unique
 
1939
 
 
1940
        :return: a tuple of (unique_left, unique_right), where the values are
 
1941
            sets of line numbers of unique lines.
 
1942
        """
 
1943
        last_i = 0
 
1944
        last_j = 0
 
1945
        unique_left = []
 
1946
        unique_right = []
 
1947
        for i, j, n in matching_blocks:
 
1948
            unique_left.extend(range(last_i, i))
 
1949
            unique_right.extend(range(last_j, j))
 
1950
            last_i = i + n
 
1951
            last_j = j + n
 
1952
        return unique_left, unique_right
 
1953
 
 
1954
    @staticmethod
 
1955
    def _subtract_plans(old_plan, new_plan):
 
1956
        """Remove changes from new_plan that came from old_plan.
 
1957
 
 
1958
        It is assumed that the difference between the old_plan and new_plan
 
1959
        is their choice of 'b' text.
 
1960
 
 
1961
        All lines from new_plan that differ from old_plan are emitted
 
1962
        verbatim.  All lines from new_plan that match old_plan but are
 
1963
        not about the 'b' revision are emitted verbatim.
 
1964
 
 
1965
        Lines that match and are about the 'b' revision are the lines we
 
1966
        don't want, so we convert 'killed-b' -> 'unchanged', and 'new-b'
 
1967
        is skipped entirely.
 
1968
        """
 
1969
        matcher = patiencediff.PatienceSequenceMatcher(None, old_plan,
 
1970
                                                       new_plan)
 
1971
        last_j = 0
 
1972
        for i, j, n in matcher.get_matching_blocks():
 
1973
            for jj in range(last_j, j):
 
1974
                yield new_plan[jj]
 
1975
            for jj in range(j, j+n):
 
1976
                plan_line = new_plan[jj]
 
1977
                if plan_line[0] == 'new-b':
 
1978
                    pass
 
1979
                elif plan_line[0] == 'killed-b':
 
1980
                    yield 'unchanged', plan_line[1]
 
1981
                else:
 
1982
                    yield plan_line
 
1983
            last_j = j + n
 
1984
 
 
1985
 
 
1986
class _PlanMerge(_PlanMergeBase):
 
1987
    """Plan an annotate merge using on-the-fly annotation"""
 
1988
 
 
1989
    def __init__(self, a_rev, b_rev, vf, key_prefix):
 
1990
        super(_PlanMerge, self).__init__(a_rev, b_rev, vf, key_prefix)
 
1991
        self.a_key = self._key_prefix + (self.a_rev,)
 
1992
        self.b_key = self._key_prefix + (self.b_rev,)
 
1993
        self.graph = _mod_graph.Graph(self.vf)
 
1994
        heads = self.graph.heads((self.a_key, self.b_key))
 
1995
        if len(heads) == 1:
 
1996
            # one side dominates, so we can just return its values, yay for
 
1997
            # per-file graphs
 
1998
            # Ideally we would know that before we get this far
 
1999
            self._head_key = heads.pop()
 
2000
            if self._head_key == self.a_key:
 
2001
                other = b_rev
 
2002
            else:
 
2003
                other = a_rev
 
2004
            trace.mutter('found dominating revision for %s\n%s > %s', self.vf,
 
2005
                         self._head_key[-1], other)
 
2006
            self._weave = None
 
2007
        else:
 
2008
            self._head_key = None
 
2009
            self._build_weave()
 
2010
 
 
2011
    def _precache_tip_lines(self):
 
2012
        # Turn this into a no-op, because we will do this later
 
2013
        pass
 
2014
 
 
2015
    def _find_recursive_lcas(self):
 
2016
        """Find all the ancestors back to a unique lca"""
 
2017
        cur_ancestors = (self.a_key, self.b_key)
 
2018
        # graph.find_lca(uncommon, keys) now returns plain NULL_REVISION,
 
2019
        # rather than a key tuple. We will just map that directly to no common
 
2020
        # ancestors.
 
2021
        parent_map = {}
 
2022
        while True:
 
2023
            next_lcas = self.graph.find_lca(*cur_ancestors)
 
2024
            # Map a plain NULL_REVISION to a simple no-ancestors
 
2025
            if next_lcas == set([_mod_revision.NULL_REVISION]):
 
2026
                next_lcas = ()
 
2027
            # Order the lca's based on when they were merged into the tip
 
2028
            # While the actual merge portion of weave merge uses a set() of
 
2029
            # active revisions, the order of insertion *does* effect the
 
2030
            # implicit ordering of the texts.
 
2031
            for rev_key in cur_ancestors:
 
2032
                ordered_parents = tuple(self.graph.find_merge_order(rev_key,
 
2033
                                                                    next_lcas))
 
2034
                parent_map[rev_key] = ordered_parents
 
2035
            if len(next_lcas) == 0:
 
2036
                break
 
2037
            elif len(next_lcas) == 1:
 
2038
                parent_map[list(next_lcas)[0]] = ()
 
2039
                break
 
2040
            elif len(next_lcas) > 2:
 
2041
                # More than 2 lca's, fall back to grabbing all nodes between
 
2042
                # this and the unique lca.
 
2043
                trace.mutter('More than 2 LCAs, falling back to all nodes for:'
 
2044
                             ' %s, %s\n=> %s',
 
2045
                             self.a_key, self.b_key, cur_ancestors)
 
2046
                cur_lcas = next_lcas
 
2047
                while len(cur_lcas) > 1:
 
2048
                    cur_lcas = self.graph.find_lca(*cur_lcas)
 
2049
                if len(cur_lcas) == 0:
 
2050
                    # No common base to find, use the full ancestry
 
2051
                    unique_lca = None
 
2052
                else:
 
2053
                    unique_lca = list(cur_lcas)[0]
 
2054
                    if unique_lca == _mod_revision.NULL_REVISION:
 
2055
                        # find_lca will return a plain 'NULL_REVISION' rather
 
2056
                        # than a key tuple when there is no common ancestor, we
 
2057
                        # prefer to just use None, because it doesn't confuse
 
2058
                        # _get_interesting_texts()
 
2059
                        unique_lca = None
 
2060
                parent_map.update(self._find_unique_parents(next_lcas,
 
2061
                                                            unique_lca))
 
2062
                break
 
2063
            cur_ancestors = next_lcas
 
2064
        return parent_map
 
2065
 
 
2066
    def _find_unique_parents(self, tip_keys, base_key):
 
2067
        """Find ancestors of tip that aren't ancestors of base.
 
2068
 
 
2069
        :param tip_keys: Nodes that are interesting
 
2070
        :param base_key: Cull all ancestors of this node
 
2071
        :return: The parent map for all revisions between tip_keys and
 
2072
            base_key. base_key will be included. References to nodes outside of
 
2073
            the ancestor set will also be removed.
 
2074
        """
 
2075
        # TODO: this would be simpler if find_unique_ancestors took a list
 
2076
        #       instead of a single tip, internally it supports it, but it
 
2077
        #       isn't a "backwards compatible" api change.
 
2078
        if base_key is None:
 
2079
            parent_map = dict(self.graph.iter_ancestry(tip_keys))
 
2080
            # We remove NULL_REVISION because it isn't a proper tuple key, and
 
2081
            # thus confuses things like _get_interesting_texts, and our logic
 
2082
            # to add the texts into the memory weave.
 
2083
            if _mod_revision.NULL_REVISION in parent_map:
 
2084
                parent_map.pop(_mod_revision.NULL_REVISION)
 
2085
        else:
 
2086
            interesting = set()
 
2087
            for tip in tip_keys:
 
2088
                interesting.update(
 
2089
                    self.graph.find_unique_ancestors(tip, [base_key]))
 
2090
            parent_map = self.graph.get_parent_map(interesting)
 
2091
            parent_map[base_key] = ()
 
2092
        culled_parent_map, child_map, tails = self._remove_external_references(
 
2093
            parent_map)
 
2094
        # Remove all the tails but base_key
 
2095
        if base_key is not None:
 
2096
            tails.remove(base_key)
 
2097
            self._prune_tails(culled_parent_map, child_map, tails)
 
2098
        # Now remove all the uninteresting 'linear' regions
 
2099
        simple_map = _mod_graph.collapse_linear_regions(culled_parent_map)
 
2100
        return simple_map
 
2101
 
 
2102
    @staticmethod
 
2103
    def _remove_external_references(parent_map):
 
2104
        """Remove references that go outside of the parent map.
 
2105
 
 
2106
        :param parent_map: Something returned from Graph.get_parent_map(keys)
 
2107
        :return: (filtered_parent_map, child_map, tails)
 
2108
            filtered_parent_map is parent_map without external references
 
2109
            child_map is the {parent_key: [child_keys]} mapping
 
2110
            tails is a list of nodes that do not have any parents in the map
 
2111
        """
 
2112
        # TODO: The basic effect of this function seems more generic than
 
2113
        #       _PlanMerge. But the specific details of building a child_map,
 
2114
        #       and computing tails seems very specific to _PlanMerge.
 
2115
        #       Still, should this be in Graph land?
 
2116
        filtered_parent_map = {}
 
2117
        child_map = {}
 
2118
        tails = []
 
2119
        for key, parent_keys in parent_map.iteritems():
 
2120
            culled_parent_keys = [p for p in parent_keys if p in parent_map]
 
2121
            if not culled_parent_keys:
 
2122
                tails.append(key)
 
2123
            for parent_key in culled_parent_keys:
 
2124
                child_map.setdefault(parent_key, []).append(key)
 
2125
            # TODO: Do we want to do this, it adds overhead for every node,
 
2126
            #       just to say that the node has no children
 
2127
            child_map.setdefault(key, [])
 
2128
            filtered_parent_map[key] = culled_parent_keys
 
2129
        return filtered_parent_map, child_map, tails
 
2130
 
 
2131
    @staticmethod
 
2132
    def _prune_tails(parent_map, child_map, tails_to_remove):
 
2133
        """Remove tails from the parent map.
 
2134
 
 
2135
        This will remove the supplied revisions until no more children have 0
 
2136
        parents.
 
2137
 
 
2138
        :param parent_map: A dict of {child: [parents]}, this dictionary will
 
2139
            be modified in place.
 
2140
        :param tails_to_remove: A list of tips that should be removed,
 
2141
            this list will be consumed
 
2142
        :param child_map: The reverse dict of parent_map ({parent: [children]})
 
2143
            this dict will be modified
 
2144
        :return: None, parent_map will be modified in place.
 
2145
        """
 
2146
        while tails_to_remove:
 
2147
            next = tails_to_remove.pop()
 
2148
            parent_map.pop(next)
 
2149
            children = child_map.pop(next)
 
2150
            for child in children:
 
2151
                child_parents = parent_map[child]
 
2152
                child_parents.remove(next)
 
2153
                if len(child_parents) == 0:
 
2154
                    tails_to_remove.append(child)
 
2155
 
 
2156
    def _get_interesting_texts(self, parent_map):
 
2157
        """Return a dict of texts we are interested in.
 
2158
 
 
2159
        Note that the input is in key tuples, but the output is in plain
 
2160
        revision ids.
 
2161
 
 
2162
        :param parent_map: The output from _find_recursive_lcas
 
2163
        :return: A dict of {'revision_id':lines} as returned by
 
2164
            _PlanMergeBase.get_lines()
 
2165
        """
 
2166
        all_revision_keys = set(parent_map)
 
2167
        all_revision_keys.add(self.a_key)
 
2168
        all_revision_keys.add(self.b_key)
 
2169
 
 
2170
        # Everything else is in 'keys' but get_lines is in 'revision_ids'
 
2171
        all_texts = self.get_lines([k[-1] for k in all_revision_keys])
 
2172
        return all_texts
 
2173
 
 
2174
    def _build_weave(self):
 
2175
        from bzrlib import weave
 
2176
        self._weave = weave.Weave(weave_name='in_memory_weave',
 
2177
                                  allow_reserved=True)
 
2178
        parent_map = self._find_recursive_lcas()
 
2179
 
 
2180
        all_texts = self._get_interesting_texts(parent_map)
 
2181
 
 
2182
        # Note: Unfortunately, the order given by topo_sort will effect the
 
2183
        # ordering resolution in the output. Specifically, if you add A then B,
 
2184
        # then in the output text A lines will show up before B lines. And, of
 
2185
        # course, topo_sort doesn't guarantee any real ordering.
 
2186
        # So we use merge_sort, and add a fake node on the tip.
 
2187
        # This ensures that left-hand parents will always be inserted into the
 
2188
        # weave before right-hand parents.
 
2189
        tip_key = self._key_prefix + (_mod_revision.CURRENT_REVISION,)
 
2190
        parent_map[tip_key] = (self.a_key, self.b_key)
 
2191
 
 
2192
        for seq_num, key, depth, eom in reversed(tsort.merge_sort(parent_map,
 
2193
                                                                  tip_key)):
 
2194
            if key == tip_key:
 
2195
                continue
 
2196
        # for key in tsort.topo_sort(parent_map):
 
2197
            parent_keys = parent_map[key]
 
2198
            revision_id = key[-1]
 
2199
            parent_ids = [k[-1] for k in parent_keys]
 
2200
            self._weave.add_lines(revision_id, parent_ids,
 
2201
                                  all_texts[revision_id])
 
2202
 
 
2203
    def plan_merge(self):
 
2204
        """Generate a 'plan' for merging the two revisions.
 
2205
 
 
2206
        This involves comparing their texts and determining the cause of
 
2207
        differences.  If text A has a line and text B does not, then either the
 
2208
        line was added to text A, or it was deleted from B.  Once the causes
 
2209
        are combined, they are written out in the format described in
 
2210
        VersionedFile.plan_merge
 
2211
        """
 
2212
        if self._head_key is not None: # There was a single head
 
2213
            if self._head_key == self.a_key:
 
2214
                plan = 'new-a'
 
2215
            else:
 
2216
                if self._head_key != self.b_key:
 
2217
                    raise AssertionError('There was an invalid head: %s != %s'
 
2218
                                         % (self.b_key, self._head_key))
 
2219
                plan = 'new-b'
 
2220
            head_rev = self._head_key[-1]
 
2221
            lines = self.get_lines([head_rev])[head_rev]
 
2222
            return ((plan, line) for line in lines)
 
2223
        return self._weave.plan_merge(self.a_rev, self.b_rev)
 
2224
 
 
2225
 
 
2226
class _PlanLCAMerge(_PlanMergeBase):
 
2227
    """
 
2228
    This merge algorithm differs from _PlanMerge in that:
 
2229
    1. comparisons are done against LCAs only
 
2230
    2. cases where a contested line is new versus one LCA but old versus
 
2231
       another are marked as conflicts, by emitting the line as conflicted-a
 
2232
       or conflicted-b.
 
2233
 
 
2234
    This is faster, and hopefully produces more useful output.
 
2235
    """
 
2236
 
 
2237
    def __init__(self, a_rev, b_rev, vf, key_prefix, graph):
 
2238
        _PlanMergeBase.__init__(self, a_rev, b_rev, vf, key_prefix)
 
2239
        lcas = graph.find_lca(key_prefix + (a_rev,), key_prefix + (b_rev,))
 
2240
        self.lcas = set()
 
2241
        for lca in lcas:
 
2242
            if lca == _mod_revision.NULL_REVISION:
 
2243
                self.lcas.add(lca)
 
2244
            else:
 
2245
                self.lcas.add(lca[-1])
 
2246
        for lca in self.lcas:
 
2247
            if _mod_revision.is_null(lca):
 
2248
                lca_lines = []
 
2249
            else:
 
2250
                lca_lines = self.get_lines([lca])[lca]
 
2251
            matcher = patiencediff.PatienceSequenceMatcher(None, self.lines_a,
 
2252
                                                           lca_lines)
 
2253
            blocks = list(matcher.get_matching_blocks())
 
2254
            self._cached_matching_blocks[(a_rev, lca)] = blocks
 
2255
            matcher = patiencediff.PatienceSequenceMatcher(None, self.lines_b,
 
2256
                                                           lca_lines)
 
2257
            blocks = list(matcher.get_matching_blocks())
 
2258
            self._cached_matching_blocks[(b_rev, lca)] = blocks
 
2259
 
 
2260
    def _determine_status(self, revision_id, unique_line_numbers):
 
2261
        """Determines the status unique lines versus all lcas.
 
2262
 
 
2263
        Basically, determines why the line is unique to this revision.
 
2264
 
 
2265
        A line may be determined new, killed, or both.
 
2266
 
 
2267
        If a line is determined new, that means it was not present in at least
 
2268
        one LCA, and is not present in the other merge revision.
 
2269
 
 
2270
        If a line is determined killed, that means the line was present in
 
2271
        at least one LCA.
 
2272
 
 
2273
        If a line is killed and new, this indicates that the two merge
 
2274
        revisions contain differing conflict resolutions.
 
2275
        :param revision_id: The id of the revision in which the lines are
 
2276
            unique
 
2277
        :param unique_line_numbers: The line numbers of unique lines.
 
2278
        :return a tuple of (new_this, killed_other):
 
2279
        """
 
2280
        new = set()
 
2281
        killed = set()
 
2282
        unique_line_numbers = set(unique_line_numbers)
 
2283
        for lca in self.lcas:
 
2284
            blocks = self._get_matching_blocks(revision_id, lca)
 
2285
            unique_vs_lca, _ignored = self._unique_lines(blocks)
 
2286
            new.update(unique_line_numbers.intersection(unique_vs_lca))
 
2287
            killed.update(unique_line_numbers.difference(unique_vs_lca))
 
2288
        return new, killed