1
# Copyright (C) 2005 Canonical Ltd
 
 
3
# This program is free software; you can redistribute it and/or modify
 
 
4
# it under the terms of the GNU General Public License as published by
 
 
5
# the Free Software Foundation; either version 2 of the License, or
 
 
6
# (at your option) any later version.
 
 
8
# This program is distributed in the hope that it will be useful,
 
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
 
11
# GNU General Public License for more details.
 
 
13
# You should have received a copy of the GNU General Public License
 
 
14
# along with this program; if not, write to the Free Software
 
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
 
18
from copy import deepcopy
 
 
19
from cStringIO import StringIO
 
 
24
from unittest import TestSuite
 
 
25
from warnings import warn
 
 
27
    import xml.sax.saxutils
 
 
29
    raise ImportError("We were unable to import 'xml.sax.saxutils',"
 
 
30
                      " most likely you have an xml.pyc or xml.pyo file"
 
 
31
                      " lying around in your bzrlib directory."
 
 
33
from cStringIO import StringIO
 
 
37
from bzrlib.config import TreeConfig
 
 
38
from bzrlib.decorators import needs_read_lock, needs_write_lock
 
 
39
from bzrlib.delta import compare_trees
 
 
40
import bzrlib.errors as errors
 
 
41
from bzrlib.errors import (BzrError, InvalidRevisionNumber, InvalidRevisionId,
 
 
42
                           NoSuchRevision, HistoryMissing, NotBranchError,
 
 
43
                           DivergedBranches, LockError,
 
 
44
                           UninitializableFormat,
 
 
46
                           UnlistableBranch, NoSuchFile, NotVersionedError,
 
 
48
import bzrlib.inventory as inventory
 
 
49
from bzrlib.inventory import Inventory
 
 
50
from bzrlib.lockable_files import LockableFiles
 
 
51
from bzrlib.osutils import (isdir, quotefn,
 
 
52
                            rename, splitpath, sha_file,
 
 
53
                            file_kind, abspath, normpath, pathjoin,
 
 
56
from bzrlib.textui import show_status
 
 
57
from bzrlib.trace import mutter, note
 
 
58
from bzrlib.tree import EmptyTree, RevisionTree
 
 
59
from bzrlib.repository import Repository
 
 
60
from bzrlib.revision import (Revision, is_ancestor, get_intervening_revisions)
 
 
61
from bzrlib.store import copy_all
 
 
62
from bzrlib.symbol_versioning import *
 
 
63
import bzrlib.transactions as transactions
 
 
64
from bzrlib.transport import Transport, get_transport
 
 
65
from bzrlib.tree import EmptyTree, RevisionTree
 
 
70
BZR_BRANCH_FORMAT_4 = "Bazaar-NG branch, format 0.0.4\n"
 
 
71
BZR_BRANCH_FORMAT_5 = "Bazaar-NG branch, format 5\n"
 
 
72
BZR_BRANCH_FORMAT_6 = "Bazaar-NG branch, format 6\n"
 
 
75
# TODO: Maybe include checks for common corruption of newlines, etc?
 
 
77
# TODO: Some operations like log might retrieve the same revisions
 
 
78
# repeatedly to calculate deltas.  We could perhaps have a weakref
 
 
79
# cache in memory to make this faster.  In general anything can be
 
 
80
# cached in memory between lock and unlock operations. .. nb thats
 
 
81
# what the transaction identity map provides
 
 
84
######################################################################
 
 
88
    """Branch holding a history of revisions.
 
 
91
        Base directory/url of the branch.
 
 
93
    # this is really an instance variable - FIXME move it there
 
 
97
    _default_initializer = None
 
 
98
    """The default initializer for making new branches."""
 
 
100
    def __init__(self, *ignored, **ignored_too):
 
 
101
        raise NotImplementedError('The Branch class is abstract')
 
 
104
    def open_downlevel(base):
 
 
105
        """Open a branch which may be of an old format."""
 
 
106
        return Branch.open(base, _unsupported=True)
 
 
109
    def open(base, _unsupported=False):
 
 
110
        """Open an existing branch, rooted at 'base' (url)
 
 
112
        _unsupported is a private parameter to the Branch class.
 
 
114
        t = get_transport(base)
 
 
115
        mutter("trying to open %r with transport %r", base, t)
 
 
116
        format = BzrBranchFormat.find_format(t)
 
 
117
        if not _unsupported and not format.is_supported():
 
 
118
            # see open_downlevel to open legacy branches.
 
 
119
            raise errors.UnsupportedFormatError(
 
 
120
                    'sorry, branch format %s not supported' % format,
 
 
121
                    ['use a different bzr version',
 
 
122
                     'or remove the .bzr directory'
 
 
123
                     ' and "bzr init" again'])
 
 
124
        return format.open(t)
 
 
127
    def open_containing(url):
 
 
128
        """Open an existing branch which contains url.
 
 
130
        This probes for a branch at url, and searches upwards from there.
 
 
132
        Basically we keep looking up until we find the control directory or
 
 
133
        run into the root.  If there isn't one, raises NotBranchError.
 
 
134
        If there is one and it is either an unrecognised format or an unsupported 
 
 
135
        format, UnknownFormatError or UnsupportedFormatError are raised.
 
 
136
        If there is one, it is returned, along with the unused portion of url.
 
 
138
        t = get_transport(url)
 
 
139
        # this gets the normalised url back. I.e. '.' -> the full path.
 
 
143
                format = BzrBranchFormat.find_format(t)
 
 
144
                return format.open(t), t.relpath(url)
 
 
145
            except NotBranchError, e:
 
 
146
                mutter('not a branch in: %r %s', t.base, e)
 
 
147
            new_t = t.clone('..')
 
 
148
            if new_t.base == t.base:
 
 
149
                # reached the root, whatever that may be
 
 
150
                raise NotBranchError(path=url)
 
 
155
        """Create a new Branch at the url 'bzr'.
 
 
157
        This will call the current default initializer with base
 
 
158
        as the only parameter.
 
 
160
        return Branch._default_initializer(safe_unicode(base))
 
 
163
    @deprecated_function(zero_eight)
 
 
164
    def initialize(base):
 
 
165
        """Create a new working tree and branch, rooted at 'base' (url)
 
 
167
        NOTE: This will soon be deprecated in favour of creation
 
 
170
        # imported here to prevent scope creep as this is going.
 
 
171
        from bzrlib.workingtree import WorkingTree
 
 
172
        return WorkingTree.create_standalone(safe_unicode(base)).branch
 
 
175
    def get_default_initializer():
 
 
176
        """Return the initializer being used for new branches."""
 
 
177
        return Branch._default_initializer
 
 
180
    def set_default_initializer(initializer):
 
 
181
        """Set the initializer to be used for new branches."""
 
 
182
        Branch._default_initializer = staticmethod(initializer)
 
 
184
    def setup_caching(self, cache_root):
 
 
185
        """Subclasses that care about caching should override this, and set
 
 
186
        up cached stores located under cache_root.
 
 
188
        # seems to be unused, 2006-01-13 mbp
 
 
189
        warn('%s is deprecated' % self.setup_caching)
 
 
190
        self.cache_root = cache_root
 
 
193
        cfg = self.tree_config()
 
 
194
        return cfg.get_option(u"nickname", default=self.base.split('/')[-2])
 
 
196
    def _set_nick(self, nick):
 
 
197
        cfg = self.tree_config()
 
 
198
        cfg.set_option(nick, "nickname")
 
 
199
        assert cfg.get_option("nickname") == nick
 
 
201
    nick = property(_get_nick, _set_nick)
 
 
203
    def push_stores(self, branch_to):
 
 
204
        """Copy the content of this branches store to branch_to."""
 
 
205
        raise NotImplementedError('push_stores is abstract')
 
 
207
    def lock_write(self):
 
 
208
        raise NotImplementedError('lock_write is abstract')
 
 
211
        raise NotImplementedError('lock_read is abstract')
 
 
214
        raise NotImplementedError('unlock is abstract')
 
 
216
    def peek_lock_mode(self):
 
 
217
        """Return lock mode for the Branch: 'r', 'w' or None"""
 
 
218
        raise NotImplementedError(self.peek_lock_mode)
 
 
220
    def abspath(self, name):
 
 
221
        """Return absolute filename for something in the branch
 
 
223
        XXX: Robert Collins 20051017 what is this used for? why is it a branch
 
 
224
        method and not a tree method.
 
 
226
        raise NotImplementedError('abspath is abstract')
 
 
228
    def get_root_id(self):
 
 
229
        """Return the id of this branches root"""
 
 
230
        raise NotImplementedError('get_root_id is abstract')
 
 
232
    def print_file(self, file, revision_id):
 
 
233
        """Print `file` to stdout."""
 
 
234
        raise NotImplementedError('print_file is abstract')
 
 
236
    def append_revision(self, *revision_ids):
 
 
237
        raise NotImplementedError('append_revision is abstract')
 
 
239
    def set_revision_history(self, rev_history):
 
 
240
        raise NotImplementedError('set_revision_history is abstract')
 
 
242
    def revision_history(self):
 
 
243
        """Return sequence of revision hashes on to this branch."""
 
 
244
        raise NotImplementedError('revision_history is abstract')
 
 
247
        """Return current revision number for this branch.
 
 
249
        That is equivalent to the number of revisions committed to
 
 
252
        return len(self.revision_history())
 
 
254
    def last_revision(self):
 
 
255
        """Return last patch hash, or None if no history."""
 
 
256
        ph = self.revision_history()
 
 
262
    def missing_revisions(self, other, stop_revision=None, diverged_ok=False):
 
 
263
        """Return a list of new revisions that would perfectly fit.
 
 
265
        If self and other have not diverged, return a list of the revisions
 
 
266
        present in other, but missing from self.
 
 
268
        >>> bzrlib.trace.silent = True
 
 
269
        >>> br1 = ScratchBranch()
 
 
270
        >>> br2 = ScratchBranch()
 
 
271
        >>> br1.missing_revisions(br2)
 
 
273
        >>> br2.working_tree().commit("lala!", rev_id="REVISION-ID-1")
 
 
274
        >>> br1.missing_revisions(br2)
 
 
276
        >>> br2.missing_revisions(br1)
 
 
278
        >>> br1.working_tree().commit("lala!", rev_id="REVISION-ID-1")
 
 
279
        >>> br1.missing_revisions(br2)
 
 
281
        >>> br2.working_tree().commit("lala!", rev_id="REVISION-ID-2A")
 
 
282
        >>> br1.missing_revisions(br2)
 
 
284
        >>> br1.working_tree().commit("lala!", rev_id="REVISION-ID-2B")
 
 
285
        >>> br1.missing_revisions(br2)
 
 
286
        Traceback (most recent call last):
 
 
287
        DivergedBranches: These branches have diverged.  Try merge.
 
 
289
        self_history = self.revision_history()
 
 
290
        self_len = len(self_history)
 
 
291
        other_history = other.revision_history()
 
 
292
        other_len = len(other_history)
 
 
293
        common_index = min(self_len, other_len) -1
 
 
294
        if common_index >= 0 and \
 
 
295
            self_history[common_index] != other_history[common_index]:
 
 
296
            raise DivergedBranches(self, other)
 
 
298
        if stop_revision is None:
 
 
299
            stop_revision = other_len
 
 
301
            assert isinstance(stop_revision, int)
 
 
302
            if stop_revision > other_len:
 
 
303
                raise bzrlib.errors.NoSuchRevision(self, stop_revision)
 
 
304
        return other_history[self_len:stop_revision]
 
 
306
    def update_revisions(self, other, stop_revision=None):
 
 
307
        """Pull in new perfect-fit revisions."""
 
 
308
        raise NotImplementedError('update_revisions is abstract')
 
 
310
    def pullable_revisions(self, other, stop_revision):
 
 
311
        raise NotImplementedError('pullable_revisions is abstract')
 
 
313
    def revision_id_to_revno(self, revision_id):
 
 
314
        """Given a revision id, return its revno"""
 
 
315
        if revision_id is None:
 
 
317
        history = self.revision_history()
 
 
319
            return history.index(revision_id) + 1
 
 
321
            raise bzrlib.errors.NoSuchRevision(self, revision_id)
 
 
323
    def get_rev_id(self, revno, history=None):
 
 
324
        """Find the revision id of the specified revno."""
 
 
328
            history = self.revision_history()
 
 
329
        elif revno <= 0 or revno > len(history):
 
 
330
            raise bzrlib.errors.NoSuchRevision(self, revno)
 
 
331
        return history[revno - 1]
 
 
333
    def working_tree(self):
 
 
334
        """Return a `Tree` for the working copy if this is a local branch."""
 
 
335
        raise NotImplementedError('working_tree is abstract')
 
 
337
    def pull(self, source, overwrite=False, stop_revision=None):
 
 
338
        raise NotImplementedError('pull is abstract')
 
 
340
    def basis_tree(self):
 
 
341
        """Return `Tree` object for last revision.
 
 
343
        If there are no revisions yet, return an `EmptyTree`.
 
 
345
        return self.repository.revision_tree(self.last_revision())
 
 
347
    def rename_one(self, from_rel, to_rel):
 
 
350
        This can change the directory or the filename or both.
 
 
352
        raise NotImplementedError('rename_one is abstract')
 
 
354
    def move(self, from_paths, to_name):
 
 
357
        to_name must exist as a versioned directory.
 
 
359
        If to_name exists and is a directory, the files are moved into
 
 
360
        it, keeping their old names.  If it is a directory, 
 
 
362
        Note that to_name is only the last component of the new name;
 
 
363
        this doesn't change the directory.
 
 
365
        This returns a list of (from_path, to_path) pairs for each
 
 
368
        raise NotImplementedError('move is abstract')
 
 
370
    def get_parent(self):
 
 
371
        """Return the parent location of the branch.
 
 
373
        This is the default location for push/pull/missing.  The usual
 
 
374
        pattern is that the user can override it by specifying a
 
 
377
        raise NotImplementedError('get_parent is abstract')
 
 
379
    def get_push_location(self):
 
 
380
        """Return the None or the location to push this branch to."""
 
 
381
        raise NotImplementedError('get_push_location is abstract')
 
 
383
    def set_push_location(self, location):
 
 
384
        """Set a new push location for this branch."""
 
 
385
        raise NotImplementedError('set_push_location is abstract')
 
 
387
    def set_parent(self, url):
 
 
388
        raise NotImplementedError('set_parent is abstract')
 
 
390
    def check_revno(self, revno):
 
 
392
        Check whether a revno corresponds to any revision.
 
 
393
        Zero (the NULL revision) is considered valid.
 
 
396
            self.check_real_revno(revno)
 
 
398
    def check_real_revno(self, revno):
 
 
400
        Check whether a revno corresponds to a real revision.
 
 
401
        Zero (the NULL revision) is considered invalid
 
 
403
        if revno < 1 or revno > self.revno():
 
 
404
            raise InvalidRevisionNumber(revno)
 
 
406
    def clone(self, to_location, revision=None, basis_branch=None, to_branch_type=None):
 
 
407
        """Copy this branch into the existing directory to_location.
 
 
409
        Returns the newly created branch object.
 
 
412
            If not None, only revisions up to this point will be copied.
 
 
413
            The head of the new branch will be that revision.  Must be a
 
 
416
        to_location -- The destination directory; must either exist and be 
 
 
417
            empty, or not exist, in which case it is created.
 
 
420
            A local branch to copy revisions from, related to this branch. 
 
 
421
            This is used when branching from a remote (slow) branch, and we have
 
 
422
            a local branch that might contain some relevant revisions.
 
 
425
            Branch type of destination branch
 
 
427
        from bzrlib.workingtree import WorkingTree
 
 
428
        assert isinstance(to_location, basestring)
 
 
429
        if not bzrlib.osutils.lexists(to_location):
 
 
430
            os.mkdir(to_location)
 
 
431
        if to_branch_type is None:
 
 
432
            to_branch_type = BzrBranch
 
 
433
        # FIXME use a branch format here
 
 
434
        br_to = to_branch_type.initialize(to_location)
 
 
435
        mutter("copy branch from %s to %s", self, br_to)
 
 
436
        if basis_branch is not None:
 
 
437
            basis_branch.push_stores(br_to)
 
 
439
            revision = self.last_revision()
 
 
440
        br_to.update_revisions(self, stop_revision=revision)
 
 
441
        br_to.set_parent(self.base)
 
 
442
        WorkingTree.create(br_to, to_location).set_root_id(self.get_root_id())
 
 
446
    def fileid_involved_between_revs(self, from_revid, to_revid):
 
 
447
        """ This function returns the file_id(s) involved in the
 
 
448
            changes between the from_revid revision and the to_revid
 
 
451
        raise NotImplementedError('fileid_involved_between_revs is abstract')
 
 
453
    def fileid_involved(self, last_revid=None):
 
 
454
        """ This function returns the file_id(s) involved in the
 
 
455
            changes up to the revision last_revid
 
 
456
            If no parametr is passed, then all file_id[s] present in the
 
 
457
            repository are returned
 
 
459
        raise NotImplementedError('fileid_involved is abstract')
 
 
461
    def fileid_involved_by_set(self, changes):
 
 
462
        """ This function returns the file_id(s) involved in the
 
 
463
            changes present in the set 'changes'
 
 
465
        raise NotImplementedError('fileid_involved_by_set is abstract')
 
 
467
    def fileid_involved_between_revs(self, from_revid, to_revid):
 
 
468
        """ This function returns the file_id(s) involved in the
 
 
469
            changes between the from_revid revision and the to_revid
 
 
472
        raise NotImplementedError('fileid_involved_between_revs is abstract')
 
 
474
    def fileid_involved(self, last_revid=None):
 
 
475
        """ This function returns the file_id(s) involved in the
 
 
476
            changes up to the revision last_revid
 
 
477
            If no parametr is passed, then all file_id[s] present in the
 
 
478
            repository are returned
 
 
480
        raise NotImplementedError('fileid_involved is abstract')
 
 
482
    def fileid_involved_by_set(self, changes):
 
 
483
        """ This function returns the file_id(s) involved in the
 
 
484
            changes present in the set 'changes'
 
 
486
        raise NotImplementedError('fileid_involved_by_set is abstract')
 
 
488
class BzrBranchFormat(object):
 
 
489
    """An encapsulation of the initialization and open routines for a format.
 
 
491
    Formats provide three things:
 
 
492
     * An initialization routine,
 
 
496
    Formats are placed in an dict by their format string for reference 
 
 
497
    during branch opening. Its not required that these be instances, they
 
 
498
    can be classes themselves with class methods - it simply depends on 
 
 
499
    whether state is needed for a given format or not.
 
 
501
    Once a format is deprecated, just deprecate the initialize and open
 
 
502
    methods on the format class. Do not deprecate the object, as the 
 
 
503
    object will be created every time regardless.
 
 
507
    """The known formats."""
 
 
510
    def find_format(klass, transport):
 
 
511
        """Return the format registered for URL."""
 
 
513
            format_string = transport.get(".bzr/branch-format").read()
 
 
514
            return klass._formats[format_string]
 
 
516
            raise NotBranchError(path=transport.base)
 
 
518
            raise errors.UnknownFormatError(format_string)
 
 
520
    def get_format_string(self):
 
 
521
        """Return the ASCII format string that identifies this format."""
 
 
522
        raise NotImplementedError(self.get_format_string)
 
 
524
    def _find_modes(self, t):
 
 
525
        """Determine the appropriate modes for files and directories.
 
 
527
        FIXME: When this merges into, or from storage,
 
 
528
        this code becomes delgatable to a LockableFiles instance.
 
 
530
        For now its cribbed and returns (dir_mode, file_mode)
 
 
534
        except errors.TransportNotPossible:
 
 
538
            dir_mode = st.st_mode & 07777
 
 
539
            # Remove the sticky and execute bits for files
 
 
540
            file_mode = dir_mode & ~07111
 
 
541
        if not BzrBranch._set_dir_mode:
 
 
543
        if not BzrBranch._set_file_mode:
 
 
545
        return dir_mode, file_mode
 
 
547
    def initialize(self, url):
 
 
548
        """Create a branch of this format at url and return an open branch."""
 
 
549
        t = get_transport(url)
 
 
550
        from bzrlib.weavefile import write_weave_v5
 
 
551
        from bzrlib.weave import Weave
 
 
553
        # Create an empty weave
 
 
555
        bzrlib.weavefile.write_weave_v5(Weave(), sio)
 
 
556
        empty_weave = sio.getvalue()
 
 
558
        # Since we don't have a .bzr directory, inherit the
 
 
559
        # mode from the root directory
 
 
560
        temp_control = LockableFiles(t, '')
 
 
561
        temp_control._transport.mkdir('.bzr',
 
 
562
                                      mode=temp_control._dir_mode)
 
 
563
        file_mode = temp_control._file_mode
 
 
565
        mutter('created control directory in ' + t.base)
 
 
566
        control = t.clone('.bzr')
 
 
567
        dirs = ['revision-store', 'weaves']
 
 
568
        lock_file = 'branch-lock'
 
 
569
        utf8_files = [('README', 
 
 
570
                       "This is a Bazaar-NG control directory.\n"
 
 
571
                       "Do not change any files in this directory.\n"),
 
 
572
                      ('branch-format', self.get_format_string()),
 
 
573
                      ('revision-history', ''),
 
 
576
        files = [('inventory.weave', StringIO(empty_weave)), 
 
 
579
        # FIXME: RBC 20060125 dont peek under the covers
 
 
580
        # NB: no need to escape relative paths that are url safe.
 
 
581
        control.put(lock_file, StringIO(), mode=file_mode)
 
 
582
        control_files = LockableFiles(control, lock_file)
 
 
583
        control_files.lock_write()
 
 
584
        control_files._transport.mkdir_multi(dirs,
 
 
585
                mode=control_files._dir_mode)
 
 
587
            for file, content in utf8_files:
 
 
588
                control_files.put_utf8(file, content)
 
 
589
            for file, content in files:
 
 
590
                control_files.put(file, content)
 
 
592
            control_files.unlock()
 
 
593
        return BzrBranch(t, _format=self, _control_files=control_files)
 
 
595
    def is_supported(self):
 
 
596
        """Is this format supported?
 
 
598
        Supported formats can be initialized and opened.
 
 
599
        Unsupported formats may not support initialization or committing or 
 
 
600
        some other features depending on the reason for not being supported.
 
 
604
    def open(self, transport):
 
 
605
        """Fill out the data in branch for the branch at url."""
 
 
606
        return BzrBranch(transport, _format=self)
 
 
609
    def register_format(klass, format):
 
 
610
        klass._formats[format.get_format_string()] = format
 
 
613
    def unregister_format(klass, format):
 
 
614
        assert klass._formats[format.get_format_string()] is format
 
 
615
        del klass._formats[format.get_format_string()]
 
 
618
class BzrBranchFormat4(BzrBranchFormat):
 
 
619
    """Bzr branch format 4.
 
 
623
     - TextStores for texts, inventories,revisions.
 
 
625
    This format is deprecated: it indexes texts using a text it which is
 
 
626
    removed in format 5; write support for this format has been removed.
 
 
629
    def get_format_string(self):
 
 
630
        """See BzrBranchFormat.get_format_string()."""
 
 
631
        return BZR_BRANCH_FORMAT_4
 
 
633
    def initialize(self, url):
 
 
634
        """Format 4 branches cannot be created."""
 
 
635
        raise UninitializableFormat(self)
 
 
637
    def is_supported(self):
 
 
638
        """Format 4 is not supported.
 
 
640
        It is not supported because the model changed from 4 to 5 and the
 
 
641
        conversion logic is expensive - so doing it on the fly was not 
 
 
647
class BzrBranchFormat5(BzrBranchFormat):
 
 
648
    """Bzr branch format 5.
 
 
651
     - weaves for file texts and inventory
 
 
653
     - TextStores for revisions and signatures.
 
 
656
    def get_format_string(self):
 
 
657
        """See BzrBranchFormat.get_format_string()."""
 
 
658
        return BZR_BRANCH_FORMAT_5
 
 
661
class BzrBranchFormat6(BzrBranchFormat):
 
 
662
    """Bzr branch format 6.
 
 
665
     - weaves for file texts and inventory
 
 
666
     - hash subdirectory based stores.
 
 
667
     - TextStores for revisions and signatures.
 
 
670
    def get_format_string(self):
 
 
671
        """See BzrBranchFormat.get_format_string()."""
 
 
672
        return BZR_BRANCH_FORMAT_6
 
 
675
BzrBranchFormat.register_format(BzrBranchFormat4())
 
 
676
BzrBranchFormat.register_format(BzrBranchFormat5())
 
 
677
BzrBranchFormat.register_format(BzrBranchFormat6())
 
 
679
# TODO: jam 20060108 Create a new branch format, and as part of upgrade
 
 
680
#       make sure that ancestry.weave is deleted (it is never used, but
 
 
681
#       used to be created)
 
 
684
class BzrBranch(Branch):
 
 
685
    """A branch stored in the actual filesystem.
 
 
687
    Note that it's "local" in the context of the filesystem; it doesn't
 
 
688
    really matter if it's on an nfs/smb/afs/coda/... share, as long as
 
 
689
    it's writable, and can be accessed via the normal filesystem API.
 
 
692
    # We actually expect this class to be somewhat short-lived; part of its
 
 
693
    # purpose is to try to isolate what bits of the branch logic are tied to
 
 
694
    # filesystem access, so that in a later step, we can extricate them to
 
 
695
    # a separarte ("storage") class.
 
 
696
    _inventory_weave = None
 
 
698
    # Map some sort of prefix into a namespace
 
 
699
    # stuff like "revno:10", "revid:", etc.
 
 
700
    # This should match a prefix with a function which accepts
 
 
701
    REVISION_NAMESPACES = {}
 
 
703
    def push_stores(self, branch_to):
 
 
704
        """See Branch.push_stores."""
 
 
705
        if (not isinstance(self._branch_format, BzrBranchFormat4) or
 
 
706
            self._branch_format != branch_to._branch_format):
 
 
707
            from bzrlib.fetch import greedy_fetch
 
 
708
            mutter("Using fetch logic to push between %s(%s) and %s(%s)",
 
 
709
                   self, self._branch_format, branch_to, branch_to._branch_format)
 
 
710
            greedy_fetch(to_branch=branch_to, from_branch=self,
 
 
711
                         revision=self.last_revision())
 
 
714
        # format 4 to format 4 logic only.
 
 
715
        store_pairs = ((self.text_store,      branch_to.text_store),
 
 
716
                       (self.inventory_store, branch_to.inventory_store),
 
 
717
                       (self.revision_store,  branch_to.revision_store))
 
 
719
            for from_store, to_store in store_pairs: 
 
 
720
                copy_all(from_store, to_store)
 
 
721
        except UnlistableStore:
 
 
722
            raise UnlistableBranch(from_store)
 
 
724
    def __init__(self, transport, init=DEPRECATED_PARAMETER,
 
 
725
                 relax_version_check=DEPRECATED_PARAMETER, _format=None,
 
 
726
                 _control_files=None):
 
 
727
        """Create new branch object at a particular location.
 
 
729
        transport -- A Transport object, defining how to access files.
 
 
731
        init -- If True, create new control files in a previously
 
 
732
             unversioned directory.  If False, the branch must already
 
 
735
        relax_version_check -- If true, the usual check for the branch
 
 
736
            version is not applied.  This is intended only for
 
 
737
            upgrade/recovery type use; it's not guaranteed that
 
 
738
            all operations will work on old format branches.
 
 
740
        In the test suite, creation of new trees is tested using the
 
 
741
        `ScratchBranch` class.
 
 
743
        assert isinstance(transport, Transport), \
 
 
744
            "%r is not a Transport" % transport
 
 
745
        self._transport = transport
 
 
746
        self._base = self._transport.base
 
 
747
        if _control_files is None:
 
 
748
            _control_files = LockableFiles(self._transport.clone(bzrlib.BZRDIR),
 
 
750
        self.control_files = _control_files
 
 
751
        if deprecated_passed(init):
 
 
752
            warn("BzrBranch.__init__(..., init=XXX): The init parameter is "
 
 
753
                 "deprecated as of bzr 0.8. Please use Branch.create().",
 
 
757
                # this is slower than before deprecation, oh well never mind.
 
 
759
                self._initialize(transport.base)
 
 
760
        self._check_format(_format)
 
 
761
        if deprecated_passed(relax_version_check):
 
 
762
            warn("BzrBranch.__init__(..., relax_version_check=XXX_: The "
 
 
763
                 "relax_version_check parameter is deprecated as of bzr 0.8. "
 
 
764
                 "Please use Branch.open_downlevel, or a BzrBranchFormat's "
 
 
768
            if (not relax_version_check
 
 
769
                and not self._branch_format.is_supported()):
 
 
770
                raise errors.UnsupportedFormatError(
 
 
771
                        'sorry, branch format %r not supported' % fmt,
 
 
772
                        ['use a different bzr version',
 
 
773
                         'or remove the .bzr directory'
 
 
774
                         ' and "bzr init" again'])
 
 
775
        self.repository = Repository(transport, self._branch_format)
 
 
779
    def _initialize(base):
 
 
780
        """Create a bzr branch in the latest format."""
 
 
781
        return BzrBranchFormat6().initialize(base)
 
 
784
        return '%s(%r)' % (self.__class__.__name__, self.base)
 
 
789
        # TODO: It might be best to do this somewhere else,
 
 
790
        # but it is nice for a Branch object to automatically
 
 
791
        # cache it's information.
 
 
792
        # Alternatively, we could have the Transport objects cache requests
 
 
793
        # See the earlier discussion about how major objects (like Branch)
 
 
794
        # should never expect their __del__ function to run.
 
 
795
        # XXX: cache_root seems to be unused, 2006-01-13 mbp
 
 
796
        if hasattr(self, 'cache_root') and self.cache_root is not None:
 
 
798
                shutil.rmtree(self.cache_root)
 
 
801
            self.cache_root = None
 
 
806
    base = property(_get_base, doc="The URL for the root of this branch.")
 
 
808
    def _finish_transaction(self):
 
 
809
        """Exit the current transaction."""
 
 
810
        return self.control_files._finish_transaction()
 
 
812
    def get_transaction(self):
 
 
813
        """Return the current active transaction.
 
 
815
        If no transaction is active, this returns a passthrough object
 
 
816
        for which all data is immediately flushed and no caching happens.
 
 
818
        # this is an explicit function so that we can do tricky stuff
 
 
819
        # when the storage in rev_storage is elsewhere.
 
 
820
        # we probably need to hook the two 'lock a location' and 
 
 
821
        # 'have a transaction' together more delicately, so that
 
 
822
        # we can have two locks (branch and storage) and one transaction
 
 
823
        # ... and finishing the transaction unlocks both, but unlocking
 
 
824
        # does not. - RBC 20051121
 
 
825
        return self.control_files.get_transaction()
 
 
827
    def _set_transaction(self, transaction):
 
 
828
        """Set a new active transaction."""
 
 
829
        return self.control_files._set_transaction(transaction)
 
 
831
    def abspath(self, name):
 
 
832
        """See Branch.abspath."""
 
 
833
        return self.control_files._transport.abspath(name)
 
 
835
    def _check_format(self, format):
 
 
836
        """Identify the branch format if needed.
 
 
838
        The format is stored as a reference to the format object in
 
 
839
        self._branch_format for code that needs to check it later.
 
 
841
        The format parameter is either None or the branch format class
 
 
842
        used to open this branch.
 
 
845
            format = BzrBranchFormat.find_format(self._transport)
 
 
846
        self._branch_format = format
 
 
847
        mutter("got branch format %s", self._branch_format)
 
 
850
    def get_root_id(self):
 
 
851
        """See Branch.get_root_id."""
 
 
852
        tree = self.repository.revision_tree(self.last_revision())
 
 
853
        return tree.inventory.root.file_id
 
 
855
    def lock_write(self):
 
 
856
        # TODO: test for failed two phase locks. This is known broken.
 
 
857
        self.control_files.lock_write()
 
 
858
        self.repository.lock_write()
 
 
861
        # TODO: test for failed two phase locks. This is known broken.
 
 
862
        self.control_files.lock_read()
 
 
863
        self.repository.lock_read()
 
 
866
        # TODO: test for failed two phase locks. This is known broken.
 
 
867
        self.repository.unlock()
 
 
868
        self.control_files.unlock()
 
 
870
    def peek_lock_mode(self):
 
 
871
        if self.control_files._lock_count == 0:
 
 
874
            return self.control_files._lock_mode
 
 
877
    def print_file(self, file, revision_id):
 
 
878
        """See Branch.print_file."""
 
 
879
        return self.repository.print_file(file, revision_id)
 
 
882
    def append_revision(self, *revision_ids):
 
 
883
        """See Branch.append_revision."""
 
 
884
        for revision_id in revision_ids:
 
 
885
            mutter("add {%s} to revision-history" % revision_id)
 
 
886
        rev_history = self.revision_history()
 
 
887
        rev_history.extend(revision_ids)
 
 
888
        self.set_revision_history(rev_history)
 
 
891
    def set_revision_history(self, rev_history):
 
 
892
        """See Branch.set_revision_history."""
 
 
893
        self.control_files.put_utf8(
 
 
894
            'revision-history', '\n'.join(rev_history))
 
 
896
    def get_revision_delta(self, revno):
 
 
897
        """Return the delta for one revision.
 
 
899
        The delta is relative to its mainline predecessor, or the
 
 
900
        empty tree for revision 1.
 
 
902
        assert isinstance(revno, int)
 
 
903
        rh = self.revision_history()
 
 
904
        if not (1 <= revno <= len(rh)):
 
 
905
            raise InvalidRevisionNumber(revno)
 
 
907
        # revno is 1-based; list is 0-based
 
 
909
        new_tree = self.repository.revision_tree(rh[revno-1])
 
 
911
            old_tree = EmptyTree()
 
 
913
            old_tree = self.repository.revision_tree(rh[revno-2])
 
 
914
        return compare_trees(old_tree, new_tree)
 
 
917
    def revision_history(self):
 
 
918
        """See Branch.revision_history."""
 
 
919
        # FIXME are transactions bound to control files ? RBC 20051121
 
 
920
        transaction = self.get_transaction()
 
 
921
        history = transaction.map.find_revision_history()
 
 
922
        if history is not None:
 
 
923
            mutter("cache hit for revision-history in %s", self)
 
 
925
        history = [l.rstrip('\r\n') for l in
 
 
926
                self.control_files.get_utf8('revision-history').readlines()]
 
 
927
        transaction.map.add_revision_history(history)
 
 
928
        # this call is disabled because revision_history is 
 
 
929
        # not really an object yet, and the transaction is for objects.
 
 
930
        # transaction.register_clean(history, precious=True)
 
 
933
    def update_revisions(self, other, stop_revision=None):
 
 
934
        """See Branch.update_revisions."""
 
 
935
        from bzrlib.fetch import greedy_fetch
 
 
937
        if stop_revision is None:
 
 
938
            stop_revision = other.last_revision()
 
 
939
        ### Should this be checking is_ancestor instead of revision_history?
 
 
940
        if (stop_revision is not None and 
 
 
941
            stop_revision in self.revision_history()):
 
 
943
        greedy_fetch(to_branch=self, from_branch=other,
 
 
944
                     revision=stop_revision)
 
 
945
        pullable_revs = self.pullable_revisions(other, stop_revision)
 
 
946
        if len(pullable_revs) > 0:
 
 
947
            self.append_revision(*pullable_revs)
 
 
949
    def pullable_revisions(self, other, stop_revision):
 
 
950
        """See Branch.pullable_revisions."""
 
 
951
        other_revno = other.revision_id_to_revno(stop_revision)
 
 
953
            return self.missing_revisions(other, other_revno)
 
 
954
        except DivergedBranches, e:
 
 
956
                pullable_revs = get_intervening_revisions(self.last_revision(),
 
 
959
                assert self.last_revision() not in pullable_revs
 
 
961
            except bzrlib.errors.NotAncestor:
 
 
962
                if is_ancestor(self.last_revision(), stop_revision, self):
 
 
967
    def basis_tree(self):
 
 
968
        """See Branch.basis_tree."""
 
 
970
            revision_id = self.revision_history()[-1]
 
 
971
            # FIXME: This is an abstraction violation, the basis tree 
 
 
972
            # here as defined is on the working tree, the method should
 
 
973
            # be too. The basis tree for a branch can be different than
 
 
974
            # that for a working tree. RBC 20051207
 
 
975
            xml = self.working_tree().read_basis_inventory(revision_id)
 
 
976
            inv = bzrlib.xml5.serializer_v5.read_inventory_from_string(xml)
 
 
977
            return RevisionTree(self.repository, inv, revision_id)
 
 
978
        except (IndexError, NoSuchFile, NoWorkingTree), e:
 
 
979
            return self.repository.revision_tree(self.last_revision())
 
 
981
    def working_tree(self):
 
 
982
        """See Branch.working_tree."""
 
 
983
        from bzrlib.workingtree import WorkingTree
 
 
984
        from bzrlib.transport.local import LocalTransport
 
 
985
        if (self.base.find('://') != -1 or 
 
 
986
            not isinstance(self._transport, LocalTransport)):
 
 
987
            raise NoWorkingTree(self.base)
 
 
988
        return WorkingTree(self.base, branch=self)
 
 
991
    def pull(self, source, overwrite=False, stop_revision=None):
 
 
992
        """See Branch.pull."""
 
 
995
            old_count = len(self.revision_history())
 
 
997
                self.update_revisions(source,stop_revision)
 
 
998
            except DivergedBranches:
 
 
1002
                self.set_revision_history(source.revision_history())
 
 
1003
            new_count = len(self.revision_history())
 
 
1004
            return new_count - old_count
 
 
1008
    def get_parent(self):
 
 
1009
        """See Branch.get_parent."""
 
 
1011
        _locs = ['parent', 'pull', 'x-pull']
 
 
1014
                return self.control_files.get_utf8(l).read().strip('\n')
 
 
1019
    def get_push_location(self):
 
 
1020
        """See Branch.get_push_location."""
 
 
1021
        config = bzrlib.config.BranchConfig(self)
 
 
1022
        push_loc = config.get_user_option('push_location')
 
 
1025
    def set_push_location(self, location):
 
 
1026
        """See Branch.set_push_location."""
 
 
1027
        config = bzrlib.config.LocationConfig(self.base)
 
 
1028
        config.set_user_option('push_location', location)
 
 
1031
    def set_parent(self, url):
 
 
1032
        """See Branch.set_parent."""
 
 
1033
        # TODO: Maybe delete old location files?
 
 
1034
        # URLs should never be unicode, even on the local fs,
 
 
1035
        # FIXUP this and get_parent in a future branch format bump:
 
 
1036
        # read and rewrite the file, and have the new format code read
 
 
1037
        # using .get not .get_utf8. RBC 20060125
 
 
1038
        self.control_files.put_utf8('parent', url + '\n')
 
 
1040
    def tree_config(self):
 
 
1041
        return TreeConfig(self)
 
 
1043
    def _get_truncated_history(self, revision_id):
 
 
1044
        history = self.revision_history()
 
 
1045
        if revision_id is None:
 
 
1048
            idx = history.index(revision_id)
 
 
1050
            raise InvalidRevisionId(revision_id=revision, branch=self)
 
 
1051
        return history[:idx+1]
 
 
1054
    def _clone_weave(self, to_location, revision=None, basis_branch=None):
 
 
1056
        from bzrlib.workingtree import WorkingTree
 
 
1057
        assert isinstance(to_location, basestring)
 
 
1058
        if basis_branch is not None:
 
 
1059
            note("basis_branch is not supported for fast weave copy yet.")
 
 
1061
        history = self._get_truncated_history(revision)
 
 
1062
        if not bzrlib.osutils.lexists(to_location):
 
 
1063
            os.mkdir(to_location)
 
 
1064
        branch_to = Branch.initialize(to_location)
 
 
1065
        mutter("copy branch from %s to %s", self, branch_to)
 
 
1067
        self.repository.copy(branch_to.repository)
 
 
1069
        # must be done *after* history is copied across
 
 
1070
        # FIXME duplicate code with base .clone().
 
 
1071
        # .. would template method be useful here?  RBC 20051207
 
 
1072
        branch_to.set_parent(self.base)
 
 
1073
        branch_to.append_revision(*history)
 
 
1074
        # FIXME: this should be in workingtree.clone
 
 
1075
        WorkingTree.create(branch_to, to_location).set_root_id(self.get_root_id())
 
 
1079
    def clone(self, to_location, revision=None, basis_branch=None, to_branch_type=None):
 
 
1080
        # FIXME: clone via create and fetch is probably faster when versioned
 
 
1082
        if to_branch_type is None:
 
 
1083
            to_branch_type = BzrBranch
 
 
1085
        if to_branch_type == BzrBranch \
 
 
1086
            and self.repository.weave_store.listable() \
 
 
1087
            and self.repository.revision_store.listable():
 
 
1088
            return self._clone_weave(to_location, revision, basis_branch)
 
 
1090
        return Branch.clone(self, to_location, revision, basis_branch, to_branch_type)
 
 
1092
    def fileid_involved_between_revs(self, from_revid, to_revid):
 
 
1093
        """Find file_id(s) which are involved in the changes between revisions.
 
 
1095
        This determines the set of revisions which are involved, and then
 
 
1096
        finds all file ids affected by those revisions.
 
 
1098
        # TODO: jam 20060119 This code assumes that w.inclusions will
 
 
1099
        #       always be correct. But because of the presence of ghosts
 
 
1100
        #       it is possible to be wrong.
 
 
1101
        #       One specific example from Robert Collins:
 
 
1102
        #       Two branches, with revisions ABC, and AD
 
 
1103
        #       C is a ghost merge of D.
 
 
1104
        #       Inclusions doesn't recognize D as an ancestor.
 
 
1105
        #       If D is ever merged in the future, the weave
 
 
1106
        #       won't be fixed, because AD never saw revision C
 
 
1107
        #       to cause a conflict which would force a reweave.
 
 
1108
        w = self.repository.get_inventory_weave()
 
 
1109
        from_set = set(w.inclusions([w.lookup(from_revid)]))
 
 
1110
        to_set = set(w.inclusions([w.lookup(to_revid)]))
 
 
1111
        included = to_set.difference(from_set)
 
 
1112
        changed = map(w.idx_to_name, included)
 
 
1113
        return self._fileid_involved_by_set(changed)
 
 
1115
    def fileid_involved(self, last_revid=None):
 
 
1116
        """Find all file_ids modified in the ancestry of last_revid.
 
 
1118
        :param last_revid: If None, last_revision() will be used.
 
 
1120
        w = self.repository.get_inventory_weave()
 
 
1122
            changed = set(w._names)
 
 
1124
            included = w.inclusions([w.lookup(last_revid)])
 
 
1125
            changed = map(w.idx_to_name, included)
 
 
1126
        return self._fileid_involved_by_set(changed)
 
 
1128
    def fileid_involved_by_set(self, changes):
 
 
1129
        """Find all file_ids modified by the set of revisions passed in.
 
 
1131
        :param changes: A set() of revision ids
 
 
1133
        # TODO: jam 20060119 This line does *nothing*, remove it.
 
 
1134
        #       or better yet, change _fileid_involved_by_set so
 
 
1135
        #       that it takes the inventory weave, rather than
 
 
1136
        #       pulling it out by itself.
 
 
1137
        w = self.repository.get_inventory_weave()
 
 
1138
        return self._fileid_involved_by_set(changes)
 
 
1140
    def _fileid_involved_by_set(self, changes):
 
 
1141
        """Find the set of file-ids affected by the set of revisions.
 
 
1143
        :param changes: A set() of revision ids.
 
 
1144
        :return: A set() of file ids.
 
 
1146
        This peaks at the Weave, interpreting each line, looking to
 
 
1147
        see if it mentions one of the revisions. And if so, includes
 
 
1148
        the file id mentioned.
 
 
1149
        This expects both the Weave format, and the serialization
 
 
1150
        to have a single line per file/directory, and to have
 
 
1151
        fileid="" and revision="" on that line.
 
 
1153
        assert (isinstance(self._branch_format, BzrBranchFormat5) or
 
 
1154
                isinstance(self._branch_format, BzrBranchFormat6)), \
 
 
1155
            "fileid_involved only supported for branches which store inventory as xml"
 
 
1157
        w = self.repository.get_inventory_weave()
 
 
1159
        for line in w._weave:
 
 
1161
            # it is ugly, but it is due to the weave structure
 
 
1162
            if not isinstance(line, basestring): continue
 
 
1164
            start = line.find('file_id="')+9
 
 
1165
            if start < 9: continue
 
 
1166
            end = line.find('"', start)
 
 
1168
            file_id = xml.sax.saxutils.unescape(line[start:end])
 
 
1170
            # check if file_id is already present
 
 
1171
            if file_id in file_ids: continue
 
 
1173
            start = line.find('revision="')+10
 
 
1174
            if start < 10: continue
 
 
1175
            end = line.find('"', start)
 
 
1177
            revision_id = xml.sax.saxutils.unescape(line[start:end])
 
 
1179
            if revision_id in changes:
 
 
1180
                file_ids.add(file_id)
 
 
1185
Branch.set_default_initializer(BzrBranch._initialize)
 
 
1188
class BranchTestProviderAdapter(object):
 
 
1189
    """A tool to generate a suite testing multiple branch formats at once.
 
 
1191
    This is done by copying the test once for each transport and injecting
 
 
1192
    the transport_server, transport_readonly_server, and branch_format
 
 
1193
    classes into each copy. Each copy is also given a new id() to make it
 
 
1197
    def __init__(self, transport_server, transport_readonly_server, formats):
 
 
1198
        self._transport_server = transport_server
 
 
1199
        self._transport_readonly_server = transport_readonly_server
 
 
1200
        self._formats = formats
 
 
1202
    def adapt(self, test):
 
 
1203
        result = TestSuite()
 
 
1204
        for format in self._formats:
 
 
1205
            new_test = deepcopy(test)
 
 
1206
            new_test.transport_server = self._transport_server
 
 
1207
            new_test.transport_readonly_server = self._transport_readonly_server
 
 
1208
            new_test.branch_format = format
 
 
1209
            def make_new_test_id():
 
 
1210
                new_id = "%s(%s)" % (new_test.id(), format.__class__.__name__)
 
 
1211
                return lambda: new_id
 
 
1212
            new_test.id = make_new_test_id()
 
 
1213
            result.addTest(new_test)
 
 
1217
class ScratchBranch(BzrBranch):
 
 
1218
    """Special test class: a branch that cleans up after itself.
 
 
1220
    >>> b = ScratchBranch()
 
 
1224
    >>> b._transport.__del__()
 
 
1229
    def __init__(self, files=[], dirs=[], transport=None):
 
 
1230
        """Make a test branch.
 
 
1232
        This creates a temporary directory and runs init-tree in it.
 
 
1234
        If any files are listed, they are created in the working copy.
 
 
1236
        if transport is None:
 
 
1237
            transport = bzrlib.transport.local.ScratchTransport()
 
 
1238
            # local import for scope restriction
 
 
1239
            from bzrlib.workingtree import WorkingTree
 
 
1240
            WorkingTree.create_standalone(transport.base)
 
 
1241
            super(ScratchBranch, self).__init__(transport)
 
 
1243
            super(ScratchBranch, self).__init__(transport)
 
 
1245
        # BzrBranch creates a clone to .bzr and then forgets about the
 
 
1246
        # original transport. A ScratchTransport() deletes itself and
 
 
1247
        # everything underneath it when it goes away, so we need to
 
 
1248
        # grab a local copy to prevent that from happening
 
 
1249
        self._transport = transport
 
 
1252
            self._transport.mkdir(d)
 
 
1255
            self._transport.put(f, 'content of %s' % f)
 
 
1259
        >>> orig = ScratchBranch(files=["file1", "file2"])
 
 
1260
        >>> os.listdir(orig.base)
 
 
1261
        [u'.bzr', u'file1', u'file2']
 
 
1262
        >>> clone = orig.clone()
 
 
1263
        >>> if os.name != 'nt':
 
 
1264
        ...   os.path.samefile(orig.base, clone.base)
 
 
1266
        ...   orig.base == clone.base
 
 
1269
        >>> os.listdir(clone.base)
 
 
1270
        [u'.bzr', u'file1', u'file2']
 
 
1272
        from shutil import copytree
 
 
1273
        from bzrlib.osutils import mkdtemp
 
 
1276
        copytree(self.base, base, symlinks=True)
 
 
1277
        return ScratchBranch(
 
 
1278
            transport=bzrlib.transport.local.ScratchTransport(base))
 
 
1281
######################################################################
 
 
1285
def is_control_file(filename):
 
 
1286
    ## FIXME: better check
 
 
1287
    filename = normpath(filename)
 
 
1288
    while filename != '':
 
 
1289
        head, tail = os.path.split(filename)
 
 
1290
        ## mutter('check %r for control file' % ((head, tail),))
 
 
1291
        if tail == bzrlib.BZRDIR:
 
 
1293
        if filename == head: