1
# Copyright (C) 2005, 2006 Canonical Ltd
 
 
3
# This program is free software; you can redistribute it and/or modify
 
 
4
# it under the terms of the GNU General Public License as published by
 
 
5
# the Free Software Foundation; either version 2 of the License, or
 
 
6
# (at your option) any later version.
 
 
8
# This program is distributed in the hope that it will be useful,
 
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
 
11
# GNU General Public License for more details.
 
 
13
# You should have received a copy of the GNU General Public License
 
 
14
# along with this program; if not, write to the Free Software
 
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
 
17
"""BzrDir logic. The BzrDir is the basic control directory used by bzr.
 
 
19
At format 7 this was split out into Branch, Repository and Checkout control
 
 
23
from copy import deepcopy
 
 
25
from cStringIO import StringIO
 
 
26
from unittest import TestSuite
 
 
29
import bzrlib.errors as errors
 
 
30
from bzrlib.lockable_files import LockableFiles, TransportLock
 
 
31
from bzrlib.lockdir import LockDir
 
 
32
from bzrlib.osutils import (
 
 
39
from bzrlib.store.revision.text import TextRevisionStore
 
 
40
from bzrlib.store.text import TextStore
 
 
41
from bzrlib.store.versioned import WeaveStore
 
 
42
from bzrlib.symbol_versioning import *
 
 
43
from bzrlib.trace import mutter
 
 
44
from bzrlib.transactions import WriteTransaction
 
 
45
from bzrlib.transport import get_transport
 
 
46
from bzrlib.transport.local import LocalTransport
 
 
47
import bzrlib.urlutils as urlutils
 
 
48
from bzrlib.weave import Weave
 
 
49
from bzrlib.xml4 import serializer_v4
 
 
54
    """A .bzr control diretory.
 
 
56
    BzrDir instances let you create or open any of the things that can be
 
 
57
    found within .bzr - checkouts, branches and repositories.
 
 
60
        the transport which this bzr dir is rooted at (i.e. file:///.../.bzr/)
 
 
62
        a transport connected to the directory this bzr was opened from.
 
 
66
        """Invoke break_lock on the first object in the bzrdir.
 
 
68
        If there is a tree, the tree is opened and break_lock() called.
 
 
69
        Otherwise, branch is tried, and finally repository.
 
 
72
            thing_to_unlock = self.open_workingtree()
 
 
73
        except (errors.NotLocalUrl, errors.NoWorkingTree):
 
 
75
                thing_to_unlock = self.open_branch()
 
 
76
            except errors.NotBranchError:
 
 
78
                    thing_to_unlock = self.open_repository()
 
 
79
                except errors.NoRepositoryPresent:
 
 
81
        thing_to_unlock.break_lock()
 
 
83
    def can_convert_format(self):
 
 
84
        """Return true if this bzrdir is one whose format we can convert from."""
 
 
88
    def _check_supported(format, allow_unsupported):
 
 
89
        """Check whether format is a supported format.
 
 
91
        If allow_unsupported is True, this is a no-op.
 
 
93
        if not allow_unsupported and not format.is_supported():
 
 
94
            # see open_downlevel to open legacy branches.
 
 
95
            raise errors.UnsupportedFormatError(
 
 
96
                    'sorry, format %s not supported' % format,
 
 
97
                    ['use a different bzr version',
 
 
98
                     'or remove the .bzr directory'
 
 
99
                     ' and "bzr init" again'])
 
 
101
    def clone(self, url, revision_id=None, basis=None, force_new_repo=False):
 
 
102
        """Clone this bzrdir and its contents to url verbatim.
 
 
104
        If urls last component does not exist, it will be created.
 
 
106
        if revision_id is not None, then the clone operation may tune
 
 
107
            itself to download less data.
 
 
108
        :param force_new_repo: Do not use a shared repository for the target 
 
 
109
                               even if one is available.
 
 
112
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
 
113
        result = self._format.initialize(url)
 
 
115
            local_repo = self.find_repository()
 
 
116
        except errors.NoRepositoryPresent:
 
 
119
            # may need to copy content in
 
 
121
                result_repo = local_repo.clone(
 
 
123
                    revision_id=revision_id,
 
 
125
                result_repo.set_make_working_trees(local_repo.make_working_trees())
 
 
128
                    result_repo = result.find_repository()
 
 
129
                    # fetch content this dir needs.
 
 
131
                        # XXX FIXME RBC 20060214 need tests for this when the basis
 
 
133
                        result_repo.fetch(basis_repo, revision_id=revision_id)
 
 
134
                    result_repo.fetch(local_repo, revision_id=revision_id)
 
 
135
                except errors.NoRepositoryPresent:
 
 
136
                    # needed to make one anyway.
 
 
137
                    result_repo = local_repo.clone(
 
 
139
                        revision_id=revision_id,
 
 
141
                    result_repo.set_make_working_trees(local_repo.make_working_trees())
 
 
142
        # 1 if there is a branch present
 
 
143
        #   make sure its content is available in the target repository
 
 
146
            self.open_branch().clone(result, revision_id=revision_id)
 
 
147
        except errors.NotBranchError:
 
 
150
            self.open_workingtree().clone(result, basis=basis_tree)
 
 
151
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
 
155
    def _get_basis_components(self, basis):
 
 
156
        """Retrieve the basis components that are available at basis."""
 
 
158
            return None, None, None
 
 
160
            basis_tree = basis.open_workingtree()
 
 
161
            basis_branch = basis_tree.branch
 
 
162
            basis_repo = basis_branch.repository
 
 
163
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
 
166
                basis_branch = basis.open_branch()
 
 
167
                basis_repo = basis_branch.repository
 
 
168
            except errors.NotBranchError:
 
 
171
                    basis_repo = basis.open_repository()
 
 
172
                except errors.NoRepositoryPresent:
 
 
174
        return basis_repo, basis_branch, basis_tree
 
 
176
    # TODO: This should be given a Transport, and should chdir up; otherwise
 
 
177
    # this will open a new connection.
 
 
178
    def _make_tail(self, url):
 
 
179
        head, tail = urlutils.split(url)
 
 
180
        if tail and tail != '.':
 
 
181
            t = bzrlib.transport.get_transport(head)
 
 
184
            except errors.FileExists:
 
 
187
    # TODO: Should take a Transport
 
 
189
    def create(cls, base):
 
 
190
        """Create a new BzrDir at the url 'base'.
 
 
192
        This will call the current default formats initialize with base
 
 
193
        as the only parameter.
 
 
195
        If you need a specific format, consider creating an instance
 
 
196
        of that and calling initialize().
 
 
198
        if cls is not BzrDir:
 
 
199
            raise AssertionError("BzrDir.create always creates the default format, "
 
 
200
                    "not one of %r" % cls)
 
 
201
        head, tail = urlutils.split(base)
 
 
202
        if tail and tail != '.':
 
 
203
            t = bzrlib.transport.get_transport(head)
 
 
206
            except errors.FileExists:
 
 
208
        return BzrDirFormat.get_default_format().initialize(safe_unicode(base))
 
 
210
    def create_branch(self):
 
 
211
        """Create a branch in this BzrDir.
 
 
213
        The bzrdirs format will control what branch format is created.
 
 
214
        For more control see BranchFormatXX.create(a_bzrdir).
 
 
216
        raise NotImplementedError(self.create_branch)
 
 
219
    def create_branch_and_repo(base, force_new_repo=False):
 
 
220
        """Create a new BzrDir, Branch and Repository at the url 'base'.
 
 
222
        This will use the current default BzrDirFormat, and use whatever 
 
 
223
        repository format that that uses via bzrdir.create_branch and
 
 
224
        create_repository. If a shared repository is available that is used
 
 
227
        The created Branch object is returned.
 
 
229
        :param base: The URL to create the branch at.
 
 
230
        :param force_new_repo: If True a new repository is always created.
 
 
232
        bzrdir = BzrDir.create(base)
 
 
233
        bzrdir._find_or_create_repository(force_new_repo)
 
 
234
        return bzrdir.create_branch()
 
 
236
    def _find_or_create_repository(self, force_new_repo):
 
 
237
        """Create a new repository if needed, returning the repository."""
 
 
239
            return self.create_repository()
 
 
241
            return self.find_repository()
 
 
242
        except errors.NoRepositoryPresent:
 
 
243
            return self.create_repository()
 
 
246
    def create_branch_convenience(base, force_new_repo=False,
 
 
247
                                  force_new_tree=None, format=None):
 
 
248
        """Create a new BzrDir, Branch and Repository at the url 'base'.
 
 
250
        This is a convenience function - it will use an existing repository
 
 
251
        if possible, can be told explicitly whether to create a working tree or
 
 
254
        This will use the current default BzrDirFormat, and use whatever 
 
 
255
        repository format that that uses via bzrdir.create_branch and
 
 
256
        create_repository. If a shared repository is available that is used
 
 
257
        preferentially. Whatever repository is used, its tree creation policy
 
 
260
        The created Branch object is returned.
 
 
261
        If a working tree cannot be made due to base not being a file:// url,
 
 
262
        no error is raised unless force_new_tree is True, in which case no 
 
 
263
        data is created on disk and NotLocalUrl is raised.
 
 
265
        :param base: The URL to create the branch at.
 
 
266
        :param force_new_repo: If True a new repository is always created.
 
 
267
        :param force_new_tree: If True or False force creation of a tree or 
 
 
268
                               prevent such creation respectively.
 
 
269
        :param format: Override for the for the bzrdir format to create
 
 
272
            # check for non local urls
 
 
273
            t = get_transport(safe_unicode(base))
 
 
274
            if not isinstance(t, LocalTransport):
 
 
275
                raise errors.NotLocalUrl(base)
 
 
277
            bzrdir = BzrDir.create(base)
 
 
279
            bzrdir = format.initialize(base)
 
 
280
        repo = bzrdir._find_or_create_repository(force_new_repo)
 
 
281
        result = bzrdir.create_branch()
 
 
282
        if force_new_tree or (repo.make_working_trees() and 
 
 
283
                              force_new_tree is None):
 
 
285
                bzrdir.create_workingtree()
 
 
286
            except errors.NotLocalUrl:
 
 
291
    def create_repository(base, shared=False):
 
 
292
        """Create a new BzrDir and Repository at the url 'base'.
 
 
294
        This will use the current default BzrDirFormat, and use whatever 
 
 
295
        repository format that that uses for bzrdirformat.create_repository.
 
 
297
        ;param shared: Create a shared repository rather than a standalone
 
 
299
        The Repository object is returned.
 
 
301
        This must be overridden as an instance method in child classes, where
 
 
302
        it should take no parameters and construct whatever repository format
 
 
303
        that child class desires.
 
 
305
        bzrdir = BzrDir.create(base)
 
 
306
        return bzrdir.create_repository()
 
 
309
    def create_standalone_workingtree(base):
 
 
310
        """Create a new BzrDir, WorkingTree, Branch and Repository at 'base'.
 
 
312
        'base' must be a local path or a file:// url.
 
 
314
        This will use the current default BzrDirFormat, and use whatever 
 
 
315
        repository format that that uses for bzrdirformat.create_workingtree,
 
 
316
        create_branch and create_repository.
 
 
318
        The WorkingTree object is returned.
 
 
320
        t = get_transport(safe_unicode(base))
 
 
321
        if not isinstance(t, LocalTransport):
 
 
322
            raise errors.NotLocalUrl(base)
 
 
323
        bzrdir = BzrDir.create_branch_and_repo(safe_unicode(base),
 
 
324
                                               force_new_repo=True).bzrdir
 
 
325
        return bzrdir.create_workingtree()
 
 
327
    def create_workingtree(self, revision_id=None):
 
 
328
        """Create a working tree at this BzrDir.
 
 
330
        revision_id: create it as of this revision id.
 
 
332
        raise NotImplementedError(self.create_workingtree)
 
 
334
    def find_repository(self):
 
 
335
        """Find the repository that should be used for a_bzrdir.
 
 
337
        This does not require a branch as we use it to find the repo for
 
 
338
        new branches as well as to hook existing branches up to their
 
 
342
            return self.open_repository()
 
 
343
        except errors.NoRepositoryPresent:
 
 
345
        next_transport = self.root_transport.clone('..')
 
 
347
            # find the next containing bzrdir
 
 
349
                found_bzrdir = BzrDir.open_containing_from_transport(
 
 
351
            except errors.NotBranchError:
 
 
353
                raise errors.NoRepositoryPresent(self)
 
 
354
            # does it have a repository ?
 
 
356
                repository = found_bzrdir.open_repository()
 
 
357
            except errors.NoRepositoryPresent:
 
 
358
                next_transport = found_bzrdir.root_transport.clone('..')
 
 
359
                if (found_bzrdir.root_transport.base == next_transport.base):
 
 
360
                    # top of the file system
 
 
364
            if ((found_bzrdir.root_transport.base == 
 
 
365
                 self.root_transport.base) or repository.is_shared()):
 
 
368
                raise errors.NoRepositoryPresent(self)
 
 
369
        raise errors.NoRepositoryPresent(self)
 
 
371
    def get_branch_transport(self, branch_format):
 
 
372
        """Get the transport for use by branch format in this BzrDir.
 
 
374
        Note that bzr dirs that do not support format strings will raise
 
 
375
        IncompatibleFormat if the branch format they are given has
 
 
376
        a format string, and vice verca.
 
 
378
        If branch_format is None, the transport is returned with no 
 
 
379
        checking. if it is not None, then the returned transport is
 
 
380
        guaranteed to point to an existing directory ready for use.
 
 
382
        raise NotImplementedError(self.get_branch_transport)
 
 
384
    def get_repository_transport(self, repository_format):
 
 
385
        """Get the transport for use by repository format in this BzrDir.
 
 
387
        Note that bzr dirs that do not support format strings will raise
 
 
388
        IncompatibleFormat if the repository format they are given has
 
 
389
        a format string, and vice verca.
 
 
391
        If repository_format is None, the transport is returned with no 
 
 
392
        checking. if it is not None, then the returned transport is
 
 
393
        guaranteed to point to an existing directory ready for use.
 
 
395
        raise NotImplementedError(self.get_repository_transport)
 
 
397
    def get_workingtree_transport(self, tree_format):
 
 
398
        """Get the transport for use by workingtree format in this BzrDir.
 
 
400
        Note that bzr dirs that do not support format strings will raise
 
 
401
        IncompatibleFormat if the workingtree format they are given has
 
 
402
        a format string, and vice verca.
 
 
404
        If workingtree_format is None, the transport is returned with no 
 
 
405
        checking. if it is not None, then the returned transport is
 
 
406
        guaranteed to point to an existing directory ready for use.
 
 
408
        raise NotImplementedError(self.get_workingtree_transport)
 
 
410
    def __init__(self, _transport, _format):
 
 
411
        """Initialize a Bzr control dir object.
 
 
413
        Only really common logic should reside here, concrete classes should be
 
 
414
        made with varying behaviours.
 
 
416
        :param _format: the format that is creating this BzrDir instance.
 
 
417
        :param _transport: the transport this dir is based at.
 
 
419
        self._format = _format
 
 
420
        self.transport = _transport.clone('.bzr')
 
 
421
        self.root_transport = _transport
 
 
423
    def is_control_filename(self, filename):
 
 
424
        """True if filename is the name of a path which is reserved for bzrdir's.
 
 
426
        :param filename: A filename within the root transport of this bzrdir.
 
 
428
        This is true IF and ONLY IF the filename is part of the namespace reserved
 
 
429
        for bzr control dirs. Currently this is the '.bzr' directory in the root
 
 
430
        of the root_transport. it is expected that plugins will need to extend
 
 
431
        this in the future - for instance to make bzr talk with svn working
 
 
434
        # this might be better on the BzrDirFormat class because it refers to 
 
 
435
        # all the possible bzrdir disk formats. 
 
 
436
        # This method is tested via the workingtree is_control_filename tests- 
 
 
437
        # it was extractd from WorkingTree.is_control_filename. If the methods
 
 
438
        # contract is extended beyond the current trivial  implementation please
 
 
439
        # add new tests for it to the appropriate place.
 
 
440
        return filename == '.bzr' or filename.startswith('.bzr/')
 
 
442
    def needs_format_conversion(self, format=None):
 
 
443
        """Return true if this bzrdir needs convert_format run on it.
 
 
445
        For instance, if the repository format is out of date but the 
 
 
446
        branch and working tree are not, this should return True.
 
 
448
        :param format: Optional parameter indicating a specific desired
 
 
449
                       format we plan to arrive at.
 
 
451
        raise NotImplementedError(self.needs_format_conversion)
 
 
454
    def open_unsupported(base):
 
 
455
        """Open a branch which is not supported."""
 
 
456
        return BzrDir.open(base, _unsupported=True)
 
 
459
    def open(base, _unsupported=False):
 
 
460
        """Open an existing bzrdir, rooted at 'base' (url)
 
 
462
        _unsupported is a private parameter to the BzrDir class.
 
 
464
        t = get_transport(base)
 
 
465
        mutter("trying to open %r with transport %r", base, t)
 
 
466
        format = BzrDirFormat.find_format(t)
 
 
467
        BzrDir._check_supported(format, _unsupported)
 
 
468
        return format.open(t, _found=True)
 
 
470
    def open_branch(self, unsupported=False):
 
 
471
        """Open the branch object at this BzrDir if one is present.
 
 
473
        If unsupported is True, then no longer supported branch formats can
 
 
476
        TODO: static convenience version of this?
 
 
478
        raise NotImplementedError(self.open_branch)
 
 
481
    def open_containing(url):
 
 
482
        """Open an existing branch which contains url.
 
 
484
        :param url: url to search from.
 
 
485
        See open_containing_from_transport for more detail.
 
 
487
        return BzrDir.open_containing_from_transport(get_transport(url))
 
 
490
    def open_containing_from_transport(a_transport):
 
 
491
        """Open an existing branch which contains a_transport.base
 
 
493
        This probes for a branch at a_transport, and searches upwards from there.
 
 
495
        Basically we keep looking up until we find the control directory or
 
 
496
        run into the root.  If there isn't one, raises NotBranchError.
 
 
497
        If there is one and it is either an unrecognised format or an unsupported 
 
 
498
        format, UnknownFormatError or UnsupportedFormatError are raised.
 
 
499
        If there is one, it is returned, along with the unused portion of url.
 
 
501
        :return: The BzrDir that contains the path, and a Unicode path 
 
 
502
                for the rest of the URL.
 
 
504
        # this gets the normalised url back. I.e. '.' -> the full path.
 
 
505
        url = a_transport.base
 
 
508
                format = BzrDirFormat.find_format(a_transport)
 
 
509
                BzrDir._check_supported(format, False)
 
 
510
                return format.open(a_transport), urlutils.unescape(a_transport.relpath(url))
 
 
511
            except errors.NotBranchError, e:
 
 
512
                ## mutter('not a branch in: %r %s', a_transport.base, e)
 
 
514
            new_t = a_transport.clone('..')
 
 
515
            if new_t.base == a_transport.base:
 
 
516
                # reached the root, whatever that may be
 
 
517
                raise errors.NotBranchError(path=url)
 
 
520
    def open_repository(self, _unsupported=False):
 
 
521
        """Open the repository object at this BzrDir if one is present.
 
 
523
        This will not follow the Branch object pointer - its strictly a direct
 
 
524
        open facility. Most client code should use open_branch().repository to
 
 
527
        _unsupported is a private parameter, not part of the api.
 
 
528
        TODO: static convenience version of this?
 
 
530
        raise NotImplementedError(self.open_repository)
 
 
532
    def open_workingtree(self, _unsupported=False):
 
 
533
        """Open the workingtree object at this BzrDir if one is present.
 
 
535
        TODO: static convenience version of this?
 
 
537
        raise NotImplementedError(self.open_workingtree)
 
 
539
    def has_branch(self):
 
 
540
        """Tell if this bzrdir contains a branch.
 
 
542
        Note: if you're going to open the branch, you should just go ahead
 
 
543
        and try, and not ask permission first.  (This method just opens the 
 
 
544
        branch and discards it, and that's somewhat expensive.) 
 
 
549
        except errors.NotBranchError:
 
 
552
    def has_workingtree(self):
 
 
553
        """Tell if this bzrdir contains a working tree.
 
 
555
        This will still raise an exception if the bzrdir has a workingtree that
 
 
556
        is remote & inaccessible.
 
 
558
        Note: if you're going to open the working tree, you should just go ahead
 
 
559
        and try, and not ask permission first.  (This method just opens the 
 
 
560
        workingtree and discards it, and that's somewhat expensive.) 
 
 
563
            self.open_workingtree()
 
 
565
        except errors.NoWorkingTree:
 
 
568
    def sprout(self, url, revision_id=None, basis=None, force_new_repo=False):
 
 
569
        """Create a copy of this bzrdir prepared for use as a new line of
 
 
572
        If urls last component does not exist, it will be created.
 
 
574
        Attributes related to the identity of the source branch like
 
 
575
        branch nickname will be cleaned, a working tree is created
 
 
576
        whether one existed before or not; and a local branch is always
 
 
579
        if revision_id is not None, then the clone operation may tune
 
 
580
            itself to download less data.
 
 
583
        result = self._format.initialize(url)
 
 
584
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
 
586
            source_branch = self.open_branch()
 
 
587
            source_repository = source_branch.repository
 
 
588
        except errors.NotBranchError:
 
 
591
                source_repository = self.open_repository()
 
 
592
            except errors.NoRepositoryPresent:
 
 
593
                # copy the entire basis one if there is one
 
 
594
                # but there is no repository.
 
 
595
                source_repository = basis_repo
 
 
600
                result_repo = result.find_repository()
 
 
601
            except errors.NoRepositoryPresent:
 
 
603
        if source_repository is None and result_repo is not None:
 
 
605
        elif source_repository is None and result_repo is None:
 
 
606
            # no repo available, make a new one
 
 
607
            result.create_repository()
 
 
608
        elif source_repository is not None and result_repo is None:
 
 
609
            # have source, and want to make a new target repo
 
 
610
            # we dont clone the repo because that preserves attributes
 
 
611
            # like is_shared(), and we have not yet implemented a 
 
 
612
            # repository sprout().
 
 
613
            result_repo = result.create_repository()
 
 
614
        if result_repo is not None:
 
 
615
            # fetch needed content into target.
 
 
617
                # XXX FIXME RBC 20060214 need tests for this when the basis
 
 
619
                result_repo.fetch(basis_repo, revision_id=revision_id)
 
 
620
            result_repo.fetch(source_repository, revision_id=revision_id)
 
 
621
        if source_branch is not None:
 
 
622
            source_branch.sprout(result, revision_id=revision_id)
 
 
624
            result.create_branch()
 
 
625
        # TODO: jam 20060426 we probably need a test in here in the
 
 
626
        #       case that the newly sprouted branch is a remote one
 
 
627
        if result_repo is None or result_repo.make_working_trees():
 
 
628
            result.create_workingtree()
 
 
632
class BzrDirPreSplitOut(BzrDir):
 
 
633
    """A common class for the all-in-one formats."""
 
 
635
    def __init__(self, _transport, _format):
 
 
636
        """See BzrDir.__init__."""
 
 
637
        super(BzrDirPreSplitOut, self).__init__(_transport, _format)
 
 
638
        assert self._format._lock_class == TransportLock
 
 
639
        assert self._format._lock_file_name == 'branch-lock'
 
 
640
        self._control_files = LockableFiles(self.get_branch_transport(None),
 
 
641
                                            self._format._lock_file_name,
 
 
642
                                            self._format._lock_class)
 
 
644
    def break_lock(self):
 
 
645
        """Pre-splitout bzrdirs do not suffer from stale locks."""
 
 
646
        raise NotImplementedError(self.break_lock)
 
 
648
    def clone(self, url, revision_id=None, basis=None, force_new_repo=False):
 
 
649
        """See BzrDir.clone()."""
 
 
650
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
652
        result = self._format._initialize_for_clone(url)
 
 
653
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
 
654
        self.open_repository().clone(result, revision_id=revision_id, basis=basis_repo)
 
 
655
        from_branch = self.open_branch()
 
 
656
        from_branch.clone(result, revision_id=revision_id)
 
 
658
            self.open_workingtree().clone(result, basis=basis_tree)
 
 
659
        except errors.NotLocalUrl:
 
 
660
            # make a new one, this format always has to have one.
 
 
662
                WorkingTreeFormat2().initialize(result)
 
 
663
            except errors.NotLocalUrl:
 
 
664
                # but we cannot do it for remote trees.
 
 
665
                to_branch = result.open_branch()
 
 
666
                WorkingTreeFormat2().stub_initialize_remote(to_branch.control_files)
 
 
669
    def create_branch(self):
 
 
670
        """See BzrDir.create_branch."""
 
 
671
        return self.open_branch()
 
 
673
    def create_repository(self, shared=False):
 
 
674
        """See BzrDir.create_repository."""
 
 
676
            raise errors.IncompatibleFormat('shared repository', self._format)
 
 
677
        return self.open_repository()
 
 
679
    def create_workingtree(self, revision_id=None):
 
 
680
        """See BzrDir.create_workingtree."""
 
 
681
        # this looks buggy but is not -really-
 
 
682
        # clone and sprout will have set the revision_id
 
 
683
        # and that will have set it for us, its only
 
 
684
        # specific uses of create_workingtree in isolation
 
 
685
        # that can do wonky stuff here, and that only
 
 
686
        # happens for creating checkouts, which cannot be 
 
 
687
        # done on this format anyway. So - acceptable wart.
 
 
688
        result = self.open_workingtree()
 
 
689
        if revision_id is not None:
 
 
690
            result.set_last_revision(revision_id)
 
 
693
    def get_branch_transport(self, branch_format):
 
 
694
        """See BzrDir.get_branch_transport()."""
 
 
695
        if branch_format is None:
 
 
696
            return self.transport
 
 
698
            branch_format.get_format_string()
 
 
699
        except NotImplementedError:
 
 
700
            return self.transport
 
 
701
        raise errors.IncompatibleFormat(branch_format, self._format)
 
 
703
    def get_repository_transport(self, repository_format):
 
 
704
        """See BzrDir.get_repository_transport()."""
 
 
705
        if repository_format is None:
 
 
706
            return self.transport
 
 
708
            repository_format.get_format_string()
 
 
709
        except NotImplementedError:
 
 
710
            return self.transport
 
 
711
        raise errors.IncompatibleFormat(repository_format, self._format)
 
 
713
    def get_workingtree_transport(self, workingtree_format):
 
 
714
        """See BzrDir.get_workingtree_transport()."""
 
 
715
        if workingtree_format is None:
 
 
716
            return self.transport
 
 
718
            workingtree_format.get_format_string()
 
 
719
        except NotImplementedError:
 
 
720
            return self.transport
 
 
721
        raise errors.IncompatibleFormat(workingtree_format, self._format)
 
 
723
    def needs_format_conversion(self, format=None):
 
 
724
        """See BzrDir.needs_format_conversion()."""
 
 
725
        # if the format is not the same as the system default,
 
 
726
        # an upgrade is needed.
 
 
728
            format = BzrDirFormat.get_default_format()
 
 
729
        return not isinstance(self._format, format.__class__)
 
 
731
    def open_branch(self, unsupported=False):
 
 
732
        """See BzrDir.open_branch."""
 
 
733
        from bzrlib.branch import BzrBranchFormat4
 
 
734
        format = BzrBranchFormat4()
 
 
735
        self._check_supported(format, unsupported)
 
 
736
        return format.open(self, _found=True)
 
 
738
    def sprout(self, url, revision_id=None, basis=None):
 
 
739
        """See BzrDir.sprout()."""
 
 
740
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
742
        result = self._format._initialize_for_clone(url)
 
 
743
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
 
745
            self.open_repository().clone(result, revision_id=revision_id, basis=basis_repo)
 
 
746
        except errors.NoRepositoryPresent:
 
 
749
            self.open_branch().sprout(result, revision_id=revision_id)
 
 
750
        except errors.NotBranchError:
 
 
752
        # we always want a working tree
 
 
753
        WorkingTreeFormat2().initialize(result)
 
 
757
class BzrDir4(BzrDirPreSplitOut):
 
 
758
    """A .bzr version 4 control object.
 
 
760
    This is a deprecated format and may be removed after sept 2006.
 
 
763
    def create_repository(self, shared=False):
 
 
764
        """See BzrDir.create_repository."""
 
 
765
        return self._format.repository_format.initialize(self, shared)
 
 
767
    def needs_format_conversion(self, format=None):
 
 
768
        """Format 4 dirs are always in need of conversion."""
 
 
771
    def open_repository(self):
 
 
772
        """See BzrDir.open_repository."""
 
 
773
        from bzrlib.repository import RepositoryFormat4
 
 
774
        return RepositoryFormat4().open(self, _found=True)
 
 
777
class BzrDir5(BzrDirPreSplitOut):
 
 
778
    """A .bzr version 5 control object.
 
 
780
    This is a deprecated format and may be removed after sept 2006.
 
 
783
    def open_repository(self):
 
 
784
        """See BzrDir.open_repository."""
 
 
785
        from bzrlib.repository import RepositoryFormat5
 
 
786
        return RepositoryFormat5().open(self, _found=True)
 
 
788
    def open_workingtree(self, _unsupported=False):
 
 
789
        """See BzrDir.create_workingtree."""
 
 
790
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
791
        return WorkingTreeFormat2().open(self, _found=True)
 
 
794
class BzrDir6(BzrDirPreSplitOut):
 
 
795
    """A .bzr version 6 control object.
 
 
797
    This is a deprecated format and may be removed after sept 2006.
 
 
800
    def open_repository(self):
 
 
801
        """See BzrDir.open_repository."""
 
 
802
        from bzrlib.repository import RepositoryFormat6
 
 
803
        return RepositoryFormat6().open(self, _found=True)
 
 
805
    def open_workingtree(self, _unsupported=False):
 
 
806
        """See BzrDir.create_workingtree."""
 
 
807
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
808
        return WorkingTreeFormat2().open(self, _found=True)
 
 
811
class BzrDirMeta1(BzrDir):
 
 
812
    """A .bzr meta version 1 control object.
 
 
814
    This is the first control object where the 
 
 
815
    individual aspects are really split out: there are separate repository,
 
 
816
    workingtree and branch subdirectories and any subset of the three can be
 
 
817
    present within a BzrDir.
 
 
820
    def can_convert_format(self):
 
 
821
        """See BzrDir.can_convert_format()."""
 
 
824
    def create_branch(self):
 
 
825
        """See BzrDir.create_branch."""
 
 
826
        from bzrlib.branch import BranchFormat
 
 
827
        return BranchFormat.get_default_format().initialize(self)
 
 
829
    def create_repository(self, shared=False):
 
 
830
        """See BzrDir.create_repository."""
 
 
831
        return self._format.repository_format.initialize(self, shared)
 
 
833
    def create_workingtree(self, revision_id=None):
 
 
834
        """See BzrDir.create_workingtree."""
 
 
835
        from bzrlib.workingtree import WorkingTreeFormat
 
 
836
        return WorkingTreeFormat.get_default_format().initialize(self, revision_id)
 
 
838
    def _get_mkdir_mode(self):
 
 
839
        """Figure out the mode to use when creating a bzrdir subdir."""
 
 
840
        temp_control = LockableFiles(self.transport, '', TransportLock)
 
 
841
        return temp_control._dir_mode
 
 
843
    def get_branch_transport(self, branch_format):
 
 
844
        """See BzrDir.get_branch_transport()."""
 
 
845
        if branch_format is None:
 
 
846
            return self.transport.clone('branch')
 
 
848
            branch_format.get_format_string()
 
 
849
        except NotImplementedError:
 
 
850
            raise errors.IncompatibleFormat(branch_format, self._format)
 
 
852
            self.transport.mkdir('branch', mode=self._get_mkdir_mode())
 
 
853
        except errors.FileExists:
 
 
855
        return self.transport.clone('branch')
 
 
857
    def get_repository_transport(self, repository_format):
 
 
858
        """See BzrDir.get_repository_transport()."""
 
 
859
        if repository_format is None:
 
 
860
            return self.transport.clone('repository')
 
 
862
            repository_format.get_format_string()
 
 
863
        except NotImplementedError:
 
 
864
            raise errors.IncompatibleFormat(repository_format, self._format)
 
 
866
            self.transport.mkdir('repository', mode=self._get_mkdir_mode())
 
 
867
        except errors.FileExists:
 
 
869
        return self.transport.clone('repository')
 
 
871
    def get_workingtree_transport(self, workingtree_format):
 
 
872
        """See BzrDir.get_workingtree_transport()."""
 
 
873
        if workingtree_format is None:
 
 
874
            return self.transport.clone('checkout')
 
 
876
            workingtree_format.get_format_string()
 
 
877
        except NotImplementedError:
 
 
878
            raise errors.IncompatibleFormat(workingtree_format, self._format)
 
 
880
            self.transport.mkdir('checkout', mode=self._get_mkdir_mode())
 
 
881
        except errors.FileExists:
 
 
883
        return self.transport.clone('checkout')
 
 
885
    def needs_format_conversion(self, format=None):
 
 
886
        """See BzrDir.needs_format_conversion()."""
 
 
888
            format = BzrDirFormat.get_default_format()
 
 
889
        if not isinstance(self._format, format.__class__):
 
 
890
            # it is not a meta dir format, conversion is needed.
 
 
892
        # we might want to push this down to the repository?
 
 
894
            if not isinstance(self.open_repository()._format,
 
 
895
                              format.repository_format.__class__):
 
 
896
                # the repository needs an upgrade.
 
 
898
        except errors.NoRepositoryPresent:
 
 
900
        # currently there are no other possible conversions for meta1 formats.
 
 
903
    def open_branch(self, unsupported=False):
 
 
904
        """See BzrDir.open_branch."""
 
 
905
        from bzrlib.branch import BranchFormat
 
 
906
        format = BranchFormat.find_format(self)
 
 
907
        self._check_supported(format, unsupported)
 
 
908
        return format.open(self, _found=True)
 
 
910
    def open_repository(self, unsupported=False):
 
 
911
        """See BzrDir.open_repository."""
 
 
912
        from bzrlib.repository import RepositoryFormat
 
 
913
        format = RepositoryFormat.find_format(self)
 
 
914
        self._check_supported(format, unsupported)
 
 
915
        return format.open(self, _found=True)
 
 
917
    def open_workingtree(self, unsupported=False):
 
 
918
        """See BzrDir.open_workingtree."""
 
 
919
        from bzrlib.workingtree import WorkingTreeFormat
 
 
920
        format = WorkingTreeFormat.find_format(self)
 
 
921
        self._check_supported(format, unsupported)
 
 
922
        return format.open(self, _found=True)
 
 
925
class BzrDirFormat(object):
 
 
926
    """An encapsulation of the initialization and open routines for a format.
 
 
928
    Formats provide three things:
 
 
929
     * An initialization routine,
 
 
933
    Formats are placed in an dict by their format string for reference 
 
 
934
    during bzrdir opening. These should be subclasses of BzrDirFormat
 
 
937
    Once a format is deprecated, just deprecate the initialize and open
 
 
938
    methods on the format class. Do not deprecate the object, as the 
 
 
939
    object will be created every system load.
 
 
942
    _default_format = None
 
 
943
    """The default format used for new .bzr dirs."""
 
 
946
    """The known formats."""
 
 
948
    _lock_file_name = 'branch-lock'
 
 
950
    # _lock_class must be set in subclasses to the lock type, typ.
 
 
951
    # TransportLock or LockDir
 
 
954
    def find_format(klass, transport):
 
 
955
        """Return the format registered for URL."""
 
 
957
            format_string = transport.get(".bzr/branch-format").read()
 
 
958
            return klass._formats[format_string]
 
 
959
        except errors.NoSuchFile:
 
 
960
            raise errors.NotBranchError(path=transport.base)
 
 
962
            raise errors.UnknownFormatError(format_string)
 
 
965
    def get_default_format(klass):
 
 
966
        """Return the current default format."""
 
 
967
        return klass._default_format
 
 
969
    def get_format_string(self):
 
 
970
        """Return the ASCII format string that identifies this format."""
 
 
971
        raise NotImplementedError(self.get_format_string)
 
 
973
    def get_format_description(self):
 
 
974
        """Return the short description for this format."""
 
 
975
        raise NotImplementedError(self.get_format_description)
 
 
977
    def get_converter(self, format=None):
 
 
978
        """Return the converter to use to convert bzrdirs needing converts.
 
 
980
        This returns a bzrlib.bzrdir.Converter object.
 
 
982
        This should return the best upgrader to step this format towards the
 
 
983
        current default format. In the case of plugins we can/shouold provide
 
 
984
        some means for them to extend the range of returnable converters.
 
 
986
        :param format: Optional format to override the default foramt of the 
 
 
989
        raise NotImplementedError(self.get_converter)
 
 
991
    def initialize(self, url):
 
 
992
        """Create a bzr control dir at this url and return an opened copy.
 
 
994
        Subclasses should typically override initialize_on_transport
 
 
995
        instead of this method.
 
 
997
        return self.initialize_on_transport(get_transport(url))
 
 
999
    def initialize_on_transport(self, transport):
 
 
1000
        """Initialize a new bzrdir in the base directory of a Transport."""
 
 
1001
        # Since we don'transport have a .bzr directory, inherit the
 
 
1002
        # mode from the root directory
 
 
1003
        temp_control = LockableFiles(transport, '', TransportLock)
 
 
1004
        temp_control._transport.mkdir('.bzr',
 
 
1005
                                      # FIXME: RBC 20060121 dont peek under
 
 
1007
                                      mode=temp_control._dir_mode)
 
 
1008
        file_mode = temp_control._file_mode
 
 
1010
        mutter('created control directory in ' + transport.base)
 
 
1011
        control = transport.clone('.bzr')
 
 
1012
        utf8_files = [('README', 
 
 
1013
                       "This is a Bazaar-NG control directory.\n"
 
 
1014
                       "Do not change any files in this directory.\n"),
 
 
1015
                      ('branch-format', self.get_format_string()),
 
 
1017
        # NB: no need to escape relative paths that are url safe.
 
 
1018
        control_files = LockableFiles(control, self._lock_file_name, 
 
 
1020
        control_files.create_lock()
 
 
1021
        control_files.lock_write()
 
 
1023
            for file, content in utf8_files:
 
 
1024
                control_files.put_utf8(file, content)
 
 
1026
            control_files.unlock()
 
 
1027
        return self.open(transport, _found=True)
 
 
1029
    def is_supported(self):
 
 
1030
        """Is this format supported?
 
 
1032
        Supported formats must be initializable and openable.
 
 
1033
        Unsupported formats may not support initialization or committing or 
 
 
1034
        some other features depending on the reason for not being supported.
 
 
1038
    def open(self, transport, _found=False):
 
 
1039
        """Return an instance of this format for the dir transport points at.
 
 
1041
        _found is a private parameter, do not use it.
 
 
1044
            assert isinstance(BzrDirFormat.find_format(transport),
 
 
1046
        return self._open(transport)
 
 
1048
    def _open(self, transport):
 
 
1049
        """Template method helper for opening BzrDirectories.
 
 
1051
        This performs the actual open and any additional logic or parameter
 
 
1054
        raise NotImplementedError(self._open)
 
 
1057
    def register_format(klass, format):
 
 
1058
        klass._formats[format.get_format_string()] = format
 
 
1061
    def set_default_format(klass, format):
 
 
1062
        klass._default_format = format
 
 
1065
        return self.get_format_string()[:-1]
 
 
1068
    def unregister_format(klass, format):
 
 
1069
        assert klass._formats[format.get_format_string()] is format
 
 
1070
        del klass._formats[format.get_format_string()]
 
 
1073
class BzrDirFormat4(BzrDirFormat):
 
 
1074
    """Bzr dir format 4.
 
 
1076
    This format is a combined format for working tree, branch and repository.
 
 
1078
     - Format 1 working trees [always]
 
 
1079
     - Format 4 branches [always]
 
 
1080
     - Format 4 repositories [always]
 
 
1082
    This format is deprecated: it indexes texts using a text it which is
 
 
1083
    removed in format 5; write support for this format has been removed.
 
 
1086
    _lock_class = TransportLock
 
 
1088
    def get_format_string(self):
 
 
1089
        """See BzrDirFormat.get_format_string()."""
 
 
1090
        return "Bazaar-NG branch, format 0.0.4\n"
 
 
1092
    def get_format_description(self):
 
 
1093
        """See BzrDirFormat.get_format_description()."""
 
 
1094
        return "All-in-one format 4"
 
 
1096
    def get_converter(self, format=None):
 
 
1097
        """See BzrDirFormat.get_converter()."""
 
 
1098
        # there is one and only one upgrade path here.
 
 
1099
        return ConvertBzrDir4To5()
 
 
1101
    def initialize_on_transport(self, transport):
 
 
1102
        """Format 4 branches cannot be created."""
 
 
1103
        raise errors.UninitializableFormat(self)
 
 
1105
    def is_supported(self):
 
 
1106
        """Format 4 is not supported.
 
 
1108
        It is not supported because the model changed from 4 to 5 and the
 
 
1109
        conversion logic is expensive - so doing it on the fly was not 
 
 
1114
    def _open(self, transport):
 
 
1115
        """See BzrDirFormat._open."""
 
 
1116
        return BzrDir4(transport, self)
 
 
1118
    def __return_repository_format(self):
 
 
1119
        """Circular import protection."""
 
 
1120
        from bzrlib.repository import RepositoryFormat4
 
 
1121
        return RepositoryFormat4(self)
 
 
1122
    repository_format = property(__return_repository_format)
 
 
1125
class BzrDirFormat5(BzrDirFormat):
 
 
1126
    """Bzr control format 5.
 
 
1128
    This format is a combined format for working tree, branch and repository.
 
 
1130
     - Format 2 working trees [always] 
 
 
1131
     - Format 4 branches [always] 
 
 
1132
     - Format 5 repositories [always]
 
 
1133
       Unhashed stores in the repository.
 
 
1136
    _lock_class = TransportLock
 
 
1138
    def get_format_string(self):
 
 
1139
        """See BzrDirFormat.get_format_string()."""
 
 
1140
        return "Bazaar-NG branch, format 5\n"
 
 
1142
    def get_format_description(self):
 
 
1143
        """See BzrDirFormat.get_format_description()."""
 
 
1144
        return "All-in-one format 5"
 
 
1146
    def get_converter(self, format=None):
 
 
1147
        """See BzrDirFormat.get_converter()."""
 
 
1148
        # there is one and only one upgrade path here.
 
 
1149
        return ConvertBzrDir5To6()
 
 
1151
    def _initialize_for_clone(self, url):
 
 
1152
        return self.initialize_on_transport(get_transport(url), _cloning=True)
 
 
1154
    def initialize_on_transport(self, transport, _cloning=False):
 
 
1155
        """Format 5 dirs always have working tree, branch and repository.
 
 
1157
        Except when they are being cloned.
 
 
1159
        from bzrlib.branch import BzrBranchFormat4
 
 
1160
        from bzrlib.repository import RepositoryFormat5
 
 
1161
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
1162
        result = (super(BzrDirFormat5, self).initialize_on_transport(transport))
 
 
1163
        RepositoryFormat5().initialize(result, _internal=True)
 
 
1165
            BzrBranchFormat4().initialize(result)
 
 
1166
            WorkingTreeFormat2().initialize(result)
 
 
1169
    def _open(self, transport):
 
 
1170
        """See BzrDirFormat._open."""
 
 
1171
        return BzrDir5(transport, self)
 
 
1173
    def __return_repository_format(self):
 
 
1174
        """Circular import protection."""
 
 
1175
        from bzrlib.repository import RepositoryFormat5
 
 
1176
        return RepositoryFormat5(self)
 
 
1177
    repository_format = property(__return_repository_format)
 
 
1180
class BzrDirFormat6(BzrDirFormat):
 
 
1181
    """Bzr control format 6.
 
 
1183
    This format is a combined format for working tree, branch and repository.
 
 
1185
     - Format 2 working trees [always] 
 
 
1186
     - Format 4 branches [always] 
 
 
1187
     - Format 6 repositories [always]
 
 
1190
    _lock_class = TransportLock
 
 
1192
    def get_format_string(self):
 
 
1193
        """See BzrDirFormat.get_format_string()."""
 
 
1194
        return "Bazaar-NG branch, format 6\n"
 
 
1196
    def get_format_description(self):
 
 
1197
        """See BzrDirFormat.get_format_description()."""
 
 
1198
        return "All-in-one format 6"
 
 
1200
    def get_converter(self, format=None):
 
 
1201
        """See BzrDirFormat.get_converter()."""
 
 
1202
        # there is one and only one upgrade path here.
 
 
1203
        return ConvertBzrDir6ToMeta()
 
 
1205
    def _initialize_for_clone(self, url):
 
 
1206
        return self.initialize_on_transport(get_transport(url), _cloning=True)
 
 
1208
    def initialize_on_transport(self, transport, _cloning=False):
 
 
1209
        """Format 6 dirs always have working tree, branch and repository.
 
 
1211
        Except when they are being cloned.
 
 
1213
        from bzrlib.branch import BzrBranchFormat4
 
 
1214
        from bzrlib.repository import RepositoryFormat6
 
 
1215
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
1216
        result = super(BzrDirFormat6, self).initialize_on_transport(transport)
 
 
1217
        RepositoryFormat6().initialize(result, _internal=True)
 
 
1219
            BzrBranchFormat4().initialize(result)
 
 
1221
                WorkingTreeFormat2().initialize(result)
 
 
1222
            except errors.NotLocalUrl:
 
 
1223
                # emulate pre-check behaviour for working tree and silently 
 
 
1228
    def _open(self, transport):
 
 
1229
        """See BzrDirFormat._open."""
 
 
1230
        return BzrDir6(transport, self)
 
 
1232
    def __return_repository_format(self):
 
 
1233
        """Circular import protection."""
 
 
1234
        from bzrlib.repository import RepositoryFormat6
 
 
1235
        return RepositoryFormat6(self)
 
 
1236
    repository_format = property(__return_repository_format)
 
 
1239
class BzrDirMetaFormat1(BzrDirFormat):
 
 
1240
    """Bzr meta control format 1
 
 
1242
    This is the first format with split out working tree, branch and repository
 
 
1245
     - Format 3 working trees [optional]
 
 
1246
     - Format 5 branches [optional]
 
 
1247
     - Format 7 repositories [optional]
 
 
1250
    _lock_class = LockDir
 
 
1252
    def get_converter(self, format=None):
 
 
1253
        """See BzrDirFormat.get_converter()."""
 
 
1255
            format = BzrDirFormat.get_default_format()
 
 
1256
        if not isinstance(self, format.__class__):
 
 
1257
            # converting away from metadir is not implemented
 
 
1258
            raise NotImplementedError(self.get_converter)
 
 
1259
        return ConvertMetaToMeta(format)
 
 
1261
    def get_format_string(self):
 
 
1262
        """See BzrDirFormat.get_format_string()."""
 
 
1263
        return "Bazaar-NG meta directory, format 1\n"
 
 
1265
    def get_format_description(self):
 
 
1266
        """See BzrDirFormat.get_format_description()."""
 
 
1267
        return "Meta directory format 1"
 
 
1269
    def _open(self, transport):
 
 
1270
        """See BzrDirFormat._open."""
 
 
1271
        return BzrDirMeta1(transport, self)
 
 
1273
    def __return_repository_format(self):
 
 
1274
        """Circular import protection."""
 
 
1275
        if getattr(self, '_repository_format', None):
 
 
1276
            return self._repository_format
 
 
1277
        from bzrlib.repository import RepositoryFormat
 
 
1278
        return RepositoryFormat.get_default_format()
 
 
1280
    def __set_repository_format(self, value):
 
 
1281
        """Allow changint the repository format for metadir formats."""
 
 
1282
        self._repository_format = value
 
 
1284
    repository_format = property(__return_repository_format, __set_repository_format)
 
 
1287
BzrDirFormat.register_format(BzrDirFormat4())
 
 
1288
BzrDirFormat.register_format(BzrDirFormat5())
 
 
1289
BzrDirFormat.register_format(BzrDirFormat6())
 
 
1290
__default_format = BzrDirMetaFormat1()
 
 
1291
BzrDirFormat.register_format(__default_format)
 
 
1292
BzrDirFormat.set_default_format(__default_format)
 
 
1295
class BzrDirTestProviderAdapter(object):
 
 
1296
    """A tool to generate a suite testing multiple bzrdir formats at once.
 
 
1298
    This is done by copying the test once for each transport and injecting
 
 
1299
    the transport_server, transport_readonly_server, and bzrdir_format
 
 
1300
    classes into each copy. Each copy is also given a new id() to make it
 
 
1304
    def __init__(self, transport_server, transport_readonly_server, formats):
 
 
1305
        self._transport_server = transport_server
 
 
1306
        self._transport_readonly_server = transport_readonly_server
 
 
1307
        self._formats = formats
 
 
1309
    def adapt(self, test):
 
 
1310
        result = TestSuite()
 
 
1311
        for format in self._formats:
 
 
1312
            new_test = deepcopy(test)
 
 
1313
            new_test.transport_server = self._transport_server
 
 
1314
            new_test.transport_readonly_server = self._transport_readonly_server
 
 
1315
            new_test.bzrdir_format = format
 
 
1316
            def make_new_test_id():
 
 
1317
                new_id = "%s(%s)" % (new_test.id(), format.__class__.__name__)
 
 
1318
                return lambda: new_id
 
 
1319
            new_test.id = make_new_test_id()
 
 
1320
            result.addTest(new_test)
 
 
1324
class ScratchDir(BzrDir6):
 
 
1325
    """Special test class: a bzrdir that cleans up itself..
 
 
1327
    >>> d = ScratchDir()
 
 
1328
    >>> base = d.transport.base
 
 
1331
    >>> b.transport.__del__()
 
 
1336
    def __init__(self, files=[], dirs=[], transport=None):
 
 
1337
        """Make a test branch.
 
 
1339
        This creates a temporary directory and runs init-tree in it.
 
 
1341
        If any files are listed, they are created in the working copy.
 
 
1343
        if transport is None:
 
 
1344
            transport = bzrlib.transport.local.ScratchTransport()
 
 
1345
            # local import for scope restriction
 
 
1346
            BzrDirFormat6().initialize(transport.base)
 
 
1347
            super(ScratchDir, self).__init__(transport, BzrDirFormat6())
 
 
1348
            self.create_repository()
 
 
1349
            self.create_branch()
 
 
1350
            self.create_workingtree()
 
 
1352
            super(ScratchDir, self).__init__(transport, BzrDirFormat6())
 
 
1354
        # BzrBranch creates a clone to .bzr and then forgets about the
 
 
1355
        # original transport. A ScratchTransport() deletes itself and
 
 
1356
        # everything underneath it when it goes away, so we need to
 
 
1357
        # grab a local copy to prevent that from happening
 
 
1358
        self._transport = transport
 
 
1361
            self._transport.mkdir(d)
 
 
1364
            self._transport.put(f, 'content of %s' % f)
 
 
1368
        >>> orig = ScratchDir(files=["file1", "file2"])
 
 
1369
        >>> os.listdir(orig.base)
 
 
1370
        [u'.bzr', u'file1', u'file2']
 
 
1371
        >>> clone = orig.clone()
 
 
1372
        >>> if os.name != 'nt':
 
 
1373
        ...   os.path.samefile(orig.base, clone.base)
 
 
1375
        ...   orig.base == clone.base
 
 
1378
        >>> os.listdir(clone.base)
 
 
1379
        [u'.bzr', u'file1', u'file2']
 
 
1381
        from shutil import copytree
 
 
1382
        from bzrlib.osutils import mkdtemp
 
 
1385
        copytree(self.base, base, symlinks=True)
 
 
1387
            transport=bzrlib.transport.local.ScratchTransport(base))
 
 
1390
class Converter(object):
 
 
1391
    """Converts a disk format object from one format to another."""
 
 
1393
    def convert(self, to_convert, pb):
 
 
1394
        """Perform the conversion of to_convert, giving feedback via pb.
 
 
1396
        :param to_convert: The disk object to convert.
 
 
1397
        :param pb: a progress bar to use for progress information.
 
 
1400
    def step(self, message):
 
 
1401
        """Update the pb by a step."""
 
 
1403
        self.pb.update(message, self.count, self.total)
 
 
1406
class ConvertBzrDir4To5(Converter):
 
 
1407
    """Converts format 4 bzr dirs to format 5."""
 
 
1410
        super(ConvertBzrDir4To5, self).__init__()
 
 
1411
        self.converted_revs = set()
 
 
1412
        self.absent_revisions = set()
 
 
1416
    def convert(self, to_convert, pb):
 
 
1417
        """See Converter.convert()."""
 
 
1418
        self.bzrdir = to_convert
 
 
1420
        self.pb.note('starting upgrade from format 4 to 5')
 
 
1421
        if isinstance(self.bzrdir.transport, LocalTransport):
 
 
1422
            self.bzrdir.get_workingtree_transport(None).delete('stat-cache')
 
 
1423
        self._convert_to_weaves()
 
 
1424
        return BzrDir.open(self.bzrdir.root_transport.base)
 
 
1426
    def _convert_to_weaves(self):
 
 
1427
        self.pb.note('note: upgrade may be faster if all store files are ungzipped first')
 
 
1430
            stat = self.bzrdir.transport.stat('weaves')
 
 
1431
            if not S_ISDIR(stat.st_mode):
 
 
1432
                self.bzrdir.transport.delete('weaves')
 
 
1433
                self.bzrdir.transport.mkdir('weaves')
 
 
1434
        except errors.NoSuchFile:
 
 
1435
            self.bzrdir.transport.mkdir('weaves')
 
 
1436
        # deliberately not a WeaveFile as we want to build it up slowly.
 
 
1437
        self.inv_weave = Weave('inventory')
 
 
1438
        # holds in-memory weaves for all files
 
 
1439
        self.text_weaves = {}
 
 
1440
        self.bzrdir.transport.delete('branch-format')
 
 
1441
        self.branch = self.bzrdir.open_branch()
 
 
1442
        self._convert_working_inv()
 
 
1443
        rev_history = self.branch.revision_history()
 
 
1444
        # to_read is a stack holding the revisions we still need to process;
 
 
1445
        # appending to it adds new highest-priority revisions
 
 
1446
        self.known_revisions = set(rev_history)
 
 
1447
        self.to_read = rev_history[-1:]
 
 
1449
            rev_id = self.to_read.pop()
 
 
1450
            if (rev_id not in self.revisions
 
 
1451
                and rev_id not in self.absent_revisions):
 
 
1452
                self._load_one_rev(rev_id)
 
 
1454
        to_import = self._make_order()
 
 
1455
        for i, rev_id in enumerate(to_import):
 
 
1456
            self.pb.update('converting revision', i, len(to_import))
 
 
1457
            self._convert_one_rev(rev_id)
 
 
1459
        self._write_all_weaves()
 
 
1460
        self._write_all_revs()
 
 
1461
        self.pb.note('upgraded to weaves:')
 
 
1462
        self.pb.note('  %6d revisions and inventories', len(self.revisions))
 
 
1463
        self.pb.note('  %6d revisions not present', len(self.absent_revisions))
 
 
1464
        self.pb.note('  %6d texts', self.text_count)
 
 
1465
        self._cleanup_spare_files_after_format4()
 
 
1466
        self.branch.control_files.put_utf8('branch-format', BzrDirFormat5().get_format_string())
 
 
1468
    def _cleanup_spare_files_after_format4(self):
 
 
1469
        # FIXME working tree upgrade foo.
 
 
1470
        for n in 'merged-patches', 'pending-merged-patches':
 
 
1472
                ## assert os.path.getsize(p) == 0
 
 
1473
                self.bzrdir.transport.delete(n)
 
 
1474
            except errors.NoSuchFile:
 
 
1476
        self.bzrdir.transport.delete_tree('inventory-store')
 
 
1477
        self.bzrdir.transport.delete_tree('text-store')
 
 
1479
    def _convert_working_inv(self):
 
 
1480
        inv = serializer_v4.read_inventory(self.branch.control_files.get('inventory'))
 
 
1481
        new_inv_xml = bzrlib.xml5.serializer_v5.write_inventory_to_string(inv)
 
 
1482
        # FIXME inventory is a working tree change.
 
 
1483
        self.branch.control_files.put('inventory', new_inv_xml)
 
 
1485
    def _write_all_weaves(self):
 
 
1486
        controlweaves = WeaveStore(self.bzrdir.transport, prefixed=False)
 
 
1487
        weave_transport = self.bzrdir.transport.clone('weaves')
 
 
1488
        weaves = WeaveStore(weave_transport, prefixed=False)
 
 
1489
        transaction = WriteTransaction()
 
 
1493
            for file_id, file_weave in self.text_weaves.items():
 
 
1494
                self.pb.update('writing weave', i, len(self.text_weaves))
 
 
1495
                weaves._put_weave(file_id, file_weave, transaction)
 
 
1497
            self.pb.update('inventory', 0, 1)
 
 
1498
            controlweaves._put_weave('inventory', self.inv_weave, transaction)
 
 
1499
            self.pb.update('inventory', 1, 1)
 
 
1503
    def _write_all_revs(self):
 
 
1504
        """Write all revisions out in new form."""
 
 
1505
        self.bzrdir.transport.delete_tree('revision-store')
 
 
1506
        self.bzrdir.transport.mkdir('revision-store')
 
 
1507
        revision_transport = self.bzrdir.transport.clone('revision-store')
 
 
1509
        _revision_store = TextRevisionStore(TextStore(revision_transport,
 
 
1513
            transaction = bzrlib.transactions.WriteTransaction()
 
 
1514
            for i, rev_id in enumerate(self.converted_revs):
 
 
1515
                self.pb.update('write revision', i, len(self.converted_revs))
 
 
1516
                _revision_store.add_revision(self.revisions[rev_id], transaction)
 
 
1520
    def _load_one_rev(self, rev_id):
 
 
1521
        """Load a revision object into memory.
 
 
1523
        Any parents not either loaded or abandoned get queued to be
 
 
1525
        self.pb.update('loading revision',
 
 
1526
                       len(self.revisions),
 
 
1527
                       len(self.known_revisions))
 
 
1528
        if not self.branch.repository.has_revision(rev_id):
 
 
1530
            self.pb.note('revision {%s} not present in branch; '
 
 
1531
                         'will be converted as a ghost',
 
 
1533
            self.absent_revisions.add(rev_id)
 
 
1535
            rev = self.branch.repository._revision_store.get_revision(rev_id,
 
 
1536
                self.branch.repository.get_transaction())
 
 
1537
            for parent_id in rev.parent_ids:
 
 
1538
                self.known_revisions.add(parent_id)
 
 
1539
                self.to_read.append(parent_id)
 
 
1540
            self.revisions[rev_id] = rev
 
 
1542
    def _load_old_inventory(self, rev_id):
 
 
1543
        assert rev_id not in self.converted_revs
 
 
1544
        old_inv_xml = self.branch.repository.inventory_store.get(rev_id).read()
 
 
1545
        inv = serializer_v4.read_inventory_from_string(old_inv_xml)
 
 
1546
        rev = self.revisions[rev_id]
 
 
1547
        if rev.inventory_sha1:
 
 
1548
            assert rev.inventory_sha1 == sha_string(old_inv_xml), \
 
 
1549
                'inventory sha mismatch for {%s}' % rev_id
 
 
1552
    def _load_updated_inventory(self, rev_id):
 
 
1553
        assert rev_id in self.converted_revs
 
 
1554
        inv_xml = self.inv_weave.get_text(rev_id)
 
 
1555
        inv = bzrlib.xml5.serializer_v5.read_inventory_from_string(inv_xml)
 
 
1558
    def _convert_one_rev(self, rev_id):
 
 
1559
        """Convert revision and all referenced objects to new format."""
 
 
1560
        rev = self.revisions[rev_id]
 
 
1561
        inv = self._load_old_inventory(rev_id)
 
 
1562
        present_parents = [p for p in rev.parent_ids
 
 
1563
                           if p not in self.absent_revisions]
 
 
1564
        self._convert_revision_contents(rev, inv, present_parents)
 
 
1565
        self._store_new_weave(rev, inv, present_parents)
 
 
1566
        self.converted_revs.add(rev_id)
 
 
1568
    def _store_new_weave(self, rev, inv, present_parents):
 
 
1569
        # the XML is now updated with text versions
 
 
1573
                if ie.kind == 'root_directory':
 
 
1575
                assert hasattr(ie, 'revision'), \
 
 
1576
                    'no revision on {%s} in {%s}' % \
 
 
1577
                    (file_id, rev.revision_id)
 
 
1578
        new_inv_xml = bzrlib.xml5.serializer_v5.write_inventory_to_string(inv)
 
 
1579
        new_inv_sha1 = sha_string(new_inv_xml)
 
 
1580
        self.inv_weave.add_lines(rev.revision_id, 
 
 
1582
                                 new_inv_xml.splitlines(True))
 
 
1583
        rev.inventory_sha1 = new_inv_sha1
 
 
1585
    def _convert_revision_contents(self, rev, inv, present_parents):
 
 
1586
        """Convert all the files within a revision.
 
 
1588
        Also upgrade the inventory to refer to the text revision ids."""
 
 
1589
        rev_id = rev.revision_id
 
 
1590
        mutter('converting texts of revision {%s}',
 
 
1592
        parent_invs = map(self._load_updated_inventory, present_parents)
 
 
1595
            self._convert_file_version(rev, ie, parent_invs)
 
 
1597
    def _convert_file_version(self, rev, ie, parent_invs):
 
 
1598
        """Convert one version of one file.
 
 
1600
        The file needs to be added into the weave if it is a merge
 
 
1601
        of >=2 parents or if it's changed from its parent.
 
 
1603
        if ie.kind == 'root_directory':
 
 
1605
        file_id = ie.file_id
 
 
1606
        rev_id = rev.revision_id
 
 
1607
        w = self.text_weaves.get(file_id)
 
 
1610
            self.text_weaves[file_id] = w
 
 
1611
        text_changed = False
 
 
1612
        previous_entries = ie.find_previous_heads(parent_invs,
 
 
1616
        for old_revision in previous_entries:
 
 
1617
                # if this fails, its a ghost ?
 
 
1618
                assert old_revision in self.converted_revs 
 
 
1619
        self.snapshot_ie(previous_entries, ie, w, rev_id)
 
 
1621
        assert getattr(ie, 'revision', None) is not None
 
 
1623
    def snapshot_ie(self, previous_revisions, ie, w, rev_id):
 
 
1624
        # TODO: convert this logic, which is ~= snapshot to
 
 
1625
        # a call to:. This needs the path figured out. rather than a work_tree
 
 
1626
        # a v4 revision_tree can be given, or something that looks enough like
 
 
1627
        # one to give the file content to the entry if it needs it.
 
 
1628
        # and we need something that looks like a weave store for snapshot to 
 
 
1630
        #ie.snapshot(rev, PATH, previous_revisions, REVISION_TREE, InMemoryWeaveStore(self.text_weaves))
 
 
1631
        if len(previous_revisions) == 1:
 
 
1632
            previous_ie = previous_revisions.values()[0]
 
 
1633
            if ie._unchanged(previous_ie):
 
 
1634
                ie.revision = previous_ie.revision
 
 
1637
            text = self.branch.repository.text_store.get(ie.text_id)
 
 
1638
            file_lines = text.readlines()
 
 
1639
            assert sha_strings(file_lines) == ie.text_sha1
 
 
1640
            assert sum(map(len, file_lines)) == ie.text_size
 
 
1641
            w.add_lines(rev_id, previous_revisions, file_lines)
 
 
1642
            self.text_count += 1
 
 
1644
            w.add_lines(rev_id, previous_revisions, [])
 
 
1645
        ie.revision = rev_id
 
 
1647
    def _make_order(self):
 
 
1648
        """Return a suitable order for importing revisions.
 
 
1650
        The order must be such that an revision is imported after all
 
 
1651
        its (present) parents.
 
 
1653
        todo = set(self.revisions.keys())
 
 
1654
        done = self.absent_revisions.copy()
 
 
1657
            # scan through looking for a revision whose parents
 
 
1659
            for rev_id in sorted(list(todo)):
 
 
1660
                rev = self.revisions[rev_id]
 
 
1661
                parent_ids = set(rev.parent_ids)
 
 
1662
                if parent_ids.issubset(done):
 
 
1663
                    # can take this one now
 
 
1664
                    order.append(rev_id)
 
 
1670
class ConvertBzrDir5To6(Converter):
 
 
1671
    """Converts format 5 bzr dirs to format 6."""
 
 
1673
    def convert(self, to_convert, pb):
 
 
1674
        """See Converter.convert()."""
 
 
1675
        self.bzrdir = to_convert
 
 
1677
        self.pb.note('starting upgrade from format 5 to 6')
 
 
1678
        self._convert_to_prefixed()
 
 
1679
        return BzrDir.open(self.bzrdir.root_transport.base)
 
 
1681
    def _convert_to_prefixed(self):
 
 
1682
        from bzrlib.store import TransportStore
 
 
1683
        self.bzrdir.transport.delete('branch-format')
 
 
1684
        for store_name in ["weaves", "revision-store"]:
 
 
1685
            self.pb.note("adding prefixes to %s" % store_name)
 
 
1686
            store_transport = self.bzrdir.transport.clone(store_name)
 
 
1687
            store = TransportStore(store_transport, prefixed=True)
 
 
1688
            for urlfilename in store_transport.list_dir('.'):
 
 
1689
                filename = urlutils.unescape(urlfilename)
 
 
1690
                if (filename.endswith(".weave") or
 
 
1691
                    filename.endswith(".gz") or
 
 
1692
                    filename.endswith(".sig")):
 
 
1693
                    file_id = os.path.splitext(filename)[0]
 
 
1696
                prefix_dir = store.hash_prefix(file_id)
 
 
1697
                # FIXME keep track of the dirs made RBC 20060121
 
 
1699
                    store_transport.move(filename, prefix_dir + '/' + filename)
 
 
1700
                except errors.NoSuchFile: # catches missing dirs strangely enough
 
 
1701
                    store_transport.mkdir(prefix_dir)
 
 
1702
                    store_transport.move(filename, prefix_dir + '/' + filename)
 
 
1703
        self.bzrdir._control_files.put_utf8('branch-format', BzrDirFormat6().get_format_string())
 
 
1706
class ConvertBzrDir6ToMeta(Converter):
 
 
1707
    """Converts format 6 bzr dirs to metadirs."""
 
 
1709
    def convert(self, to_convert, pb):
 
 
1710
        """See Converter.convert()."""
 
 
1711
        self.bzrdir = to_convert
 
 
1714
        self.total = 20 # the steps we know about
 
 
1715
        self.garbage_inventories = []
 
 
1717
        self.pb.note('starting upgrade from format 6 to metadir')
 
 
1718
        self.bzrdir._control_files.put_utf8('branch-format', "Converting to format 6")
 
 
1719
        # its faster to move specific files around than to open and use the apis...
 
 
1720
        # first off, nuke ancestry.weave, it was never used.
 
 
1722
            self.step('Removing ancestry.weave')
 
 
1723
            self.bzrdir.transport.delete('ancestry.weave')
 
 
1724
        except errors.NoSuchFile:
 
 
1726
        # find out whats there
 
 
1727
        self.step('Finding branch files')
 
 
1728
        last_revision = self.bzrdir.open_branch().last_revision()
 
 
1729
        bzrcontents = self.bzrdir.transport.list_dir('.')
 
 
1730
        for name in bzrcontents:
 
 
1731
            if name.startswith('basis-inventory.'):
 
 
1732
                self.garbage_inventories.append(name)
 
 
1733
        # create new directories for repository, working tree and branch
 
 
1734
        self.dir_mode = self.bzrdir._control_files._dir_mode
 
 
1735
        self.file_mode = self.bzrdir._control_files._file_mode
 
 
1736
        repository_names = [('inventory.weave', True),
 
 
1737
                            ('revision-store', True),
 
 
1739
        self.step('Upgrading repository  ')
 
 
1740
        self.bzrdir.transport.mkdir('repository', mode=self.dir_mode)
 
 
1741
        self.make_lock('repository')
 
 
1742
        # we hard code the formats here because we are converting into
 
 
1743
        # the meta format. The meta format upgrader can take this to a 
 
 
1744
        # future format within each component.
 
 
1745
        self.put_format('repository', bzrlib.repository.RepositoryFormat7())
 
 
1746
        for entry in repository_names:
 
 
1747
            self.move_entry('repository', entry)
 
 
1749
        self.step('Upgrading branch      ')
 
 
1750
        self.bzrdir.transport.mkdir('branch', mode=self.dir_mode)
 
 
1751
        self.make_lock('branch')
 
 
1752
        self.put_format('branch', bzrlib.branch.BzrBranchFormat5())
 
 
1753
        branch_files = [('revision-history', True),
 
 
1754
                        ('branch-name', True),
 
 
1756
        for entry in branch_files:
 
 
1757
            self.move_entry('branch', entry)
 
 
1759
        self.step('Upgrading working tree')
 
 
1760
        self.bzrdir.transport.mkdir('checkout', mode=self.dir_mode)
 
 
1761
        self.make_lock('checkout')
 
 
1762
        self.put_format('checkout', bzrlib.workingtree.WorkingTreeFormat3())
 
 
1763
        self.bzrdir.transport.delete_multi(self.garbage_inventories, self.pb)
 
 
1764
        checkout_files = [('pending-merges', True),
 
 
1765
                          ('inventory', True),
 
 
1766
                          ('stat-cache', False)]
 
 
1767
        for entry in checkout_files:
 
 
1768
            self.move_entry('checkout', entry)
 
 
1769
        if last_revision is not None:
 
 
1770
            self.bzrdir._control_files.put_utf8('checkout/last-revision',
 
 
1772
        self.bzrdir._control_files.put_utf8('branch-format', BzrDirMetaFormat1().get_format_string())
 
 
1773
        return BzrDir.open(self.bzrdir.root_transport.base)
 
 
1775
    def make_lock(self, name):
 
 
1776
        """Make a lock for the new control dir name."""
 
 
1777
        self.step('Make %s lock' % name)
 
 
1778
        ld = LockDir(self.bzrdir.transport, 
 
 
1780
                     file_modebits=self.file_mode,
 
 
1781
                     dir_modebits=self.dir_mode)
 
 
1784
    def move_entry(self, new_dir, entry):
 
 
1785
        """Move then entry name into new_dir."""
 
 
1787
        mandatory = entry[1]
 
 
1788
        self.step('Moving %s' % name)
 
 
1790
            self.bzrdir.transport.move(name, '%s/%s' % (new_dir, name))
 
 
1791
        except errors.NoSuchFile:
 
 
1795
    def put_format(self, dirname, format):
 
 
1796
        self.bzrdir._control_files.put_utf8('%s/format' % dirname, format.get_format_string())
 
 
1799
class ConvertMetaToMeta(Converter):
 
 
1800
    """Converts the components of metadirs."""
 
 
1802
    def __init__(self, target_format):
 
 
1803
        """Create a metadir to metadir converter.
 
 
1805
        :param target_format: The final metadir format that is desired.
 
 
1807
        self.target_format = target_format
 
 
1809
    def convert(self, to_convert, pb):
 
 
1810
        """See Converter.convert()."""
 
 
1811
        self.bzrdir = to_convert
 
 
1815
        self.step('checking repository format')
 
 
1817
            repo = self.bzrdir.open_repository()
 
 
1818
        except errors.NoRepositoryPresent:
 
 
1821
            if not isinstance(repo._format, self.target_format.repository_format.__class__):
 
 
1822
                from bzrlib.repository import CopyConverter
 
 
1823
                self.pb.note('starting repository conversion')
 
 
1824
                converter = CopyConverter(self.target_format.repository_format)
 
 
1825
                converter.convert(repo, pb)