1
# Copyright (C) 2005, 2006, 2007 Canonical Ltd
 
 
3
# This program is free software; you can redistribute it and/or modify
 
 
4
# it under the terms of the GNU General Public License as published by
 
 
5
# the Free Software Foundation; either version 2 of the License, or
 
 
6
# (at your option) any later version.
 
 
8
# This program is distributed in the hope that it will be useful,
 
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
 
11
# GNU General Public License for more details.
 
 
13
# You should have received a copy of the GNU General Public License
 
 
14
# along with this program; if not, write to the Free Software
 
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
 
17
"""BzrDir logic. The BzrDir is the basic control directory used by bzr.
 
 
19
At format 7 this was split out into Branch, Repository and Checkout control
 
 
23
# TODO: remove unittest dependency; put that stuff inside the test suite
 
 
25
# TODO: The Format probe_transport seems a bit redundant with just trying to
 
 
26
# open the bzrdir. -- mbp
 
 
28
# TODO: Can we move specific formats into separate modules to make this file
 
 
31
from cStringIO import StringIO
 
 
35
from bzrlib.lazy_import import lazy_import
 
 
36
lazy_import(globals(), """
 
 
37
from copy import deepcopy
 
 
38
from stat import S_ISDIR
 
 
47
    revision as _mod_revision,
 
 
56
from bzrlib.osutils import (
 
 
61
from bzrlib.store.revision.text import TextRevisionStore
 
 
62
from bzrlib.store.text import TextStore
 
 
63
from bzrlib.store.versioned import WeaveStore
 
 
64
from bzrlib.transactions import WriteTransaction
 
 
65
from bzrlib.transport import (
 
 
66
    do_catching_redirections,
 
 
69
from bzrlib.weave import Weave
 
 
72
from bzrlib.trace import (
 
 
76
from bzrlib.transport.local import LocalTransport
 
 
80
    """A .bzr control diretory.
 
 
82
    BzrDir instances let you create or open any of the things that can be
 
 
83
    found within .bzr - checkouts, branches and repositories.
 
 
86
        the transport which this bzr dir is rooted at (i.e. file:///.../.bzr/)
 
 
88
        a transport connected to the directory this bzr was opened from.
 
 
92
        """Invoke break_lock on the first object in the bzrdir.
 
 
94
        If there is a tree, the tree is opened and break_lock() called.
 
 
95
        Otherwise, branch is tried, and finally repository.
 
 
98
            thing_to_unlock = self.open_workingtree()
 
 
99
        except (errors.NotLocalUrl, errors.NoWorkingTree):
 
 
101
                thing_to_unlock = self.open_branch()
 
 
102
            except errors.NotBranchError:
 
 
104
                    thing_to_unlock = self.open_repository()
 
 
105
                except errors.NoRepositoryPresent:
 
 
107
        thing_to_unlock.break_lock()
 
 
109
    def can_convert_format(self):
 
 
110
        """Return true if this bzrdir is one whose format we can convert from."""
 
 
113
    def check_conversion_target(self, target_format):
 
 
114
        target_repo_format = target_format.repository_format
 
 
115
        source_repo_format = self._format.repository_format
 
 
116
        source_repo_format.check_conversion_target(target_repo_format)
 
 
119
    def _check_supported(format, allow_unsupported,
 
 
120
        recommend_upgrade=True,
 
 
122
        """Give an error or warning on old formats.
 
 
124
        :param format: may be any kind of format - workingtree, branch, 
 
 
127
        :param allow_unsupported: If true, allow opening 
 
 
128
        formats that are strongly deprecated, and which may 
 
 
129
        have limited functionality.
 
 
131
        :param recommend_upgrade: If true (default), warn
 
 
132
        the user through the ui object that they may wish
 
 
133
        to upgrade the object.
 
 
135
        # TODO: perhaps move this into a base Format class; it's not BzrDir
 
 
136
        # specific. mbp 20070323
 
 
137
        if not allow_unsupported and not format.is_supported():
 
 
138
            # see open_downlevel to open legacy branches.
 
 
139
            raise errors.UnsupportedFormatError(format=format)
 
 
140
        if recommend_upgrade \
 
 
141
            and getattr(format, 'upgrade_recommended', False):
 
 
142
            ui.ui_factory.recommend_upgrade(
 
 
143
                format.get_format_description(),
 
 
146
    def clone(self, url, revision_id=None, force_new_repo=False):
 
 
147
        """Clone this bzrdir and its contents to url verbatim.
 
 
149
        If urls last component does not exist, it will be created.
 
 
151
        if revision_id is not None, then the clone operation may tune
 
 
152
            itself to download less data.
 
 
153
        :param force_new_repo: Do not use a shared repository for the target 
 
 
154
                               even if one is available.
 
 
157
        result = self._format.initialize(url)
 
 
159
            local_repo = self.find_repository()
 
 
160
        except errors.NoRepositoryPresent:
 
 
163
            # may need to copy content in
 
 
165
                result_repo = local_repo.clone(
 
 
167
                    revision_id=revision_id)
 
 
168
                result_repo.set_make_working_trees(local_repo.make_working_trees())
 
 
171
                    result_repo = result.find_repository()
 
 
172
                    # fetch content this dir needs.
 
 
173
                    result_repo.fetch(local_repo, revision_id=revision_id)
 
 
174
                except errors.NoRepositoryPresent:
 
 
175
                    # needed to make one anyway.
 
 
176
                    result_repo = local_repo.clone(
 
 
178
                        revision_id=revision_id)
 
 
179
                    result_repo.set_make_working_trees(local_repo.make_working_trees())
 
 
180
        # 1 if there is a branch present
 
 
181
        #   make sure its content is available in the target repository
 
 
184
            self.open_branch().clone(result, revision_id=revision_id)
 
 
185
        except errors.NotBranchError:
 
 
188
            self.open_workingtree().clone(result)
 
 
189
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
 
193
    # TODO: This should be given a Transport, and should chdir up; otherwise
 
 
194
    # this will open a new connection.
 
 
195
    def _make_tail(self, url):
 
 
196
        head, tail = urlutils.split(url)
 
 
197
        if tail and tail != '.':
 
 
198
            t = get_transport(head)
 
 
201
            except errors.FileExists:
 
 
204
    # TODO: Should take a Transport
 
 
206
    def create(cls, base, format=None):
 
 
207
        """Create a new BzrDir at the url 'base'.
 
 
209
        This will call the current default formats initialize with base
 
 
210
        as the only parameter.
 
 
212
        :param format: If supplied, the format of branch to create.  If not
 
 
213
            supplied, the default is used.
 
 
215
        if cls is not BzrDir:
 
 
216
            raise AssertionError("BzrDir.create always creates the default"
 
 
217
                " format, not one of %r" % cls)
 
 
218
        head, tail = urlutils.split(base)
 
 
219
        if tail and tail != '.':
 
 
220
            t = get_transport(head)
 
 
223
            except errors.FileExists:
 
 
226
            format = BzrDirFormat.get_default_format()
 
 
227
        return format.initialize(safe_unicode(base))
 
 
229
    def create_branch(self):
 
 
230
        """Create a branch in this BzrDir.
 
 
232
        The bzrdirs format will control what branch format is created.
 
 
233
        For more control see BranchFormatXX.create(a_bzrdir).
 
 
235
        raise NotImplementedError(self.create_branch)
 
 
238
    def create_branch_and_repo(base, force_new_repo=False, format=None):
 
 
239
        """Create a new BzrDir, Branch and Repository at the url 'base'.
 
 
241
        This will use the current default BzrDirFormat, and use whatever 
 
 
242
        repository format that that uses via bzrdir.create_branch and
 
 
243
        create_repository. If a shared repository is available that is used
 
 
246
        The created Branch object is returned.
 
 
248
        :param base: The URL to create the branch at.
 
 
249
        :param force_new_repo: If True a new repository is always created.
 
 
251
        bzrdir = BzrDir.create(base, format)
 
 
252
        bzrdir._find_or_create_repository(force_new_repo)
 
 
253
        return bzrdir.create_branch()
 
 
255
    def _find_or_create_repository(self, force_new_repo):
 
 
256
        """Create a new repository if needed, returning the repository."""
 
 
258
            return self.create_repository()
 
 
260
            return self.find_repository()
 
 
261
        except errors.NoRepositoryPresent:
 
 
262
            return self.create_repository()
 
 
265
    def create_branch_convenience(base, force_new_repo=False,
 
 
266
                                  force_new_tree=None, format=None):
 
 
267
        """Create a new BzrDir, Branch and Repository at the url 'base'.
 
 
269
        This is a convenience function - it will use an existing repository
 
 
270
        if possible, can be told explicitly whether to create a working tree or
 
 
273
        This will use the current default BzrDirFormat, and use whatever 
 
 
274
        repository format that that uses via bzrdir.create_branch and
 
 
275
        create_repository. If a shared repository is available that is used
 
 
276
        preferentially. Whatever repository is used, its tree creation policy
 
 
279
        The created Branch object is returned.
 
 
280
        If a working tree cannot be made due to base not being a file:// url,
 
 
281
        no error is raised unless force_new_tree is True, in which case no 
 
 
282
        data is created on disk and NotLocalUrl is raised.
 
 
284
        :param base: The URL to create the branch at.
 
 
285
        :param force_new_repo: If True a new repository is always created.
 
 
286
        :param force_new_tree: If True or False force creation of a tree or 
 
 
287
                               prevent such creation respectively.
 
 
288
        :param format: Override for the for the bzrdir format to create
 
 
291
            # check for non local urls
 
 
292
            t = get_transport(safe_unicode(base))
 
 
293
            if not isinstance(t, LocalTransport):
 
 
294
                raise errors.NotLocalUrl(base)
 
 
295
        bzrdir = BzrDir.create(base, format)
 
 
296
        repo = bzrdir._find_or_create_repository(force_new_repo)
 
 
297
        result = bzrdir.create_branch()
 
 
298
        if force_new_tree or (repo.make_working_trees() and 
 
 
299
                              force_new_tree is None):
 
 
301
                bzrdir.create_workingtree()
 
 
302
            except errors.NotLocalUrl:
 
 
307
    def create_repository(base, shared=False, format=None):
 
 
308
        """Create a new BzrDir and Repository at the url 'base'.
 
 
310
        If no format is supplied, this will default to the current default
 
 
311
        BzrDirFormat by default, and use whatever repository format that that
 
 
312
        uses for bzrdirformat.create_repository.
 
 
314
        :param shared: Create a shared repository rather than a standalone
 
 
316
        The Repository object is returned.
 
 
318
        This must be overridden as an instance method in child classes, where
 
 
319
        it should take no parameters and construct whatever repository format
 
 
320
        that child class desires.
 
 
322
        bzrdir = BzrDir.create(base, format)
 
 
323
        return bzrdir.create_repository(shared)
 
 
326
    def create_standalone_workingtree(base, format=None):
 
 
327
        """Create a new BzrDir, WorkingTree, Branch and Repository at 'base'.
 
 
329
        'base' must be a local path or a file:// url.
 
 
331
        This will use the current default BzrDirFormat, and use whatever 
 
 
332
        repository format that that uses for bzrdirformat.create_workingtree,
 
 
333
        create_branch and create_repository.
 
 
335
        :return: The WorkingTree object.
 
 
337
        t = get_transport(safe_unicode(base))
 
 
338
        if not isinstance(t, LocalTransport):
 
 
339
            raise errors.NotLocalUrl(base)
 
 
340
        bzrdir = BzrDir.create_branch_and_repo(safe_unicode(base),
 
 
342
                                               format=format).bzrdir
 
 
343
        return bzrdir.create_workingtree()
 
 
345
    def create_workingtree(self, revision_id=None):
 
 
346
        """Create a working tree at this BzrDir.
 
 
348
        revision_id: create it as of this revision id.
 
 
350
        raise NotImplementedError(self.create_workingtree)
 
 
352
    def retire_bzrdir(self):
 
 
353
        """Permanently disable the bzrdir.
 
 
355
        This is done by renaming it to give the user some ability to recover
 
 
356
        if there was a problem.
 
 
358
        This will have horrible consequences if anyone has anything locked or
 
 
361
        for i in xrange(10000):
 
 
363
                to_path = '.bzr.retired.%d' % i
 
 
364
                self.root_transport.rename('.bzr', to_path)
 
 
365
                note("renamed %s to %s"
 
 
366
                    % (self.root_transport.abspath('.bzr'), to_path))
 
 
368
            except (errors.TransportError, IOError, errors.PathError):
 
 
371
    def destroy_workingtree(self):
 
 
372
        """Destroy the working tree at this BzrDir.
 
 
374
        Formats that do not support this may raise UnsupportedOperation.
 
 
376
        raise NotImplementedError(self.destroy_workingtree)
 
 
378
    def destroy_workingtree_metadata(self):
 
 
379
        """Destroy the control files for the working tree at this BzrDir.
 
 
381
        The contents of working tree files are not affected.
 
 
382
        Formats that do not support this may raise UnsupportedOperation.
 
 
384
        raise NotImplementedError(self.destroy_workingtree_metadata)
 
 
386
    def find_repository(self):
 
 
387
        """Find the repository that should be used for a_bzrdir.
 
 
389
        This does not require a branch as we use it to find the repo for
 
 
390
        new branches as well as to hook existing branches up to their
 
 
394
            return self.open_repository()
 
 
395
        except errors.NoRepositoryPresent:
 
 
397
        next_transport = self.root_transport.clone('..')
 
 
399
            # find the next containing bzrdir
 
 
401
                found_bzrdir = BzrDir.open_containing_from_transport(
 
 
403
            except errors.NotBranchError:
 
 
405
                raise errors.NoRepositoryPresent(self)
 
 
406
            # does it have a repository ?
 
 
408
                repository = found_bzrdir.open_repository()
 
 
409
            except errors.NoRepositoryPresent:
 
 
410
                next_transport = found_bzrdir.root_transport.clone('..')
 
 
411
                if (found_bzrdir.root_transport.base == next_transport.base):
 
 
412
                    # top of the file system
 
 
416
            if ((found_bzrdir.root_transport.base == 
 
 
417
                 self.root_transport.base) or repository.is_shared()):
 
 
420
                raise errors.NoRepositoryPresent(self)
 
 
421
        raise errors.NoRepositoryPresent(self)
 
 
423
    def get_branch_transport(self, branch_format):
 
 
424
        """Get the transport for use by branch format in this BzrDir.
 
 
426
        Note that bzr dirs that do not support format strings will raise
 
 
427
        IncompatibleFormat if the branch format they are given has
 
 
428
        a format string, and vice versa.
 
 
430
        If branch_format is None, the transport is returned with no 
 
 
431
        checking. if it is not None, then the returned transport is
 
 
432
        guaranteed to point to an existing directory ready for use.
 
 
434
        raise NotImplementedError(self.get_branch_transport)
 
 
436
    def get_repository_transport(self, repository_format):
 
 
437
        """Get the transport for use by repository format in this BzrDir.
 
 
439
        Note that bzr dirs that do not support format strings will raise
 
 
440
        IncompatibleFormat if the repository format they are given has
 
 
441
        a format string, and vice versa.
 
 
443
        If repository_format is None, the transport is returned with no 
 
 
444
        checking. if it is not None, then the returned transport is
 
 
445
        guaranteed to point to an existing directory ready for use.
 
 
447
        raise NotImplementedError(self.get_repository_transport)
 
 
449
    def get_workingtree_transport(self, tree_format):
 
 
450
        """Get the transport for use by workingtree format in this BzrDir.
 
 
452
        Note that bzr dirs that do not support format strings will raise
 
 
453
        IncompatibleFormat if the workingtree format they are given has a
 
 
454
        format string, and vice versa.
 
 
456
        If workingtree_format is None, the transport is returned with no 
 
 
457
        checking. if it is not None, then the returned transport is
 
 
458
        guaranteed to point to an existing directory ready for use.
 
 
460
        raise NotImplementedError(self.get_workingtree_transport)
 
 
462
    def __init__(self, _transport, _format):
 
 
463
        """Initialize a Bzr control dir object.
 
 
465
        Only really common logic should reside here, concrete classes should be
 
 
466
        made with varying behaviours.
 
 
468
        :param _format: the format that is creating this BzrDir instance.
 
 
469
        :param _transport: the transport this dir is based at.
 
 
471
        self._format = _format
 
 
472
        self.transport = _transport.clone('.bzr')
 
 
473
        self.root_transport = _transport
 
 
475
    def is_control_filename(self, filename):
 
 
476
        """True if filename is the name of a path which is reserved for bzrdir's.
 
 
478
        :param filename: A filename within the root transport of this bzrdir.
 
 
480
        This is true IF and ONLY IF the filename is part of the namespace reserved
 
 
481
        for bzr control dirs. Currently this is the '.bzr' directory in the root
 
 
482
        of the root_transport. it is expected that plugins will need to extend
 
 
483
        this in the future - for instance to make bzr talk with svn working
 
 
486
        # this might be better on the BzrDirFormat class because it refers to 
 
 
487
        # all the possible bzrdir disk formats. 
 
 
488
        # This method is tested via the workingtree is_control_filename tests- 
 
 
489
        # it was extracted from WorkingTree.is_control_filename. If the methods
 
 
490
        # contract is extended beyond the current trivial  implementation please
 
 
491
        # add new tests for it to the appropriate place.
 
 
492
        return filename == '.bzr' or filename.startswith('.bzr/')
 
 
494
    def needs_format_conversion(self, format=None):
 
 
495
        """Return true if this bzrdir needs convert_format run on it.
 
 
497
        For instance, if the repository format is out of date but the 
 
 
498
        branch and working tree are not, this should return True.
 
 
500
        :param format: Optional parameter indicating a specific desired
 
 
501
                       format we plan to arrive at.
 
 
503
        raise NotImplementedError(self.needs_format_conversion)
 
 
506
    def open_unsupported(base):
 
 
507
        """Open a branch which is not supported."""
 
 
508
        return BzrDir.open(base, _unsupported=True)
 
 
511
    def open(base, _unsupported=False):
 
 
512
        """Open an existing bzrdir, rooted at 'base' (url)
 
 
514
        _unsupported is a private parameter to the BzrDir class.
 
 
516
        t = get_transport(base)
 
 
517
        return BzrDir.open_from_transport(t, _unsupported=_unsupported)
 
 
520
    def open_from_transport(transport, _unsupported=False):
 
 
521
        """Open a bzrdir within a particular directory.
 
 
523
        :param transport: Transport containing the bzrdir.
 
 
524
        :param _unsupported: private.
 
 
526
        base = transport.base
 
 
528
        def find_format(transport):
 
 
529
            return transport, BzrDirFormat.find_format(transport)
 
 
531
        def redirected(transport, e, redirection_notice):
 
 
532
            qualified_source = e.get_source_url()
 
 
533
            relpath = transport.relpath(qualified_source)
 
 
534
            if not e.target.endswith(relpath):
 
 
535
                # Not redirected to a branch-format, not a branch
 
 
536
                raise errors.NotBranchError(path=e.target)
 
 
537
            target = e.target[:-len(relpath)]
 
 
538
            note('%s is%s redirected to %s',
 
 
539
                 transport.base, e.permanently, target)
 
 
540
            # Let's try with a new transport
 
 
541
            qualified_target = e.get_target_url()[:-len(relpath)]
 
 
542
            # FIXME: If 'transport' has a qualifier, this should
 
 
543
            # be applied again to the new transport *iff* the
 
 
544
            # schemes used are the same. It's a bit tricky to
 
 
545
            # verify, so I'll punt for now
 
 
547
            return get_transport(target)
 
 
550
            transport, format = do_catching_redirections(find_format,
 
 
553
        except errors.TooManyRedirections:
 
 
554
            raise errors.NotBranchError(base)
 
 
556
        BzrDir._check_supported(format, _unsupported)
 
 
557
        return format.open(transport, _found=True)
 
 
559
    def open_branch(self, unsupported=False):
 
 
560
        """Open the branch object at this BzrDir if one is present.
 
 
562
        If unsupported is True, then no longer supported branch formats can
 
 
565
        TODO: static convenience version of this?
 
 
567
        raise NotImplementedError(self.open_branch)
 
 
570
    def open_containing(url):
 
 
571
        """Open an existing branch which contains url.
 
 
573
        :param url: url to search from.
 
 
574
        See open_containing_from_transport for more detail.
 
 
576
        return BzrDir.open_containing_from_transport(get_transport(url))
 
 
579
    def open_containing_from_transport(a_transport):
 
 
580
        """Open an existing branch which contains a_transport.base
 
 
582
        This probes for a branch at a_transport, and searches upwards from there.
 
 
584
        Basically we keep looking up until we find the control directory or
 
 
585
        run into the root.  If there isn't one, raises NotBranchError.
 
 
586
        If there is one and it is either an unrecognised format or an unsupported 
 
 
587
        format, UnknownFormatError or UnsupportedFormatError are raised.
 
 
588
        If there is one, it is returned, along with the unused portion of url.
 
 
590
        :return: The BzrDir that contains the path, and a Unicode path 
 
 
591
                for the rest of the URL.
 
 
593
        # this gets the normalised url back. I.e. '.' -> the full path.
 
 
594
        url = a_transport.base
 
 
597
                result = BzrDir.open_from_transport(a_transport)
 
 
598
                return result, urlutils.unescape(a_transport.relpath(url))
 
 
599
            except errors.NotBranchError, e:
 
 
601
            new_t = a_transport.clone('..')
 
 
602
            if new_t.base == a_transport.base:
 
 
603
                # reached the root, whatever that may be
 
 
604
                raise errors.NotBranchError(path=url)
 
 
608
    def open_containing_tree_or_branch(klass, location):
 
 
609
        """Return the branch and working tree contained by a location.
 
 
611
        Returns (tree, branch, relpath).
 
 
612
        If there is no tree at containing the location, tree will be None.
 
 
613
        If there is no branch containing the location, an exception will be
 
 
615
        relpath is the portion of the path that is contained by the branch.
 
 
617
        bzrdir, relpath = klass.open_containing(location)
 
 
619
            tree = bzrdir.open_workingtree()
 
 
620
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
 
622
            branch = bzrdir.open_branch()
 
 
625
        return tree, branch, relpath
 
 
627
    def open_repository(self, _unsupported=False):
 
 
628
        """Open the repository object at this BzrDir if one is present.
 
 
630
        This will not follow the Branch object pointer - its strictly a direct
 
 
631
        open facility. Most client code should use open_branch().repository to
 
 
634
        _unsupported is a private parameter, not part of the api.
 
 
635
        TODO: static convenience version of this?
 
 
637
        raise NotImplementedError(self.open_repository)
 
 
639
    def open_workingtree(self, _unsupported=False):
 
 
640
        """Open the workingtree object at this BzrDir if one is present.
 
 
642
        TODO: static convenience version of this?
 
 
644
        raise NotImplementedError(self.open_workingtree)
 
 
646
    def has_branch(self):
 
 
647
        """Tell if this bzrdir contains a branch.
 
 
649
        Note: if you're going to open the branch, you should just go ahead
 
 
650
        and try, and not ask permission first.  (This method just opens the 
 
 
651
        branch and discards it, and that's somewhat expensive.) 
 
 
656
        except errors.NotBranchError:
 
 
659
    def has_workingtree(self):
 
 
660
        """Tell if this bzrdir contains a working tree.
 
 
662
        This will still raise an exception if the bzrdir has a workingtree that
 
 
663
        is remote & inaccessible.
 
 
665
        Note: if you're going to open the working tree, you should just go ahead
 
 
666
        and try, and not ask permission first.  (This method just opens the 
 
 
667
        workingtree and discards it, and that's somewhat expensive.) 
 
 
670
            self.open_workingtree(recommend_upgrade=False)
 
 
672
        except errors.NoWorkingTree:
 
 
675
    def _cloning_metadir(self):
 
 
676
        result_format = self._format.__class__()
 
 
679
                branch = self.open_branch()
 
 
680
                source_repository = branch.repository
 
 
681
            except errors.NotBranchError:
 
 
683
                source_repository = self.open_repository()
 
 
684
            result_format.repository_format = source_repository._format
 
 
685
        except errors.NoRepositoryPresent:
 
 
686
            source_repository = None
 
 
688
            # TODO: Couldn't we just probe for the format in these cases,
 
 
689
            # rather than opening the whole tree?  It would be a little
 
 
690
            # faster. mbp 20070401
 
 
691
            tree = self.open_workingtree(recommend_upgrade=False)
 
 
692
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
 
693
            result_format.workingtree_format = None
 
 
695
            result_format.workingtree_format = tree._format.__class__()
 
 
696
        return result_format, source_repository
 
 
698
    def cloning_metadir(self):
 
 
699
        """Produce a metadir suitable for cloning or sprouting with.
 
 
701
        These operations may produce workingtrees (yes, even though they're
 
 
702
        "cloning" something that doesn't have a tree, so a viable workingtree
 
 
703
        format must be selected.
 
 
705
        format, repository = self._cloning_metadir()
 
 
706
        if format._workingtree_format is None:
 
 
707
            if repository is None:
 
 
709
            tree_format = repository._format._matchingbzrdir.workingtree_format
 
 
710
            format.workingtree_format = tree_format.__class__()
 
 
713
    def checkout_metadir(self):
 
 
714
        return self.cloning_metadir()
 
 
716
    def sprout(self, url, revision_id=None, force_new_repo=False,
 
 
718
        """Create a copy of this bzrdir prepared for use as a new line of
 
 
721
        If urls last component does not exist, it will be created.
 
 
723
        Attributes related to the identity of the source branch like
 
 
724
        branch nickname will be cleaned, a working tree is created
 
 
725
        whether one existed before or not; and a local branch is always
 
 
728
        if revision_id is not None, then the clone operation may tune
 
 
729
            itself to download less data.
 
 
732
        cloning_format = self.cloning_metadir()
 
 
733
        result = cloning_format.initialize(url)
 
 
735
            source_branch = self.open_branch()
 
 
736
            source_repository = source_branch.repository
 
 
737
        except errors.NotBranchError:
 
 
740
                source_repository = self.open_repository()
 
 
741
            except errors.NoRepositoryPresent:
 
 
742
                source_repository = None
 
 
747
                result_repo = result.find_repository()
 
 
748
            except errors.NoRepositoryPresent:
 
 
750
        if source_repository is None and result_repo is not None:
 
 
752
        elif source_repository is None and result_repo is None:
 
 
753
            # no repo available, make a new one
 
 
754
            result.create_repository()
 
 
755
        elif source_repository is not None and result_repo is None:
 
 
756
            # have source, and want to make a new target repo
 
 
757
            # we don't clone the repo because that preserves attributes
 
 
758
            # like is_shared(), and we have not yet implemented a 
 
 
759
            # repository sprout().
 
 
760
            result_repo = result.create_repository()
 
 
761
        if result_repo is not None:
 
 
762
            # fetch needed content into target.
 
 
763
            if source_repository is not None:
 
 
764
                result_repo.fetch(source_repository, revision_id=revision_id)
 
 
765
        if source_branch is not None:
 
 
766
            source_branch.sprout(result, revision_id=revision_id)
 
 
768
            result.create_branch()
 
 
769
        # TODO: jam 20060426 we probably need a test in here in the
 
 
770
        #       case that the newly sprouted branch is a remote one
 
 
771
        if result_repo is None or result_repo.make_working_trees():
 
 
772
            wt = result.create_workingtree()
 
 
775
                if wt.path2id('') is None:
 
 
777
                        wt.set_root_id(self.open_workingtree.get_root_id())
 
 
778
                    except errors.NoWorkingTree:
 
 
784
        if recurse == 'down':
 
 
786
                basis = wt.basis_tree()
 
 
788
                subtrees = basis.iter_references()
 
 
789
                recurse_branch = wt.branch
 
 
790
            elif source_branch is not None:
 
 
791
                basis = source_branch.basis_tree()
 
 
793
                subtrees = basis.iter_references()
 
 
794
                recurse_branch = source_branch
 
 
799
                for path, file_id in subtrees:
 
 
800
                    target = urlutils.join(url, urlutils.escape(path))
 
 
801
                    sublocation = source_branch.reference_parent(file_id, path)
 
 
802
                    sublocation.bzrdir.sprout(target,
 
 
803
                        basis.get_reference_revision(file_id, path),
 
 
804
                        force_new_repo=force_new_repo, recurse=recurse)
 
 
806
                if basis is not None:
 
 
811
class BzrDirPreSplitOut(BzrDir):
 
 
812
    """A common class for the all-in-one formats."""
 
 
814
    def __init__(self, _transport, _format):
 
 
815
        """See BzrDir.__init__."""
 
 
816
        super(BzrDirPreSplitOut, self).__init__(_transport, _format)
 
 
817
        assert self._format._lock_class == lockable_files.TransportLock
 
 
818
        assert self._format._lock_file_name == 'branch-lock'
 
 
819
        self._control_files = lockable_files.LockableFiles(
 
 
820
                                            self.get_branch_transport(None),
 
 
821
                                            self._format._lock_file_name,
 
 
822
                                            self._format._lock_class)
 
 
824
    def break_lock(self):
 
 
825
        """Pre-splitout bzrdirs do not suffer from stale locks."""
 
 
826
        raise NotImplementedError(self.break_lock)
 
 
828
    def clone(self, url, revision_id=None, force_new_repo=False):
 
 
829
        """See BzrDir.clone()."""
 
 
830
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
832
        result = self._format._initialize_for_clone(url)
 
 
833
        self.open_repository().clone(result, revision_id=revision_id)
 
 
834
        from_branch = self.open_branch()
 
 
835
        from_branch.clone(result, revision_id=revision_id)
 
 
837
            self.open_workingtree().clone(result)
 
 
838
        except errors.NotLocalUrl:
 
 
839
            # make a new one, this format always has to have one.
 
 
841
                WorkingTreeFormat2().initialize(result)
 
 
842
            except errors.NotLocalUrl:
 
 
843
                # but we cannot do it for remote trees.
 
 
844
                to_branch = result.open_branch()
 
 
845
                WorkingTreeFormat2().stub_initialize_remote(to_branch.control_files)
 
 
848
    def create_branch(self):
 
 
849
        """See BzrDir.create_branch."""
 
 
850
        return self.open_branch()
 
 
852
    def create_repository(self, shared=False):
 
 
853
        """See BzrDir.create_repository."""
 
 
855
            raise errors.IncompatibleFormat('shared repository', self._format)
 
 
856
        return self.open_repository()
 
 
858
    def create_workingtree(self, revision_id=None):
 
 
859
        """See BzrDir.create_workingtree."""
 
 
860
        # this looks buggy but is not -really-
 
 
861
        # because this format creates the workingtree when the bzrdir is
 
 
863
        # clone and sprout will have set the revision_id
 
 
864
        # and that will have set it for us, its only
 
 
865
        # specific uses of create_workingtree in isolation
 
 
866
        # that can do wonky stuff here, and that only
 
 
867
        # happens for creating checkouts, which cannot be 
 
 
868
        # done on this format anyway. So - acceptable wart.
 
 
869
        result = self.open_workingtree(recommend_upgrade=False)
 
 
870
        if revision_id is not None:
 
 
871
            if revision_id == _mod_revision.NULL_REVISION:
 
 
872
                result.set_parent_ids([])
 
 
874
                result.set_parent_ids([revision_id])
 
 
877
    def destroy_workingtree(self):
 
 
878
        """See BzrDir.destroy_workingtree."""
 
 
879
        raise errors.UnsupportedOperation(self.destroy_workingtree, self)
 
 
881
    def destroy_workingtree_metadata(self):
 
 
882
        """See BzrDir.destroy_workingtree_metadata."""
 
 
883
        raise errors.UnsupportedOperation(self.destroy_workingtree_metadata, 
 
 
886
    def get_branch_transport(self, branch_format):
 
 
887
        """See BzrDir.get_branch_transport()."""
 
 
888
        if branch_format is None:
 
 
889
            return self.transport
 
 
891
            branch_format.get_format_string()
 
 
892
        except NotImplementedError:
 
 
893
            return self.transport
 
 
894
        raise errors.IncompatibleFormat(branch_format, self._format)
 
 
896
    def get_repository_transport(self, repository_format):
 
 
897
        """See BzrDir.get_repository_transport()."""
 
 
898
        if repository_format is None:
 
 
899
            return self.transport
 
 
901
            repository_format.get_format_string()
 
 
902
        except NotImplementedError:
 
 
903
            return self.transport
 
 
904
        raise errors.IncompatibleFormat(repository_format, self._format)
 
 
906
    def get_workingtree_transport(self, workingtree_format):
 
 
907
        """See BzrDir.get_workingtree_transport()."""
 
 
908
        if workingtree_format is None:
 
 
909
            return self.transport
 
 
911
            workingtree_format.get_format_string()
 
 
912
        except NotImplementedError:
 
 
913
            return self.transport
 
 
914
        raise errors.IncompatibleFormat(workingtree_format, self._format)
 
 
916
    def needs_format_conversion(self, format=None):
 
 
917
        """See BzrDir.needs_format_conversion()."""
 
 
918
        # if the format is not the same as the system default,
 
 
919
        # an upgrade is needed.
 
 
921
            format = BzrDirFormat.get_default_format()
 
 
922
        return not isinstance(self._format, format.__class__)
 
 
924
    def open_branch(self, unsupported=False):
 
 
925
        """See BzrDir.open_branch."""
 
 
926
        from bzrlib.branch import BzrBranchFormat4
 
 
927
        format = BzrBranchFormat4()
 
 
928
        self._check_supported(format, unsupported)
 
 
929
        return format.open(self, _found=True)
 
 
931
    def sprout(self, url, revision_id=None, force_new_repo=False):
 
 
932
        """See BzrDir.sprout()."""
 
 
933
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
935
        result = self._format._initialize_for_clone(url)
 
 
937
            self.open_repository().clone(result, revision_id=revision_id)
 
 
938
        except errors.NoRepositoryPresent:
 
 
941
            self.open_branch().sprout(result, revision_id=revision_id)
 
 
942
        except errors.NotBranchError:
 
 
944
        # we always want a working tree
 
 
945
        WorkingTreeFormat2().initialize(result)
 
 
949
class BzrDir4(BzrDirPreSplitOut):
 
 
950
    """A .bzr version 4 control object.
 
 
952
    This is a deprecated format and may be removed after sept 2006.
 
 
955
    def create_repository(self, shared=False):
 
 
956
        """See BzrDir.create_repository."""
 
 
957
        return self._format.repository_format.initialize(self, shared)
 
 
959
    def needs_format_conversion(self, format=None):
 
 
960
        """Format 4 dirs are always in need of conversion."""
 
 
963
    def open_repository(self):
 
 
964
        """See BzrDir.open_repository."""
 
 
965
        from bzrlib.repofmt.weaverepo import RepositoryFormat4
 
 
966
        return RepositoryFormat4().open(self, _found=True)
 
 
969
class BzrDir5(BzrDirPreSplitOut):
 
 
970
    """A .bzr version 5 control object.
 
 
972
    This is a deprecated format and may be removed after sept 2006.
 
 
975
    def open_repository(self):
 
 
976
        """See BzrDir.open_repository."""
 
 
977
        from bzrlib.repofmt.weaverepo import RepositoryFormat5
 
 
978
        return RepositoryFormat5().open(self, _found=True)
 
 
980
    def open_workingtree(self, _unsupported=False,
 
 
981
            recommend_upgrade=True):
 
 
982
        """See BzrDir.create_workingtree."""
 
 
983
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
984
        wt_format = WorkingTreeFormat2()
 
 
985
        # we don't warn here about upgrades; that ought to be handled for the
 
 
987
        return wt_format.open(self, _found=True)
 
 
990
class BzrDir6(BzrDirPreSplitOut):
 
 
991
    """A .bzr version 6 control object.
 
 
993
    This is a deprecated format and may be removed after sept 2006.
 
 
996
    def open_repository(self):
 
 
997
        """See BzrDir.open_repository."""
 
 
998
        from bzrlib.repofmt.weaverepo import RepositoryFormat6
 
 
999
        return RepositoryFormat6().open(self, _found=True)
 
 
1001
    def open_workingtree(self, _unsupported=False,
 
 
1002
        recommend_upgrade=True):
 
 
1003
        """See BzrDir.create_workingtree."""
 
 
1004
        # we don't warn here about upgrades; that ought to be handled for the
 
 
1006
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
1007
        return WorkingTreeFormat2().open(self, _found=True)
 
 
1010
class BzrDirMeta1(BzrDir):
 
 
1011
    """A .bzr meta version 1 control object.
 
 
1013
    This is the first control object where the 
 
 
1014
    individual aspects are really split out: there are separate repository,
 
 
1015
    workingtree and branch subdirectories and any subset of the three can be
 
 
1016
    present within a BzrDir.
 
 
1019
    def can_convert_format(self):
 
 
1020
        """See BzrDir.can_convert_format()."""
 
 
1023
    def create_branch(self):
 
 
1024
        """See BzrDir.create_branch."""
 
 
1025
        return self._format.get_branch_format().initialize(self)
 
 
1027
    def create_repository(self, shared=False):
 
 
1028
        """See BzrDir.create_repository."""
 
 
1029
        return self._format.repository_format.initialize(self, shared)
 
 
1031
    def create_workingtree(self, revision_id=None):
 
 
1032
        """See BzrDir.create_workingtree."""
 
 
1033
        from bzrlib.workingtree import WorkingTreeFormat
 
 
1034
        return self._format.workingtree_format.initialize(self, revision_id)
 
 
1036
    def destroy_workingtree(self):
 
 
1037
        """See BzrDir.destroy_workingtree."""
 
 
1038
        wt = self.open_workingtree(recommend_upgrade=False)
 
 
1039
        repository = wt.branch.repository
 
 
1040
        empty = repository.revision_tree(_mod_revision.NULL_REVISION)
 
 
1041
        wt.revert([], old_tree=empty)
 
 
1042
        self.destroy_workingtree_metadata()
 
 
1044
    def destroy_workingtree_metadata(self):
 
 
1045
        self.transport.delete_tree('checkout')
 
 
1047
    def _get_mkdir_mode(self):
 
 
1048
        """Figure out the mode to use when creating a bzrdir subdir."""
 
 
1049
        temp_control = lockable_files.LockableFiles(self.transport, '',
 
 
1050
                                     lockable_files.TransportLock)
 
 
1051
        return temp_control._dir_mode
 
 
1053
    def get_branch_transport(self, branch_format):
 
 
1054
        """See BzrDir.get_branch_transport()."""
 
 
1055
        if branch_format is None:
 
 
1056
            return self.transport.clone('branch')
 
 
1058
            branch_format.get_format_string()
 
 
1059
        except NotImplementedError:
 
 
1060
            raise errors.IncompatibleFormat(branch_format, self._format)
 
 
1062
            self.transport.mkdir('branch', mode=self._get_mkdir_mode())
 
 
1063
        except errors.FileExists:
 
 
1065
        return self.transport.clone('branch')
 
 
1067
    def get_repository_transport(self, repository_format):
 
 
1068
        """See BzrDir.get_repository_transport()."""
 
 
1069
        if repository_format is None:
 
 
1070
            return self.transport.clone('repository')
 
 
1072
            repository_format.get_format_string()
 
 
1073
        except NotImplementedError:
 
 
1074
            raise errors.IncompatibleFormat(repository_format, self._format)
 
 
1076
            self.transport.mkdir('repository', mode=self._get_mkdir_mode())
 
 
1077
        except errors.FileExists:
 
 
1079
        return self.transport.clone('repository')
 
 
1081
    def get_workingtree_transport(self, workingtree_format):
 
 
1082
        """See BzrDir.get_workingtree_transport()."""
 
 
1083
        if workingtree_format is None:
 
 
1084
            return self.transport.clone('checkout')
 
 
1086
            workingtree_format.get_format_string()
 
 
1087
        except NotImplementedError:
 
 
1088
            raise errors.IncompatibleFormat(workingtree_format, self._format)
 
 
1090
            self.transport.mkdir('checkout', mode=self._get_mkdir_mode())
 
 
1091
        except errors.FileExists:
 
 
1093
        return self.transport.clone('checkout')
 
 
1095
    def needs_format_conversion(self, format=None):
 
 
1096
        """See BzrDir.needs_format_conversion()."""
 
 
1098
            format = BzrDirFormat.get_default_format()
 
 
1099
        if not isinstance(self._format, format.__class__):
 
 
1100
            # it is not a meta dir format, conversion is needed.
 
 
1102
        # we might want to push this down to the repository?
 
 
1104
            if not isinstance(self.open_repository()._format,
 
 
1105
                              format.repository_format.__class__):
 
 
1106
                # the repository needs an upgrade.
 
 
1108
        except errors.NoRepositoryPresent:
 
 
1111
            if not isinstance(self.open_branch()._format,
 
 
1112
                              format.get_branch_format().__class__):
 
 
1113
                # the branch needs an upgrade.
 
 
1115
        except errors.NotBranchError:
 
 
1118
            my_wt = self.open_workingtree(recommend_upgrade=False)
 
 
1119
            if not isinstance(my_wt._format,
 
 
1120
                              format.workingtree_format.__class__):
 
 
1121
                # the workingtree needs an upgrade.
 
 
1123
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
 
1127
    def open_branch(self, unsupported=False):
 
 
1128
        """See BzrDir.open_branch."""
 
 
1129
        from bzrlib.branch import BranchFormat
 
 
1130
        format = BranchFormat.find_format(self)
 
 
1131
        self._check_supported(format, unsupported)
 
 
1132
        return format.open(self, _found=True)
 
 
1134
    def open_repository(self, unsupported=False):
 
 
1135
        """See BzrDir.open_repository."""
 
 
1136
        from bzrlib.repository import RepositoryFormat
 
 
1137
        format = RepositoryFormat.find_format(self)
 
 
1138
        self._check_supported(format, unsupported)
 
 
1139
        return format.open(self, _found=True)
 
 
1141
    def open_workingtree(self, unsupported=False,
 
 
1142
            recommend_upgrade=True):
 
 
1143
        """See BzrDir.open_workingtree."""
 
 
1144
        from bzrlib.workingtree import WorkingTreeFormat
 
 
1145
        format = WorkingTreeFormat.find_format(self)
 
 
1146
        self._check_supported(format, unsupported,
 
 
1148
            basedir=self.root_transport.base)
 
 
1149
        return format.open(self, _found=True)
 
 
1152
class BzrDirFormat(object):
 
 
1153
    """An encapsulation of the initialization and open routines for a format.
 
 
1155
    Formats provide three things:
 
 
1156
     * An initialization routine,
 
 
1160
    Formats are placed in an dict by their format string for reference 
 
 
1161
    during bzrdir opening. These should be subclasses of BzrDirFormat
 
 
1164
    Once a format is deprecated, just deprecate the initialize and open
 
 
1165
    methods on the format class. Do not deprecate the object, as the 
 
 
1166
    object will be created every system load.
 
 
1169
    _default_format = None
 
 
1170
    """The default format used for new .bzr dirs."""
 
 
1173
    """The known formats."""
 
 
1175
    _control_formats = []
 
 
1176
    """The registered control formats - .bzr, ....
 
 
1178
    This is a list of BzrDirFormat objects.
 
 
1181
    _lock_file_name = 'branch-lock'
 
 
1183
    # _lock_class must be set in subclasses to the lock type, typ.
 
 
1184
    # TransportLock or LockDir
 
 
1187
    def find_format(klass, transport):
 
 
1188
        """Return the format present at transport."""
 
 
1189
        for format in klass._control_formats:
 
 
1191
                return format.probe_transport(transport)
 
 
1192
            except errors.NotBranchError:
 
 
1193
                # this format does not find a control dir here.
 
 
1195
        raise errors.NotBranchError(path=transport.base)
 
 
1198
    def probe_transport(klass, transport):
 
 
1199
        """Return the .bzrdir style transport present at URL."""
 
 
1201
            format_string = transport.get(".bzr/branch-format").read()
 
 
1202
        except errors.NoSuchFile:
 
 
1203
            raise errors.NotBranchError(path=transport.base)
 
 
1206
            return klass._formats[format_string]
 
 
1208
            raise errors.UnknownFormatError(format=format_string)
 
 
1211
    def get_default_format(klass):
 
 
1212
        """Return the current default format."""
 
 
1213
        return klass._default_format
 
 
1215
    def get_format_string(self):
 
 
1216
        """Return the ASCII format string that identifies this format."""
 
 
1217
        raise NotImplementedError(self.get_format_string)
 
 
1219
    def get_format_description(self):
 
 
1220
        """Return the short description for this format."""
 
 
1221
        raise NotImplementedError(self.get_format_description)
 
 
1223
    def get_converter(self, format=None):
 
 
1224
        """Return the converter to use to convert bzrdirs needing converts.
 
 
1226
        This returns a bzrlib.bzrdir.Converter object.
 
 
1228
        This should return the best upgrader to step this format towards the
 
 
1229
        current default format. In the case of plugins we can/should provide
 
 
1230
        some means for them to extend the range of returnable converters.
 
 
1232
        :param format: Optional format to override the default format of the 
 
 
1235
        raise NotImplementedError(self.get_converter)
 
 
1237
    def initialize(self, url):
 
 
1238
        """Create a bzr control dir at this url and return an opened copy.
 
 
1240
        Subclasses should typically override initialize_on_transport
 
 
1241
        instead of this method.
 
 
1243
        return self.initialize_on_transport(get_transport(url))
 
 
1245
    def initialize_on_transport(self, transport):
 
 
1246
        """Initialize a new bzrdir in the base directory of a Transport."""
 
 
1247
        # Since we don't have a .bzr directory, inherit the
 
 
1248
        # mode from the root directory
 
 
1249
        temp_control = lockable_files.LockableFiles(transport,
 
 
1250
                            '', lockable_files.TransportLock)
 
 
1251
        temp_control._transport.mkdir('.bzr',
 
 
1252
                                      # FIXME: RBC 20060121 don't peek under
 
 
1254
                                      mode=temp_control._dir_mode)
 
 
1255
        file_mode = temp_control._file_mode
 
 
1257
        mutter('created control directory in ' + transport.base)
 
 
1258
        control = transport.clone('.bzr')
 
 
1259
        utf8_files = [('README', 
 
 
1260
                       "This is a Bazaar-NG control directory.\n"
 
 
1261
                       "Do not change any files in this directory.\n"),
 
 
1262
                      ('branch-format', self.get_format_string()),
 
 
1264
        # NB: no need to escape relative paths that are url safe.
 
 
1265
        control_files = lockable_files.LockableFiles(control,
 
 
1266
                            self._lock_file_name, self._lock_class)
 
 
1267
        control_files.create_lock()
 
 
1268
        control_files.lock_write()
 
 
1270
            for file, content in utf8_files:
 
 
1271
                control_files.put_utf8(file, content)
 
 
1273
            control_files.unlock()
 
 
1274
        return self.open(transport, _found=True)
 
 
1276
    def is_supported(self):
 
 
1277
        """Is this format supported?
 
 
1279
        Supported formats must be initializable and openable.
 
 
1280
        Unsupported formats may not support initialization or committing or 
 
 
1281
        some other features depending on the reason for not being supported.
 
 
1285
    def same_model(self, target_format):
 
 
1286
        return (self.repository_format.rich_root_data == 
 
 
1287
            target_format.rich_root_data)
 
 
1290
    def known_formats(klass):
 
 
1291
        """Return all the known formats.
 
 
1293
        Concrete formats should override _known_formats.
 
 
1295
        # There is double indirection here to make sure that control 
 
 
1296
        # formats used by more than one dir format will only be probed 
 
 
1297
        # once. This can otherwise be quite expensive for remote connections.
 
 
1299
        for format in klass._control_formats:
 
 
1300
            result.update(format._known_formats())
 
 
1304
    def _known_formats(klass):
 
 
1305
        """Return the known format instances for this control format."""
 
 
1306
        return set(klass._formats.values())
 
 
1308
    def open(self, transport, _found=False):
 
 
1309
        """Return an instance of this format for the dir transport points at.
 
 
1311
        _found is a private parameter, do not use it.
 
 
1314
            found_format = BzrDirFormat.find_format(transport)
 
 
1315
            if not isinstance(found_format, self.__class__):
 
 
1316
                raise AssertionError("%s was asked to open %s, but it seems to need "
 
 
1318
                        % (self, transport, found_format))
 
 
1319
        return self._open(transport)
 
 
1321
    def _open(self, transport):
 
 
1322
        """Template method helper for opening BzrDirectories.
 
 
1324
        This performs the actual open and any additional logic or parameter
 
 
1327
        raise NotImplementedError(self._open)
 
 
1330
    def register_format(klass, format):
 
 
1331
        klass._formats[format.get_format_string()] = format
 
 
1334
    def register_control_format(klass, format):
 
 
1335
        """Register a format that does not use '.bzr' for its control dir.
 
 
1337
        TODO: This should be pulled up into a 'ControlDirFormat' base class
 
 
1338
        which BzrDirFormat can inherit from, and renamed to register_format 
 
 
1339
        there. It has been done without that for now for simplicity of
 
 
1342
        klass._control_formats.append(format)
 
 
1345
    @symbol_versioning.deprecated_method(symbol_versioning.zero_fourteen)
 
 
1346
    def set_default_format(klass, format):
 
 
1347
        klass._set_default_format(format)
 
 
1350
    def _set_default_format(klass, format):
 
 
1351
        """Set default format (for testing behavior of defaults only)"""
 
 
1352
        klass._default_format = format
 
 
1355
        return self.get_format_string()[:-1]
 
 
1358
    def unregister_format(klass, format):
 
 
1359
        assert klass._formats[format.get_format_string()] is format
 
 
1360
        del klass._formats[format.get_format_string()]
 
 
1363
    def unregister_control_format(klass, format):
 
 
1364
        klass._control_formats.remove(format)
 
 
1367
class BzrDirFormat4(BzrDirFormat):
 
 
1368
    """Bzr dir format 4.
 
 
1370
    This format is a combined format for working tree, branch and repository.
 
 
1372
     - Format 1 working trees [always]
 
 
1373
     - Format 4 branches [always]
 
 
1374
     - Format 4 repositories [always]
 
 
1376
    This format is deprecated: it indexes texts using a text it which is
 
 
1377
    removed in format 5; write support for this format has been removed.
 
 
1380
    _lock_class = lockable_files.TransportLock
 
 
1382
    def get_format_string(self):
 
 
1383
        """See BzrDirFormat.get_format_string()."""
 
 
1384
        return "Bazaar-NG branch, format 0.0.4\n"
 
 
1386
    def get_format_description(self):
 
 
1387
        """See BzrDirFormat.get_format_description()."""
 
 
1388
        return "All-in-one format 4"
 
 
1390
    def get_converter(self, format=None):
 
 
1391
        """See BzrDirFormat.get_converter()."""
 
 
1392
        # there is one and only one upgrade path here.
 
 
1393
        return ConvertBzrDir4To5()
 
 
1395
    def initialize_on_transport(self, transport):
 
 
1396
        """Format 4 branches cannot be created."""
 
 
1397
        raise errors.UninitializableFormat(self)
 
 
1399
    def is_supported(self):
 
 
1400
        """Format 4 is not supported.
 
 
1402
        It is not supported because the model changed from 4 to 5 and the
 
 
1403
        conversion logic is expensive - so doing it on the fly was not 
 
 
1408
    def _open(self, transport):
 
 
1409
        """See BzrDirFormat._open."""
 
 
1410
        return BzrDir4(transport, self)
 
 
1412
    def __return_repository_format(self):
 
 
1413
        """Circular import protection."""
 
 
1414
        from bzrlib.repofmt.weaverepo import RepositoryFormat4
 
 
1415
        return RepositoryFormat4()
 
 
1416
    repository_format = property(__return_repository_format)
 
 
1419
class BzrDirFormat5(BzrDirFormat):
 
 
1420
    """Bzr control format 5.
 
 
1422
    This format is a combined format for working tree, branch and repository.
 
 
1424
     - Format 2 working trees [always] 
 
 
1425
     - Format 4 branches [always] 
 
 
1426
     - Format 5 repositories [always]
 
 
1427
       Unhashed stores in the repository.
 
 
1430
    _lock_class = lockable_files.TransportLock
 
 
1432
    def get_format_string(self):
 
 
1433
        """See BzrDirFormat.get_format_string()."""
 
 
1434
        return "Bazaar-NG branch, format 5\n"
 
 
1436
    def get_format_description(self):
 
 
1437
        """See BzrDirFormat.get_format_description()."""
 
 
1438
        return "All-in-one format 5"
 
 
1440
    def get_converter(self, format=None):
 
 
1441
        """See BzrDirFormat.get_converter()."""
 
 
1442
        # there is one and only one upgrade path here.
 
 
1443
        return ConvertBzrDir5To6()
 
 
1445
    def _initialize_for_clone(self, url):
 
 
1446
        return self.initialize_on_transport(get_transport(url), _cloning=True)
 
 
1448
    def initialize_on_transport(self, transport, _cloning=False):
 
 
1449
        """Format 5 dirs always have working tree, branch and repository.
 
 
1451
        Except when they are being cloned.
 
 
1453
        from bzrlib.branch import BzrBranchFormat4
 
 
1454
        from bzrlib.repofmt.weaverepo import RepositoryFormat5
 
 
1455
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
1456
        result = (super(BzrDirFormat5, self).initialize_on_transport(transport))
 
 
1457
        RepositoryFormat5().initialize(result, _internal=True)
 
 
1459
            branch = BzrBranchFormat4().initialize(result)
 
 
1461
                WorkingTreeFormat2().initialize(result)
 
 
1462
            except errors.NotLocalUrl:
 
 
1463
                # Even though we can't access the working tree, we need to
 
 
1464
                # create its control files.
 
 
1465
                WorkingTreeFormat2().stub_initialize_remote(branch.control_files)
 
 
1468
    def _open(self, transport):
 
 
1469
        """See BzrDirFormat._open."""
 
 
1470
        return BzrDir5(transport, self)
 
 
1472
    def __return_repository_format(self):
 
 
1473
        """Circular import protection."""
 
 
1474
        from bzrlib.repofmt.weaverepo import RepositoryFormat5
 
 
1475
        return RepositoryFormat5()
 
 
1476
    repository_format = property(__return_repository_format)
 
 
1479
class BzrDirFormat6(BzrDirFormat):
 
 
1480
    """Bzr control format 6.
 
 
1482
    This format is a combined format for working tree, branch and repository.
 
 
1484
     - Format 2 working trees [always] 
 
 
1485
     - Format 4 branches [always] 
 
 
1486
     - Format 6 repositories [always]
 
 
1489
    _lock_class = lockable_files.TransportLock
 
 
1491
    def get_format_string(self):
 
 
1492
        """See BzrDirFormat.get_format_string()."""
 
 
1493
        return "Bazaar-NG branch, format 6\n"
 
 
1495
    def get_format_description(self):
 
 
1496
        """See BzrDirFormat.get_format_description()."""
 
 
1497
        return "All-in-one format 6"
 
 
1499
    def get_converter(self, format=None):
 
 
1500
        """See BzrDirFormat.get_converter()."""
 
 
1501
        # there is one and only one upgrade path here.
 
 
1502
        return ConvertBzrDir6ToMeta()
 
 
1504
    def _initialize_for_clone(self, url):
 
 
1505
        return self.initialize_on_transport(get_transport(url), _cloning=True)
 
 
1507
    def initialize_on_transport(self, transport, _cloning=False):
 
 
1508
        """Format 6 dirs always have working tree, branch and repository.
 
 
1510
        Except when they are being cloned.
 
 
1512
        from bzrlib.branch import BzrBranchFormat4
 
 
1513
        from bzrlib.repofmt.weaverepo import RepositoryFormat6
 
 
1514
        from bzrlib.workingtree import WorkingTreeFormat2
 
 
1515
        result = super(BzrDirFormat6, self).initialize_on_transport(transport)
 
 
1516
        RepositoryFormat6().initialize(result, _internal=True)
 
 
1518
            branch = BzrBranchFormat4().initialize(result)
 
 
1520
                WorkingTreeFormat2().initialize(result)
 
 
1521
            except errors.NotLocalUrl:
 
 
1522
                # Even though we can't access the working tree, we need to
 
 
1523
                # create its control files.
 
 
1524
                WorkingTreeFormat2().stub_initialize_remote(branch.control_files)
 
 
1527
    def _open(self, transport):
 
 
1528
        """See BzrDirFormat._open."""
 
 
1529
        return BzrDir6(transport, self)
 
 
1531
    def __return_repository_format(self):
 
 
1532
        """Circular import protection."""
 
 
1533
        from bzrlib.repofmt.weaverepo import RepositoryFormat6
 
 
1534
        return RepositoryFormat6()
 
 
1535
    repository_format = property(__return_repository_format)
 
 
1538
class BzrDirMetaFormat1(BzrDirFormat):
 
 
1539
    """Bzr meta control format 1
 
 
1541
    This is the first format with split out working tree, branch and repository
 
 
1544
     - Format 3 working trees [optional]
 
 
1545
     - Format 5 branches [optional]
 
 
1546
     - Format 7 repositories [optional]
 
 
1549
    _lock_class = lockdir.LockDir
 
 
1552
        self._workingtree_format = None
 
 
1553
        self._branch_format = None
 
 
1555
    def __eq__(self, other):
 
 
1556
        if other.__class__ is not self.__class__:
 
 
1558
        if other.repository_format != self.repository_format:
 
 
1560
        if other.workingtree_format != self.workingtree_format:
 
 
1564
    def __ne__(self, other):
 
 
1565
        return not self == other
 
 
1567
    def get_branch_format(self):
 
 
1568
        if self._branch_format is None:
 
 
1569
            from bzrlib.branch import BranchFormat
 
 
1570
            self._branch_format = BranchFormat.get_default_format()
 
 
1571
        return self._branch_format
 
 
1573
    def set_branch_format(self, format):
 
 
1574
        self._branch_format = format
 
 
1576
    def get_converter(self, format=None):
 
 
1577
        """See BzrDirFormat.get_converter()."""
 
 
1579
            format = BzrDirFormat.get_default_format()
 
 
1580
        if not isinstance(self, format.__class__):
 
 
1581
            # converting away from metadir is not implemented
 
 
1582
            raise NotImplementedError(self.get_converter)
 
 
1583
        return ConvertMetaToMeta(format)
 
 
1585
    def get_format_string(self):
 
 
1586
        """See BzrDirFormat.get_format_string()."""
 
 
1587
        return "Bazaar-NG meta directory, format 1\n"
 
 
1589
    def get_format_description(self):
 
 
1590
        """See BzrDirFormat.get_format_description()."""
 
 
1591
        return "Meta directory format 1"
 
 
1593
    def _open(self, transport):
 
 
1594
        """See BzrDirFormat._open."""
 
 
1595
        return BzrDirMeta1(transport, self)
 
 
1597
    def __return_repository_format(self):
 
 
1598
        """Circular import protection."""
 
 
1599
        if getattr(self, '_repository_format', None):
 
 
1600
            return self._repository_format
 
 
1601
        from bzrlib.repository import RepositoryFormat
 
 
1602
        return RepositoryFormat.get_default_format()
 
 
1604
    def __set_repository_format(self, value):
 
 
1605
        """Allow changint the repository format for metadir formats."""
 
 
1606
        self._repository_format = value
 
 
1608
    repository_format = property(__return_repository_format, __set_repository_format)
 
 
1610
    def __get_workingtree_format(self):
 
 
1611
        if self._workingtree_format is None:
 
 
1612
            from bzrlib.workingtree import WorkingTreeFormat
 
 
1613
            self._workingtree_format = WorkingTreeFormat.get_default_format()
 
 
1614
        return self._workingtree_format
 
 
1616
    def __set_workingtree_format(self, wt_format):
 
 
1617
        self._workingtree_format = wt_format
 
 
1619
    workingtree_format = property(__get_workingtree_format,
 
 
1620
                                  __set_workingtree_format)
 
 
1623
# Register bzr control format
 
 
1624
BzrDirFormat.register_control_format(BzrDirFormat)
 
 
1626
# Register bzr formats
 
 
1627
BzrDirFormat.register_format(BzrDirFormat4())
 
 
1628
BzrDirFormat.register_format(BzrDirFormat5())
 
 
1629
BzrDirFormat.register_format(BzrDirFormat6())
 
 
1630
__default_format = BzrDirMetaFormat1()
 
 
1631
BzrDirFormat.register_format(__default_format)
 
 
1632
BzrDirFormat._default_format = __default_format
 
 
1635
class BzrDirTestProviderAdapter(object):
 
 
1636
    """A tool to generate a suite testing multiple bzrdir formats at once.
 
 
1638
    This is done by copying the test once for each transport and injecting
 
 
1639
    the transport_server, transport_readonly_server, and bzrdir_format
 
 
1640
    classes into each copy. Each copy is also given a new id() to make it
 
 
1644
    def __init__(self, transport_server, transport_readonly_server, formats):
 
 
1645
        self._transport_server = transport_server
 
 
1646
        self._transport_readonly_server = transport_readonly_server
 
 
1647
        self._formats = formats
 
 
1649
    def adapt(self, test):
 
 
1650
        result = unittest.TestSuite()
 
 
1651
        for format in self._formats:
 
 
1652
            new_test = deepcopy(test)
 
 
1653
            new_test.transport_server = self._transport_server
 
 
1654
            new_test.transport_readonly_server = self._transport_readonly_server
 
 
1655
            new_test.bzrdir_format = format
 
 
1656
            def make_new_test_id():
 
 
1657
                new_id = "%s(%s)" % (new_test.id(), format.__class__.__name__)
 
 
1658
                return lambda: new_id
 
 
1659
            new_test.id = make_new_test_id()
 
 
1660
            result.addTest(new_test)
 
 
1664
class Converter(object):
 
 
1665
    """Converts a disk format object from one format to another."""
 
 
1667
    def convert(self, to_convert, pb):
 
 
1668
        """Perform the conversion of to_convert, giving feedback via pb.
 
 
1670
        :param to_convert: The disk object to convert.
 
 
1671
        :param pb: a progress bar to use for progress information.
 
 
1674
    def step(self, message):
 
 
1675
        """Update the pb by a step."""
 
 
1677
        self.pb.update(message, self.count, self.total)
 
 
1680
class ConvertBzrDir4To5(Converter):
 
 
1681
    """Converts format 4 bzr dirs to format 5."""
 
 
1684
        super(ConvertBzrDir4To5, self).__init__()
 
 
1685
        self.converted_revs = set()
 
 
1686
        self.absent_revisions = set()
 
 
1690
    def convert(self, to_convert, pb):
 
 
1691
        """See Converter.convert()."""
 
 
1692
        self.bzrdir = to_convert
 
 
1694
        self.pb.note('starting upgrade from format 4 to 5')
 
 
1695
        if isinstance(self.bzrdir.transport, LocalTransport):
 
 
1696
            self.bzrdir.get_workingtree_transport(None).delete('stat-cache')
 
 
1697
        self._convert_to_weaves()
 
 
1698
        return BzrDir.open(self.bzrdir.root_transport.base)
 
 
1700
    def _convert_to_weaves(self):
 
 
1701
        self.pb.note('note: upgrade may be faster if all store files are ungzipped first')
 
 
1704
            stat = self.bzrdir.transport.stat('weaves')
 
 
1705
            if not S_ISDIR(stat.st_mode):
 
 
1706
                self.bzrdir.transport.delete('weaves')
 
 
1707
                self.bzrdir.transport.mkdir('weaves')
 
 
1708
        except errors.NoSuchFile:
 
 
1709
            self.bzrdir.transport.mkdir('weaves')
 
 
1710
        # deliberately not a WeaveFile as we want to build it up slowly.
 
 
1711
        self.inv_weave = Weave('inventory')
 
 
1712
        # holds in-memory weaves for all files
 
 
1713
        self.text_weaves = {}
 
 
1714
        self.bzrdir.transport.delete('branch-format')
 
 
1715
        self.branch = self.bzrdir.open_branch()
 
 
1716
        self._convert_working_inv()
 
 
1717
        rev_history = self.branch.revision_history()
 
 
1718
        # to_read is a stack holding the revisions we still need to process;
 
 
1719
        # appending to it adds new highest-priority revisions
 
 
1720
        self.known_revisions = set(rev_history)
 
 
1721
        self.to_read = rev_history[-1:]
 
 
1723
            rev_id = self.to_read.pop()
 
 
1724
            if (rev_id not in self.revisions
 
 
1725
                and rev_id not in self.absent_revisions):
 
 
1726
                self._load_one_rev(rev_id)
 
 
1728
        to_import = self._make_order()
 
 
1729
        for i, rev_id in enumerate(to_import):
 
 
1730
            self.pb.update('converting revision', i, len(to_import))
 
 
1731
            self._convert_one_rev(rev_id)
 
 
1733
        self._write_all_weaves()
 
 
1734
        self._write_all_revs()
 
 
1735
        self.pb.note('upgraded to weaves:')
 
 
1736
        self.pb.note('  %6d revisions and inventories', len(self.revisions))
 
 
1737
        self.pb.note('  %6d revisions not present', len(self.absent_revisions))
 
 
1738
        self.pb.note('  %6d texts', self.text_count)
 
 
1739
        self._cleanup_spare_files_after_format4()
 
 
1740
        self.branch.control_files.put_utf8('branch-format', BzrDirFormat5().get_format_string())
 
 
1742
    def _cleanup_spare_files_after_format4(self):
 
 
1743
        # FIXME working tree upgrade foo.
 
 
1744
        for n in 'merged-patches', 'pending-merged-patches':
 
 
1746
                ## assert os.path.getsize(p) == 0
 
 
1747
                self.bzrdir.transport.delete(n)
 
 
1748
            except errors.NoSuchFile:
 
 
1750
        self.bzrdir.transport.delete_tree('inventory-store')
 
 
1751
        self.bzrdir.transport.delete_tree('text-store')
 
 
1753
    def _convert_working_inv(self):
 
 
1754
        inv = xml4.serializer_v4.read_inventory(
 
 
1755
                    self.branch.control_files.get('inventory'))
 
 
1756
        new_inv_xml = xml5.serializer_v5.write_inventory_to_string(inv)
 
 
1757
        # FIXME inventory is a working tree change.
 
 
1758
        self.branch.control_files.put('inventory', StringIO(new_inv_xml))
 
 
1760
    def _write_all_weaves(self):
 
 
1761
        controlweaves = WeaveStore(self.bzrdir.transport, prefixed=False)
 
 
1762
        weave_transport = self.bzrdir.transport.clone('weaves')
 
 
1763
        weaves = WeaveStore(weave_transport, prefixed=False)
 
 
1764
        transaction = WriteTransaction()
 
 
1768
            for file_id, file_weave in self.text_weaves.items():
 
 
1769
                self.pb.update('writing weave', i, len(self.text_weaves))
 
 
1770
                weaves._put_weave(file_id, file_weave, transaction)
 
 
1772
            self.pb.update('inventory', 0, 1)
 
 
1773
            controlweaves._put_weave('inventory', self.inv_weave, transaction)
 
 
1774
            self.pb.update('inventory', 1, 1)
 
 
1778
    def _write_all_revs(self):
 
 
1779
        """Write all revisions out in new form."""
 
 
1780
        self.bzrdir.transport.delete_tree('revision-store')
 
 
1781
        self.bzrdir.transport.mkdir('revision-store')
 
 
1782
        revision_transport = self.bzrdir.transport.clone('revision-store')
 
 
1784
        _revision_store = TextRevisionStore(TextStore(revision_transport,
 
 
1788
            transaction = WriteTransaction()
 
 
1789
            for i, rev_id in enumerate(self.converted_revs):
 
 
1790
                self.pb.update('write revision', i, len(self.converted_revs))
 
 
1791
                _revision_store.add_revision(self.revisions[rev_id], transaction)
 
 
1795
    def _load_one_rev(self, rev_id):
 
 
1796
        """Load a revision object into memory.
 
 
1798
        Any parents not either loaded or abandoned get queued to be
 
 
1800
        self.pb.update('loading revision',
 
 
1801
                       len(self.revisions),
 
 
1802
                       len(self.known_revisions))
 
 
1803
        if not self.branch.repository.has_revision(rev_id):
 
 
1805
            self.pb.note('revision {%s} not present in branch; '
 
 
1806
                         'will be converted as a ghost',
 
 
1808
            self.absent_revisions.add(rev_id)
 
 
1810
            rev = self.branch.repository._revision_store.get_revision(rev_id,
 
 
1811
                self.branch.repository.get_transaction())
 
 
1812
            for parent_id in rev.parent_ids:
 
 
1813
                self.known_revisions.add(parent_id)
 
 
1814
                self.to_read.append(parent_id)
 
 
1815
            self.revisions[rev_id] = rev
 
 
1817
    def _load_old_inventory(self, rev_id):
 
 
1818
        assert rev_id not in self.converted_revs
 
 
1819
        old_inv_xml = self.branch.repository.inventory_store.get(rev_id).read()
 
 
1820
        inv = xml4.serializer_v4.read_inventory_from_string(old_inv_xml)
 
 
1821
        inv.revision_id = rev_id
 
 
1822
        rev = self.revisions[rev_id]
 
 
1823
        if rev.inventory_sha1:
 
 
1824
            assert rev.inventory_sha1 == sha_string(old_inv_xml), \
 
 
1825
                'inventory sha mismatch for {%s}' % rev_id
 
 
1828
    def _load_updated_inventory(self, rev_id):
 
 
1829
        assert rev_id in self.converted_revs
 
 
1830
        inv_xml = self.inv_weave.get_text(rev_id)
 
 
1831
        inv = xml5.serializer_v5.read_inventory_from_string(inv_xml)
 
 
1834
    def _convert_one_rev(self, rev_id):
 
 
1835
        """Convert revision and all referenced objects to new format."""
 
 
1836
        rev = self.revisions[rev_id]
 
 
1837
        inv = self._load_old_inventory(rev_id)
 
 
1838
        present_parents = [p for p in rev.parent_ids
 
 
1839
                           if p not in self.absent_revisions]
 
 
1840
        self._convert_revision_contents(rev, inv, present_parents)
 
 
1841
        self._store_new_weave(rev, inv, present_parents)
 
 
1842
        self.converted_revs.add(rev_id)
 
 
1844
    def _store_new_weave(self, rev, inv, present_parents):
 
 
1845
        # the XML is now updated with text versions
 
 
1847
            entries = inv.iter_entries()
 
 
1849
            for path, ie in entries:
 
 
1850
                assert getattr(ie, 'revision', None) is not None, \
 
 
1851
                    'no revision on {%s} in {%s}' % \
 
 
1852
                    (file_id, rev.revision_id)
 
 
1853
        new_inv_xml = xml5.serializer_v5.write_inventory_to_string(inv)
 
 
1854
        new_inv_sha1 = sha_string(new_inv_xml)
 
 
1855
        self.inv_weave.add_lines(rev.revision_id, 
 
 
1857
                                 new_inv_xml.splitlines(True))
 
 
1858
        rev.inventory_sha1 = new_inv_sha1
 
 
1860
    def _convert_revision_contents(self, rev, inv, present_parents):
 
 
1861
        """Convert all the files within a revision.
 
 
1863
        Also upgrade the inventory to refer to the text revision ids."""
 
 
1864
        rev_id = rev.revision_id
 
 
1865
        mutter('converting texts of revision {%s}',
 
 
1867
        parent_invs = map(self._load_updated_inventory, present_parents)
 
 
1868
        entries = inv.iter_entries()
 
 
1870
        for path, ie in entries:
 
 
1871
            self._convert_file_version(rev, ie, parent_invs)
 
 
1873
    def _convert_file_version(self, rev, ie, parent_invs):
 
 
1874
        """Convert one version of one file.
 
 
1876
        The file needs to be added into the weave if it is a merge
 
 
1877
        of >=2 parents or if it's changed from its parent.
 
 
1879
        file_id = ie.file_id
 
 
1880
        rev_id = rev.revision_id
 
 
1881
        w = self.text_weaves.get(file_id)
 
 
1884
            self.text_weaves[file_id] = w
 
 
1885
        text_changed = False
 
 
1886
        previous_entries = ie.find_previous_heads(parent_invs,
 
 
1890
        for old_revision in previous_entries:
 
 
1891
                # if this fails, its a ghost ?
 
 
1892
                assert old_revision in self.converted_revs, \
 
 
1893
                    "Revision {%s} not in converted_revs" % old_revision
 
 
1894
        self.snapshot_ie(previous_entries, ie, w, rev_id)
 
 
1896
        assert getattr(ie, 'revision', None) is not None
 
 
1898
    def snapshot_ie(self, previous_revisions, ie, w, rev_id):
 
 
1899
        # TODO: convert this logic, which is ~= snapshot to
 
 
1900
        # a call to:. This needs the path figured out. rather than a work_tree
 
 
1901
        # a v4 revision_tree can be given, or something that looks enough like
 
 
1902
        # one to give the file content to the entry if it needs it.
 
 
1903
        # and we need something that looks like a weave store for snapshot to 
 
 
1905
        #ie.snapshot(rev, PATH, previous_revisions, REVISION_TREE, InMemoryWeaveStore(self.text_weaves))
 
 
1906
        if len(previous_revisions) == 1:
 
 
1907
            previous_ie = previous_revisions.values()[0]
 
 
1908
            if ie._unchanged(previous_ie):
 
 
1909
                ie.revision = previous_ie.revision
 
 
1912
            text = self.branch.repository.text_store.get(ie.text_id)
 
 
1913
            file_lines = text.readlines()
 
 
1914
            assert sha_strings(file_lines) == ie.text_sha1
 
 
1915
            assert sum(map(len, file_lines)) == ie.text_size
 
 
1916
            w.add_lines(rev_id, previous_revisions, file_lines)
 
 
1917
            self.text_count += 1
 
 
1919
            w.add_lines(rev_id, previous_revisions, [])
 
 
1920
        ie.revision = rev_id
 
 
1922
    def _make_order(self):
 
 
1923
        """Return a suitable order for importing revisions.
 
 
1925
        The order must be such that an revision is imported after all
 
 
1926
        its (present) parents.
 
 
1928
        todo = set(self.revisions.keys())
 
 
1929
        done = self.absent_revisions.copy()
 
 
1932
            # scan through looking for a revision whose parents
 
 
1934
            for rev_id in sorted(list(todo)):
 
 
1935
                rev = self.revisions[rev_id]
 
 
1936
                parent_ids = set(rev.parent_ids)
 
 
1937
                if parent_ids.issubset(done):
 
 
1938
                    # can take this one now
 
 
1939
                    order.append(rev_id)
 
 
1945
class ConvertBzrDir5To6(Converter):
 
 
1946
    """Converts format 5 bzr dirs to format 6."""
 
 
1948
    def convert(self, to_convert, pb):
 
 
1949
        """See Converter.convert()."""
 
 
1950
        self.bzrdir = to_convert
 
 
1952
        self.pb.note('starting upgrade from format 5 to 6')
 
 
1953
        self._convert_to_prefixed()
 
 
1954
        return BzrDir.open(self.bzrdir.root_transport.base)
 
 
1956
    def _convert_to_prefixed(self):
 
 
1957
        from bzrlib.store import TransportStore
 
 
1958
        self.bzrdir.transport.delete('branch-format')
 
 
1959
        for store_name in ["weaves", "revision-store"]:
 
 
1960
            self.pb.note("adding prefixes to %s" % store_name)
 
 
1961
            store_transport = self.bzrdir.transport.clone(store_name)
 
 
1962
            store = TransportStore(store_transport, prefixed=True)
 
 
1963
            for urlfilename in store_transport.list_dir('.'):
 
 
1964
                filename = urlutils.unescape(urlfilename)
 
 
1965
                if (filename.endswith(".weave") or
 
 
1966
                    filename.endswith(".gz") or
 
 
1967
                    filename.endswith(".sig")):
 
 
1968
                    file_id = os.path.splitext(filename)[0]
 
 
1971
                prefix_dir = store.hash_prefix(file_id)
 
 
1972
                # FIXME keep track of the dirs made RBC 20060121
 
 
1974
                    store_transport.move(filename, prefix_dir + '/' + filename)
 
 
1975
                except errors.NoSuchFile: # catches missing dirs strangely enough
 
 
1976
                    store_transport.mkdir(prefix_dir)
 
 
1977
                    store_transport.move(filename, prefix_dir + '/' + filename)
 
 
1978
        self.bzrdir._control_files.put_utf8('branch-format', BzrDirFormat6().get_format_string())
 
 
1981
class ConvertBzrDir6ToMeta(Converter):
 
 
1982
    """Converts format 6 bzr dirs to metadirs."""
 
 
1984
    def convert(self, to_convert, pb):
 
 
1985
        """See Converter.convert()."""
 
 
1986
        from bzrlib.repofmt.weaverepo import RepositoryFormat7
 
 
1987
        from bzrlib.branch import BzrBranchFormat5
 
 
1988
        self.bzrdir = to_convert
 
 
1991
        self.total = 20 # the steps we know about
 
 
1992
        self.garbage_inventories = []
 
 
1994
        self.pb.note('starting upgrade from format 6 to metadir')
 
 
1995
        self.bzrdir._control_files.put_utf8('branch-format', "Converting to format 6")
 
 
1996
        # its faster to move specific files around than to open and use the apis...
 
 
1997
        # first off, nuke ancestry.weave, it was never used.
 
 
1999
            self.step('Removing ancestry.weave')
 
 
2000
            self.bzrdir.transport.delete('ancestry.weave')
 
 
2001
        except errors.NoSuchFile:
 
 
2003
        # find out whats there
 
 
2004
        self.step('Finding branch files')
 
 
2005
        last_revision = self.bzrdir.open_branch().last_revision()
 
 
2006
        bzrcontents = self.bzrdir.transport.list_dir('.')
 
 
2007
        for name in bzrcontents:
 
 
2008
            if name.startswith('basis-inventory.'):
 
 
2009
                self.garbage_inventories.append(name)
 
 
2010
        # create new directories for repository, working tree and branch
 
 
2011
        self.dir_mode = self.bzrdir._control_files._dir_mode
 
 
2012
        self.file_mode = self.bzrdir._control_files._file_mode
 
 
2013
        repository_names = [('inventory.weave', True),
 
 
2014
                            ('revision-store', True),
 
 
2016
        self.step('Upgrading repository  ')
 
 
2017
        self.bzrdir.transport.mkdir('repository', mode=self.dir_mode)
 
 
2018
        self.make_lock('repository')
 
 
2019
        # we hard code the formats here because we are converting into
 
 
2020
        # the meta format. The meta format upgrader can take this to a 
 
 
2021
        # future format within each component.
 
 
2022
        self.put_format('repository', RepositoryFormat7())
 
 
2023
        for entry in repository_names:
 
 
2024
            self.move_entry('repository', entry)
 
 
2026
        self.step('Upgrading branch      ')
 
 
2027
        self.bzrdir.transport.mkdir('branch', mode=self.dir_mode)
 
 
2028
        self.make_lock('branch')
 
 
2029
        self.put_format('branch', BzrBranchFormat5())
 
 
2030
        branch_files = [('revision-history', True),
 
 
2031
                        ('branch-name', True),
 
 
2033
        for entry in branch_files:
 
 
2034
            self.move_entry('branch', entry)
 
 
2036
        checkout_files = [('pending-merges', True),
 
 
2037
                          ('inventory', True),
 
 
2038
                          ('stat-cache', False)]
 
 
2039
        # If a mandatory checkout file is not present, the branch does not have
 
 
2040
        # a functional checkout. Do not create a checkout in the converted
 
 
2042
        for name, mandatory in checkout_files:
 
 
2043
            if mandatory and name not in bzrcontents:
 
 
2044
                has_checkout = False
 
 
2048
        if not has_checkout:
 
 
2049
            self.pb.note('No working tree.')
 
 
2050
            # If some checkout files are there, we may as well get rid of them.
 
 
2051
            for name, mandatory in checkout_files:
 
 
2052
                if name in bzrcontents:
 
 
2053
                    self.bzrdir.transport.delete(name)
 
 
2055
            from bzrlib.workingtree import WorkingTreeFormat3
 
 
2056
            self.step('Upgrading working tree')
 
 
2057
            self.bzrdir.transport.mkdir('checkout', mode=self.dir_mode)
 
 
2058
            self.make_lock('checkout')
 
 
2060
                'checkout', WorkingTreeFormat3())
 
 
2061
            self.bzrdir.transport.delete_multi(
 
 
2062
                self.garbage_inventories, self.pb)
 
 
2063
            for entry in checkout_files:
 
 
2064
                self.move_entry('checkout', entry)
 
 
2065
            if last_revision is not None:
 
 
2066
                self.bzrdir._control_files.put_utf8(
 
 
2067
                    'checkout/last-revision', last_revision)
 
 
2068
        self.bzrdir._control_files.put_utf8(
 
 
2069
            'branch-format', BzrDirMetaFormat1().get_format_string())
 
 
2070
        return BzrDir.open(self.bzrdir.root_transport.base)
 
 
2072
    def make_lock(self, name):
 
 
2073
        """Make a lock for the new control dir name."""
 
 
2074
        self.step('Make %s lock' % name)
 
 
2075
        ld = lockdir.LockDir(self.bzrdir.transport,
 
 
2077
                             file_modebits=self.file_mode,
 
 
2078
                             dir_modebits=self.dir_mode)
 
 
2081
    def move_entry(self, new_dir, entry):
 
 
2082
        """Move then entry name into new_dir."""
 
 
2084
        mandatory = entry[1]
 
 
2085
        self.step('Moving %s' % name)
 
 
2087
            self.bzrdir.transport.move(name, '%s/%s' % (new_dir, name))
 
 
2088
        except errors.NoSuchFile:
 
 
2092
    def put_format(self, dirname, format):
 
 
2093
        self.bzrdir._control_files.put_utf8('%s/format' % dirname, format.get_format_string())
 
 
2096
class ConvertMetaToMeta(Converter):
 
 
2097
    """Converts the components of metadirs."""
 
 
2099
    def __init__(self, target_format):
 
 
2100
        """Create a metadir to metadir converter.
 
 
2102
        :param target_format: The final metadir format that is desired.
 
 
2104
        self.target_format = target_format
 
 
2106
    def convert(self, to_convert, pb):
 
 
2107
        """See Converter.convert()."""
 
 
2108
        self.bzrdir = to_convert
 
 
2112
        self.step('checking repository format')
 
 
2114
            repo = self.bzrdir.open_repository()
 
 
2115
        except errors.NoRepositoryPresent:
 
 
2118
            if not isinstance(repo._format, self.target_format.repository_format.__class__):
 
 
2119
                from bzrlib.repository import CopyConverter
 
 
2120
                self.pb.note('starting repository conversion')
 
 
2121
                converter = CopyConverter(self.target_format.repository_format)
 
 
2122
                converter.convert(repo, pb)
 
 
2124
            branch = self.bzrdir.open_branch()
 
 
2125
        except errors.NotBranchError:
 
 
2128
            # TODO: conversions of Branch and Tree should be done by
 
 
2129
            # InterXFormat lookups
 
 
2130
            # Avoid circular imports
 
 
2131
            from bzrlib import branch as _mod_branch
 
 
2132
            if (branch._format.__class__ is _mod_branch.BzrBranchFormat5 and
 
 
2133
                self.target_format.get_branch_format().__class__ is
 
 
2134
                _mod_branch.BzrBranchFormat6):
 
 
2135
                branch_converter = _mod_branch.Converter5to6()
 
 
2136
                branch_converter.convert(branch)
 
 
2138
            tree = self.bzrdir.open_workingtree(recommend_upgrade=False)
 
 
2139
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
 
2142
            # TODO: conversions of Branch and Tree should be done by
 
 
2143
            # InterXFormat lookups
 
 
2144
            if (isinstance(tree, workingtree.WorkingTree3) and
 
 
2145
                not isinstance(tree, workingtree_4.WorkingTree4) and
 
 
2146
                isinstance(self.target_format.workingtree_format,
 
 
2147
                    workingtree_4.WorkingTreeFormat4)):
 
 
2148
                workingtree_4.Converter3to4().convert(tree)
 
 
2152
class BzrDirFormatInfo(object):
 
 
2154
    def __init__(self, native, deprecated, hidden):
 
 
2155
        self.deprecated = deprecated
 
 
2156
        self.native = native
 
 
2157
        self.hidden = hidden
 
 
2160
class BzrDirFormatRegistry(registry.Registry):
 
 
2161
    """Registry of user-selectable BzrDir subformats.
 
 
2163
    Differs from BzrDirFormat._control_formats in that it provides sub-formats,
 
 
2164
    e.g. BzrDirMeta1 with weave repository.  Also, it's more user-oriented.
 
 
2167
    def register_metadir(self, key,
 
 
2168
             repository_format, help, native=True, deprecated=False,
 
 
2172
        """Register a metadir subformat.
 
 
2174
        These all use a BzrDirMetaFormat1 bzrdir, but can be parameterized
 
 
2175
        by the Repository format.
 
 
2177
        :param repository_format: The fully-qualified repository format class
 
 
2179
        :param branch_format: Fully-qualified branch format class name as
 
 
2181
        :param tree_format: Fully-qualified tree format class name as
 
 
2184
        # This should be expanded to support setting WorkingTree and Branch
 
 
2185
        # formats, once BzrDirMetaFormat1 supports that.
 
 
2186
        def _load(full_name):
 
 
2187
            mod_name, factory_name = full_name.rsplit('.', 1)
 
 
2189
                mod = __import__(mod_name, globals(), locals(),
 
 
2191
            except ImportError, e:
 
 
2192
                raise ImportError('failed to load %s: %s' % (full_name, e))
 
 
2194
                factory = getattr(mod, factory_name)
 
 
2195
            except AttributeError:
 
 
2196
                raise AttributeError('no factory %s in module %r'
 
 
2201
            bd = BzrDirMetaFormat1()
 
 
2202
            if branch_format is not None:
 
 
2203
                bd.set_branch_format(_load(branch_format))
 
 
2204
            if tree_format is not None:
 
 
2205
                bd.workingtree_format = _load(tree_format)
 
 
2206
            if repository_format is not None:
 
 
2207
                bd.repository_format = _load(repository_format)
 
 
2209
        self.register(key, helper, help, native, deprecated, hidden)
 
 
2211
    def register(self, key, factory, help, native=True, deprecated=False,
 
 
2213
        """Register a BzrDirFormat factory.
 
 
2215
        The factory must be a callable that takes one parameter: the key.
 
 
2216
        It must produce an instance of the BzrDirFormat when called.
 
 
2218
        This function mainly exists to prevent the info object from being
 
 
2221
        registry.Registry.register(self, key, factory, help, 
 
 
2222
            BzrDirFormatInfo(native, deprecated, hidden))
 
 
2224
    def register_lazy(self, key, module_name, member_name, help, native=True,
 
 
2225
                      deprecated=False, hidden=False):
 
 
2226
        registry.Registry.register_lazy(self, key, module_name, member_name, 
 
 
2227
            help, BzrDirFormatInfo(native, deprecated, hidden))
 
 
2229
    def set_default(self, key):
 
 
2230
        """Set the 'default' key to be a clone of the supplied key.
 
 
2232
        This method must be called once and only once.
 
 
2234
        registry.Registry.register(self, 'default', self.get(key), 
 
 
2235
            self.get_help(key), info=self.get_info(key))
 
 
2237
    def set_default_repository(self, key):
 
 
2238
        """Set the FormatRegistry default and Repository default.
 
 
2240
        This is a transitional method while Repository.set_default_format
 
 
2243
        if 'default' in self:
 
 
2244
            self.remove('default')
 
 
2245
        self.set_default(key)
 
 
2246
        format = self.get('default')()
 
 
2247
        assert isinstance(format, BzrDirMetaFormat1)
 
 
2249
    def make_bzrdir(self, key):
 
 
2250
        return self.get(key)()
 
 
2252
    def help_topic(self, topic):
 
 
2253
        output = textwrap.dedent("""\
 
 
2254
            Bazaar directory formats
 
 
2255
            ------------------------
 
 
2257
            These formats can be used for creating branches, working trees, and
 
 
2261
        default_help = self.get_help('default')
 
 
2263
        for key in self.keys():
 
 
2264
            if key == 'default':
 
 
2266
            help = self.get_help(key)
 
 
2267
            if help == default_help:
 
 
2268
                default_realkey = key
 
 
2270
                help_pairs.append((key, help))
 
 
2272
        def wrapped(key, help, info):
 
 
2274
                help = '(native) ' + help
 
 
2275
            return '  %s:\n%s\n\n' % (key, 
 
 
2276
                    textwrap.fill(help, initial_indent='    ', 
 
 
2277
                    subsequent_indent='    '))
 
 
2278
        output += wrapped('%s/default' % default_realkey, default_help,
 
 
2279
                          self.get_info('default'))
 
 
2280
        deprecated_pairs = []
 
 
2281
        for key, help in help_pairs:
 
 
2282
            info = self.get_info(key)
 
 
2285
            elif info.deprecated:
 
 
2286
                deprecated_pairs.append((key, help))
 
 
2288
                output += wrapped(key, help, info)
 
 
2289
        if len(deprecated_pairs) > 0:
 
 
2290
            output += "Deprecated formats\n------------------\n\n"
 
 
2291
            for key, help in deprecated_pairs:
 
 
2292
                info = self.get_info(key)
 
 
2293
                output += wrapped(key, help, info)
 
 
2298
format_registry = BzrDirFormatRegistry()
 
 
2299
format_registry.register('weave', BzrDirFormat6,
 
 
2300
    'Pre-0.8 format.  Slower than knit and does not'
 
 
2301
    ' support checkouts or shared repositories.',
 
 
2303
format_registry.register_metadir('knit',
 
 
2304
    'bzrlib.repofmt.knitrepo.RepositoryFormatKnit1',
 
 
2305
    'Format using knits.  Recommended for interoperation with bzr <= 0.14.',
 
 
2306
    branch_format='bzrlib.branch.BzrBranchFormat5',
 
 
2307
    tree_format='bzrlib.workingtree.WorkingTreeFormat3')
 
 
2308
format_registry.register_metadir('metaweave',
 
 
2309
    'bzrlib.repofmt.weaverepo.RepositoryFormat7',
 
 
2310
    'Transitional format in 0.8.  Slower than knit.',
 
 
2311
    branch_format='bzrlib.branch.BzrBranchFormat5',
 
 
2312
    tree_format='bzrlib.workingtree.WorkingTreeFormat3',
 
 
2314
format_registry.register_metadir('dirstate',
 
 
2315
    'bzrlib.repofmt.knitrepo.RepositoryFormatKnit1',
 
 
2316
    help='New in 0.15: Fast local operations. Compatible with bzr 0.8 and '
 
 
2317
        'above when accessed over the network.',
 
 
2318
    branch_format='bzrlib.branch.BzrBranchFormat5',
 
 
2319
    # this uses bzrlib.workingtree.WorkingTreeFormat4 because importing
 
 
2320
    # directly from workingtree_4 triggers a circular import.
 
 
2321
    tree_format='bzrlib.workingtree.WorkingTreeFormat4',
 
 
2323
format_registry.register_metadir('dirstate-tags',
 
 
2324
    'bzrlib.repofmt.knitrepo.RepositoryFormatKnit1',
 
 
2325
    help='New in 0.15: Fast local operations and improved scaling for '
 
 
2326
        'network operations. Additionally adds support for tags.'
 
 
2327
        ' Incompatible with bzr < 0.15.',
 
 
2328
    branch_format='bzrlib.branch.BzrBranchFormat6',
 
 
2329
    tree_format='bzrlib.workingtree.WorkingTreeFormat4',
 
 
2331
format_registry.register_metadir('dirstate-with-subtree',
 
 
2332
    'bzrlib.repofmt.knitrepo.RepositoryFormatKnit3',
 
 
2333
    help='New in 0.15: Fast local operations and improved scaling for '
 
 
2334
        'network operations. Additionally adds support for versioning nested '
 
 
2335
        'bzr branches. Incompatible with bzr < 0.15.',
 
 
2336
    branch_format='bzrlib.branch.BzrBranchFormat6',
 
 
2337
    tree_format='bzrlib.workingtree.WorkingTreeFormat4',
 
 
2340
format_registry.set_default('dirstate')