/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/bzrdir.py

  • Committer: John Arbash Meinel
  • Date: 2006-11-10 21:06:11 UTC
  • mto: This revision was merged to the branch mainline in revision 2159.
  • Revision ID: john@arbash-meinel.com-20061110210611-ee346404477ecb86
Fix imports to ensure modules are loaded before they are used

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005, 2006 Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
"""BzrDir logic. The BzrDir is the basic control directory used by bzr.
 
18
 
 
19
At format 7 this was split out into Branch, Repository and Checkout control
 
20
directories.
 
21
"""
 
22
 
 
23
# TODO: remove unittest dependency; put that stuff inside the test suite
 
24
 
 
25
# TODO: The Format probe_transport seems a bit redundant with just trying to
 
26
# open the bzrdir. -- mbp
 
27
#
 
28
# TODO: Can we move specific formats into separate modules to make this file
 
29
# smaller?
 
30
 
 
31
from cStringIO import StringIO
 
32
import os
 
33
 
 
34
from bzrlib.lazy_import import lazy_import
 
35
lazy_import(globals(), """
 
36
from copy import deepcopy
 
37
from stat import S_ISDIR
 
38
import unittest
 
39
 
 
40
import bzrlib
 
41
from bzrlib import (
 
42
    errors,
 
43
    lockable_files,
 
44
    lockdir,
 
45
    revision as _mod_revision,
 
46
    repository as _mod_repository,
 
47
    urlutils,
 
48
    xml4,
 
49
    xml5,
 
50
    )
 
51
from bzrlib.osutils import (
 
52
    safe_unicode,
 
53
    sha_strings,
 
54
    sha_string,
 
55
    )
 
56
from bzrlib.store.revision.text import TextRevisionStore
 
57
from bzrlib.store.text import TextStore
 
58
from bzrlib.store.versioned import WeaveStore
 
59
from bzrlib.transactions import WriteTransaction
 
60
from bzrlib.transport import get_transport
 
61
from bzrlib.weave import Weave
 
62
""")
 
63
 
 
64
from bzrlib.trace import mutter
 
65
from bzrlib.transport.local import LocalTransport
 
66
 
 
67
 
 
68
class BzrDir(object):
 
69
    """A .bzr control diretory.
 
70
    
 
71
    BzrDir instances let you create or open any of the things that can be
 
72
    found within .bzr - checkouts, branches and repositories.
 
73
    
 
74
    transport
 
75
        the transport which this bzr dir is rooted at (i.e. file:///.../.bzr/)
 
76
    root_transport
 
77
        a transport connected to the directory this bzr was opened from.
 
78
    """
 
79
 
 
80
    def break_lock(self):
 
81
        """Invoke break_lock on the first object in the bzrdir.
 
82
 
 
83
        If there is a tree, the tree is opened and break_lock() called.
 
84
        Otherwise, branch is tried, and finally repository.
 
85
        """
 
86
        try:
 
87
            thing_to_unlock = self.open_workingtree()
 
88
        except (errors.NotLocalUrl, errors.NoWorkingTree):
 
89
            try:
 
90
                thing_to_unlock = self.open_branch()
 
91
            except errors.NotBranchError:
 
92
                try:
 
93
                    thing_to_unlock = self.open_repository()
 
94
                except errors.NoRepositoryPresent:
 
95
                    return
 
96
        thing_to_unlock.break_lock()
 
97
 
 
98
    def can_convert_format(self):
 
99
        """Return true if this bzrdir is one whose format we can convert from."""
 
100
        return True
 
101
 
 
102
    def check_conversion_target(self, target_format):
 
103
        target_repo_format = target_format.repository_format
 
104
        source_repo_format = self._format.repository_format
 
105
        source_repo_format.check_conversion_target(target_repo_format)
 
106
 
 
107
    @staticmethod
 
108
    def _check_supported(format, allow_unsupported):
 
109
        """Check whether format is a supported format.
 
110
 
 
111
        If allow_unsupported is True, this is a no-op.
 
112
        """
 
113
        if not allow_unsupported and not format.is_supported():
 
114
            # see open_downlevel to open legacy branches.
 
115
            raise errors.UnsupportedFormatError(format=format)
 
116
 
 
117
    def clone(self, url, revision_id=None, basis=None, force_new_repo=False):
 
118
        """Clone this bzrdir and its contents to url verbatim.
 
119
 
 
120
        If urls last component does not exist, it will be created.
 
121
 
 
122
        if revision_id is not None, then the clone operation may tune
 
123
            itself to download less data.
 
124
        :param force_new_repo: Do not use a shared repository for the target 
 
125
                               even if one is available.
 
126
        """
 
127
        self._make_tail(url)
 
128
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
129
        result = self._format.initialize(url)
 
130
        try:
 
131
            local_repo = self.find_repository()
 
132
        except errors.NoRepositoryPresent:
 
133
            local_repo = None
 
134
        if local_repo:
 
135
            # may need to copy content in
 
136
            if force_new_repo:
 
137
                result_repo = local_repo.clone(
 
138
                    result,
 
139
                    revision_id=revision_id,
 
140
                    basis=basis_repo)
 
141
                result_repo.set_make_working_trees(local_repo.make_working_trees())
 
142
            else:
 
143
                try:
 
144
                    result_repo = result.find_repository()
 
145
                    # fetch content this dir needs.
 
146
                    if basis_repo:
 
147
                        # XXX FIXME RBC 20060214 need tests for this when the basis
 
148
                        # is incomplete
 
149
                        result_repo.fetch(basis_repo, revision_id=revision_id)
 
150
                    result_repo.fetch(local_repo, revision_id=revision_id)
 
151
                except errors.NoRepositoryPresent:
 
152
                    # needed to make one anyway.
 
153
                    result_repo = local_repo.clone(
 
154
                        result,
 
155
                        revision_id=revision_id,
 
156
                        basis=basis_repo)
 
157
                    result_repo.set_make_working_trees(local_repo.make_working_trees())
 
158
        # 1 if there is a branch present
 
159
        #   make sure its content is available in the target repository
 
160
        #   clone it.
 
161
        try:
 
162
            self.open_branch().clone(result, revision_id=revision_id)
 
163
        except errors.NotBranchError:
 
164
            pass
 
165
        try:
 
166
            self.open_workingtree().clone(result, basis=basis_tree)
 
167
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
168
            pass
 
169
        return result
 
170
 
 
171
    def _get_basis_components(self, basis):
 
172
        """Retrieve the basis components that are available at basis."""
 
173
        if basis is None:
 
174
            return None, None, None
 
175
        try:
 
176
            basis_tree = basis.open_workingtree()
 
177
            basis_branch = basis_tree.branch
 
178
            basis_repo = basis_branch.repository
 
179
        except (errors.NoWorkingTree, errors.NotLocalUrl):
 
180
            basis_tree = None
 
181
            try:
 
182
                basis_branch = basis.open_branch()
 
183
                basis_repo = basis_branch.repository
 
184
            except errors.NotBranchError:
 
185
                basis_branch = None
 
186
                try:
 
187
                    basis_repo = basis.open_repository()
 
188
                except errors.NoRepositoryPresent:
 
189
                    basis_repo = None
 
190
        return basis_repo, basis_branch, basis_tree
 
191
 
 
192
    # TODO: This should be given a Transport, and should chdir up; otherwise
 
193
    # this will open a new connection.
 
194
    def _make_tail(self, url):
 
195
        head, tail = urlutils.split(url)
 
196
        if tail and tail != '.':
 
197
            t = get_transport(head)
 
198
            try:
 
199
                t.mkdir(tail)
 
200
            except errors.FileExists:
 
201
                pass
 
202
 
 
203
    # TODO: Should take a Transport
 
204
    @classmethod
 
205
    def create(cls, base):
 
206
        """Create a new BzrDir at the url 'base'.
 
207
        
 
208
        This will call the current default formats initialize with base
 
209
        as the only parameter.
 
210
 
 
211
        If you need a specific format, consider creating an instance
 
212
        of that and calling initialize().
 
213
        """
 
214
        if cls is not BzrDir:
 
215
            raise AssertionError("BzrDir.create always creates the default format, "
 
216
                    "not one of %r" % cls)
 
217
        head, tail = urlutils.split(base)
 
218
        if tail and tail != '.':
 
219
            t = get_transport(head)
 
220
            try:
 
221
                t.mkdir(tail)
 
222
            except errors.FileExists:
 
223
                pass
 
224
        return BzrDirFormat.get_default_format().initialize(safe_unicode(base))
 
225
 
 
226
    def create_branch(self):
 
227
        """Create a branch in this BzrDir.
 
228
 
 
229
        The bzrdirs format will control what branch format is created.
 
230
        For more control see BranchFormatXX.create(a_bzrdir).
 
231
        """
 
232
        raise NotImplementedError(self.create_branch)
 
233
 
 
234
    @staticmethod
 
235
    def create_branch_and_repo(base, force_new_repo=False):
 
236
        """Create a new BzrDir, Branch and Repository at the url 'base'.
 
237
 
 
238
        This will use the current default BzrDirFormat, and use whatever 
 
239
        repository format that that uses via bzrdir.create_branch and
 
240
        create_repository. If a shared repository is available that is used
 
241
        preferentially.
 
242
 
 
243
        The created Branch object is returned.
 
244
 
 
245
        :param base: The URL to create the branch at.
 
246
        :param force_new_repo: If True a new repository is always created.
 
247
        """
 
248
        bzrdir = BzrDir.create(base)
 
249
        bzrdir._find_or_create_repository(force_new_repo)
 
250
        return bzrdir.create_branch()
 
251
 
 
252
    def _find_or_create_repository(self, force_new_repo):
 
253
        """Create a new repository if needed, returning the repository."""
 
254
        if force_new_repo:
 
255
            return self.create_repository()
 
256
        try:
 
257
            return self.find_repository()
 
258
        except errors.NoRepositoryPresent:
 
259
            return self.create_repository()
 
260
        
 
261
    @staticmethod
 
262
    def create_branch_convenience(base, force_new_repo=False,
 
263
                                  force_new_tree=None, format=None):
 
264
        """Create a new BzrDir, Branch and Repository at the url 'base'.
 
265
 
 
266
        This is a convenience function - it will use an existing repository
 
267
        if possible, can be told explicitly whether to create a working tree or
 
268
        not.
 
269
 
 
270
        This will use the current default BzrDirFormat, and use whatever 
 
271
        repository format that that uses via bzrdir.create_branch and
 
272
        create_repository. If a shared repository is available that is used
 
273
        preferentially. Whatever repository is used, its tree creation policy
 
274
        is followed.
 
275
 
 
276
        The created Branch object is returned.
 
277
        If a working tree cannot be made due to base not being a file:// url,
 
278
        no error is raised unless force_new_tree is True, in which case no 
 
279
        data is created on disk and NotLocalUrl is raised.
 
280
 
 
281
        :param base: The URL to create the branch at.
 
282
        :param force_new_repo: If True a new repository is always created.
 
283
        :param force_new_tree: If True or False force creation of a tree or 
 
284
                               prevent such creation respectively.
 
285
        :param format: Override for the for the bzrdir format to create
 
286
        """
 
287
        if force_new_tree:
 
288
            # check for non local urls
 
289
            t = get_transport(safe_unicode(base))
 
290
            if not isinstance(t, LocalTransport):
 
291
                raise errors.NotLocalUrl(base)
 
292
        if format is None:
 
293
            bzrdir = BzrDir.create(base)
 
294
        else:
 
295
            bzrdir = format.initialize(base)
 
296
        repo = bzrdir._find_or_create_repository(force_new_repo)
 
297
        result = bzrdir.create_branch()
 
298
        if force_new_tree or (repo.make_working_trees() and 
 
299
                              force_new_tree is None):
 
300
            try:
 
301
                bzrdir.create_workingtree()
 
302
            except errors.NotLocalUrl:
 
303
                pass
 
304
        return result
 
305
        
 
306
    @staticmethod
 
307
    def create_repository(base, shared=False):
 
308
        """Create a new BzrDir and Repository at the url 'base'.
 
309
 
 
310
        This will use the current default BzrDirFormat, and use whatever 
 
311
        repository format that that uses for bzrdirformat.create_repository.
 
312
 
 
313
        :param shared: Create a shared repository rather than a standalone
 
314
                       repository.
 
315
        The Repository object is returned.
 
316
 
 
317
        This must be overridden as an instance method in child classes, where
 
318
        it should take no parameters and construct whatever repository format
 
319
        that child class desires.
 
320
        """
 
321
        bzrdir = BzrDir.create(base)
 
322
        return bzrdir.create_repository(shared)
 
323
 
 
324
    @staticmethod
 
325
    def create_standalone_workingtree(base):
 
326
        """Create a new BzrDir, WorkingTree, Branch and Repository at 'base'.
 
327
 
 
328
        'base' must be a local path or a file:// url.
 
329
 
 
330
        This will use the current default BzrDirFormat, and use whatever 
 
331
        repository format that that uses for bzrdirformat.create_workingtree,
 
332
        create_branch and create_repository.
 
333
 
 
334
        :return: The WorkingTree object.
 
335
        """
 
336
        t = get_transport(safe_unicode(base))
 
337
        if not isinstance(t, LocalTransport):
 
338
            raise errors.NotLocalUrl(base)
 
339
        bzrdir = BzrDir.create_branch_and_repo(safe_unicode(base),
 
340
                                               force_new_repo=True).bzrdir
 
341
        return bzrdir.create_workingtree()
 
342
 
 
343
    def create_workingtree(self, revision_id=None):
 
344
        """Create a working tree at this BzrDir.
 
345
        
 
346
        revision_id: create it as of this revision id.
 
347
        """
 
348
        raise NotImplementedError(self.create_workingtree)
 
349
 
 
350
    def destroy_workingtree(self):
 
351
        """Destroy the working tree at this BzrDir.
 
352
 
 
353
        Formats that do not support this may raise UnsupportedOperation.
 
354
        """
 
355
        raise NotImplementedError(self.destroy_workingtree)
 
356
 
 
357
    def destroy_workingtree_metadata(self):
 
358
        """Destroy the control files for the working tree at this BzrDir.
 
359
 
 
360
        The contents of working tree files are not affected.
 
361
        Formats that do not support this may raise UnsupportedOperation.
 
362
        """
 
363
        raise NotImplementedError(self.destroy_workingtree_metadata)
 
364
 
 
365
    def find_repository(self):
 
366
        """Find the repository that should be used for a_bzrdir.
 
367
 
 
368
        This does not require a branch as we use it to find the repo for
 
369
        new branches as well as to hook existing branches up to their
 
370
        repository.
 
371
        """
 
372
        try:
 
373
            return self.open_repository()
 
374
        except errors.NoRepositoryPresent:
 
375
            pass
 
376
        next_transport = self.root_transport.clone('..')
 
377
        while True:
 
378
            # find the next containing bzrdir
 
379
            try:
 
380
                found_bzrdir = BzrDir.open_containing_from_transport(
 
381
                    next_transport)[0]
 
382
            except errors.NotBranchError:
 
383
                # none found
 
384
                raise errors.NoRepositoryPresent(self)
 
385
            # does it have a repository ?
 
386
            try:
 
387
                repository = found_bzrdir.open_repository()
 
388
            except errors.NoRepositoryPresent:
 
389
                next_transport = found_bzrdir.root_transport.clone('..')
 
390
                if (found_bzrdir.root_transport.base == next_transport.base):
 
391
                    # top of the file system
 
392
                    break
 
393
                else:
 
394
                    continue
 
395
            if ((found_bzrdir.root_transport.base == 
 
396
                 self.root_transport.base) or repository.is_shared()):
 
397
                return repository
 
398
            else:
 
399
                raise errors.NoRepositoryPresent(self)
 
400
        raise errors.NoRepositoryPresent(self)
 
401
 
 
402
    def get_branch_transport(self, branch_format):
 
403
        """Get the transport for use by branch format in this BzrDir.
 
404
 
 
405
        Note that bzr dirs that do not support format strings will raise
 
406
        IncompatibleFormat if the branch format they are given has
 
407
        a format string, and vice versa.
 
408
 
 
409
        If branch_format is None, the transport is returned with no 
 
410
        checking. if it is not None, then the returned transport is
 
411
        guaranteed to point to an existing directory ready for use.
 
412
        """
 
413
        raise NotImplementedError(self.get_branch_transport)
 
414
        
 
415
    def get_repository_transport(self, repository_format):
 
416
        """Get the transport for use by repository format in this BzrDir.
 
417
 
 
418
        Note that bzr dirs that do not support format strings will raise
 
419
        IncompatibleFormat if the repository format they are given has
 
420
        a format string, and vice versa.
 
421
 
 
422
        If repository_format is None, the transport is returned with no 
 
423
        checking. if it is not None, then the returned transport is
 
424
        guaranteed to point to an existing directory ready for use.
 
425
        """
 
426
        raise NotImplementedError(self.get_repository_transport)
 
427
        
 
428
    def get_workingtree_transport(self, tree_format):
 
429
        """Get the transport for use by workingtree format in this BzrDir.
 
430
 
 
431
        Note that bzr dirs that do not support format strings will raise
 
432
        IncompatibleFormat if the workingtree format they are given has
 
433
        a format string, and vice versa.
 
434
 
 
435
        If workingtree_format is None, the transport is returned with no 
 
436
        checking. if it is not None, then the returned transport is
 
437
        guaranteed to point to an existing directory ready for use.
 
438
        """
 
439
        raise NotImplementedError(self.get_workingtree_transport)
 
440
        
 
441
    def __init__(self, _transport, _format):
 
442
        """Initialize a Bzr control dir object.
 
443
        
 
444
        Only really common logic should reside here, concrete classes should be
 
445
        made with varying behaviours.
 
446
 
 
447
        :param _format: the format that is creating this BzrDir instance.
 
448
        :param _transport: the transport this dir is based at.
 
449
        """
 
450
        self._format = _format
 
451
        self.transport = _transport.clone('.bzr')
 
452
        self.root_transport = _transport
 
453
 
 
454
    def is_control_filename(self, filename):
 
455
        """True if filename is the name of a path which is reserved for bzrdir's.
 
456
        
 
457
        :param filename: A filename within the root transport of this bzrdir.
 
458
 
 
459
        This is true IF and ONLY IF the filename is part of the namespace reserved
 
460
        for bzr control dirs. Currently this is the '.bzr' directory in the root
 
461
        of the root_transport. it is expected that plugins will need to extend
 
462
        this in the future - for instance to make bzr talk with svn working
 
463
        trees.
 
464
        """
 
465
        # this might be better on the BzrDirFormat class because it refers to 
 
466
        # all the possible bzrdir disk formats. 
 
467
        # This method is tested via the workingtree is_control_filename tests- 
 
468
        # it was extracted from WorkingTree.is_control_filename. If the methods
 
469
        # contract is extended beyond the current trivial  implementation please
 
470
        # add new tests for it to the appropriate place.
 
471
        return filename == '.bzr' or filename.startswith('.bzr/')
 
472
 
 
473
    def needs_format_conversion(self, format=None):
 
474
        """Return true if this bzrdir needs convert_format run on it.
 
475
        
 
476
        For instance, if the repository format is out of date but the 
 
477
        branch and working tree are not, this should return True.
 
478
 
 
479
        :param format: Optional parameter indicating a specific desired
 
480
                       format we plan to arrive at.
 
481
        """
 
482
        raise NotImplementedError(self.needs_format_conversion)
 
483
 
 
484
    @staticmethod
 
485
    def open_unsupported(base):
 
486
        """Open a branch which is not supported."""
 
487
        return BzrDir.open(base, _unsupported=True)
 
488
        
 
489
    @staticmethod
 
490
    def open(base, _unsupported=False):
 
491
        """Open an existing bzrdir, rooted at 'base' (url)
 
492
        
 
493
        _unsupported is a private parameter to the BzrDir class.
 
494
        """
 
495
        t = get_transport(base)
 
496
        return BzrDir.open_from_transport(t, _unsupported=_unsupported)
 
497
 
 
498
    @staticmethod
 
499
    def open_from_transport(transport, _unsupported=False):
 
500
        """Open a bzrdir within a particular directory.
 
501
 
 
502
        :param transport: Transport containing the bzrdir.
 
503
        :param _unsupported: private.
 
504
        """
 
505
        format = BzrDirFormat.find_format(transport)
 
506
        BzrDir._check_supported(format, _unsupported)
 
507
        return format.open(transport, _found=True)
 
508
 
 
509
    def open_branch(self, unsupported=False):
 
510
        """Open the branch object at this BzrDir if one is present.
 
511
 
 
512
        If unsupported is True, then no longer supported branch formats can
 
513
        still be opened.
 
514
        
 
515
        TODO: static convenience version of this?
 
516
        """
 
517
        raise NotImplementedError(self.open_branch)
 
518
 
 
519
    @staticmethod
 
520
    def open_containing(url):
 
521
        """Open an existing branch which contains url.
 
522
        
 
523
        :param url: url to search from.
 
524
        See open_containing_from_transport for more detail.
 
525
        """
 
526
        return BzrDir.open_containing_from_transport(get_transport(url))
 
527
    
 
528
    @staticmethod
 
529
    def open_containing_from_transport(a_transport):
 
530
        """Open an existing branch which contains a_transport.base
 
531
 
 
532
        This probes for a branch at a_transport, and searches upwards from there.
 
533
 
 
534
        Basically we keep looking up until we find the control directory or
 
535
        run into the root.  If there isn't one, raises NotBranchError.
 
536
        If there is one and it is either an unrecognised format or an unsupported 
 
537
        format, UnknownFormatError or UnsupportedFormatError are raised.
 
538
        If there is one, it is returned, along with the unused portion of url.
 
539
 
 
540
        :return: The BzrDir that contains the path, and a Unicode path 
 
541
                for the rest of the URL.
 
542
        """
 
543
        # this gets the normalised url back. I.e. '.' -> the full path.
 
544
        url = a_transport.base
 
545
        while True:
 
546
            try:
 
547
                result = BzrDir.open_from_transport(a_transport)
 
548
                return result, urlutils.unescape(a_transport.relpath(url))
 
549
            except errors.NotBranchError, e:
 
550
                pass
 
551
            new_t = a_transport.clone('..')
 
552
            if new_t.base == a_transport.base:
 
553
                # reached the root, whatever that may be
 
554
                raise errors.NotBranchError(path=url)
 
555
            a_transport = new_t
 
556
 
 
557
    def open_repository(self, _unsupported=False):
 
558
        """Open the repository object at this BzrDir if one is present.
 
559
 
 
560
        This will not follow the Branch object pointer - its strictly a direct
 
561
        open facility. Most client code should use open_branch().repository to
 
562
        get at a repository.
 
563
 
 
564
        _unsupported is a private parameter, not part of the api.
 
565
        TODO: static convenience version of this?
 
566
        """
 
567
        raise NotImplementedError(self.open_repository)
 
568
 
 
569
    def open_workingtree(self, _unsupported=False):
 
570
        """Open the workingtree object at this BzrDir if one is present.
 
571
        
 
572
        TODO: static convenience version of this?
 
573
        """
 
574
        raise NotImplementedError(self.open_workingtree)
 
575
 
 
576
    def has_branch(self):
 
577
        """Tell if this bzrdir contains a branch.
 
578
        
 
579
        Note: if you're going to open the branch, you should just go ahead
 
580
        and try, and not ask permission first.  (This method just opens the 
 
581
        branch and discards it, and that's somewhat expensive.) 
 
582
        """
 
583
        try:
 
584
            self.open_branch()
 
585
            return True
 
586
        except errors.NotBranchError:
 
587
            return False
 
588
 
 
589
    def has_workingtree(self):
 
590
        """Tell if this bzrdir contains a working tree.
 
591
 
 
592
        This will still raise an exception if the bzrdir has a workingtree that
 
593
        is remote & inaccessible.
 
594
        
 
595
        Note: if you're going to open the working tree, you should just go ahead
 
596
        and try, and not ask permission first.  (This method just opens the 
 
597
        workingtree and discards it, and that's somewhat expensive.) 
 
598
        """
 
599
        try:
 
600
            self.open_workingtree()
 
601
            return True
 
602
        except errors.NoWorkingTree:
 
603
            return False
 
604
 
 
605
    def cloning_metadir(self, basis=None):
 
606
        """Produce a metadir suitable for cloning with"""
 
607
        def related_repository(bzrdir):
 
608
            try:
 
609
                branch = bzrdir.open_branch()
 
610
                return branch.repository
 
611
            except errors.NotBranchError:
 
612
                source_branch = None
 
613
                return bzrdir.open_repository()
 
614
        result_format = self._format.__class__()
 
615
        try:
 
616
            try:
 
617
                source_repository = related_repository(self)
 
618
            except errors.NoRepositoryPresent:
 
619
                if basis is None:
 
620
                    raise
 
621
                source_repository = related_repository(self)
 
622
            result_format.repository_format = source_repository._format
 
623
        except errors.NoRepositoryPresent:
 
624
            pass
 
625
        return result_format
 
626
 
 
627
    def sprout(self, url, revision_id=None, basis=None, force_new_repo=False):
 
628
        """Create a copy of this bzrdir prepared for use as a new line of
 
629
        development.
 
630
 
 
631
        If urls last component does not exist, it will be created.
 
632
 
 
633
        Attributes related to the identity of the source branch like
 
634
        branch nickname will be cleaned, a working tree is created
 
635
        whether one existed before or not; and a local branch is always
 
636
        created.
 
637
 
 
638
        if revision_id is not None, then the clone operation may tune
 
639
            itself to download less data.
 
640
        """
 
641
        self._make_tail(url)
 
642
        cloning_format = self.cloning_metadir(basis)
 
643
        result = cloning_format.initialize(url)
 
644
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
645
        try:
 
646
            source_branch = self.open_branch()
 
647
            source_repository = source_branch.repository
 
648
        except errors.NotBranchError:
 
649
            source_branch = None
 
650
            try:
 
651
                source_repository = self.open_repository()
 
652
            except errors.NoRepositoryPresent:
 
653
                # copy the entire basis one if there is one
 
654
                # but there is no repository.
 
655
                source_repository = basis_repo
 
656
        if force_new_repo:
 
657
            result_repo = None
 
658
        else:
 
659
            try:
 
660
                result_repo = result.find_repository()
 
661
            except errors.NoRepositoryPresent:
 
662
                result_repo = None
 
663
        if source_repository is None and result_repo is not None:
 
664
            pass
 
665
        elif source_repository is None and result_repo is None:
 
666
            # no repo available, make a new one
 
667
            result.create_repository()
 
668
        elif source_repository is not None and result_repo is None:
 
669
            # have source, and want to make a new target repo
 
670
            # we don't clone the repo because that preserves attributes
 
671
            # like is_shared(), and we have not yet implemented a 
 
672
            # repository sprout().
 
673
            result_repo = result.create_repository()
 
674
        if result_repo is not None:
 
675
            # fetch needed content into target.
 
676
            if basis_repo:
 
677
                # XXX FIXME RBC 20060214 need tests for this when the basis
 
678
                # is incomplete
 
679
                result_repo.fetch(basis_repo, revision_id=revision_id)
 
680
            if source_repository is not None:
 
681
                result_repo.fetch(source_repository, revision_id=revision_id)
 
682
        if source_branch is not None:
 
683
            source_branch.sprout(result, revision_id=revision_id)
 
684
        else:
 
685
            result.create_branch()
 
686
        # TODO: jam 20060426 we probably need a test in here in the
 
687
        #       case that the newly sprouted branch is a remote one
 
688
        if result_repo is None or result_repo.make_working_trees():
 
689
            wt = result.create_workingtree()
 
690
            if wt.inventory.root is None:
 
691
                try:
 
692
                    wt.set_root_id(self.open_workingtree.get_root_id())
 
693
                except errors.NoWorkingTree:
 
694
                    pass
 
695
        return result
 
696
 
 
697
 
 
698
class BzrDirPreSplitOut(BzrDir):
 
699
    """A common class for the all-in-one formats."""
 
700
 
 
701
    def __init__(self, _transport, _format):
 
702
        """See BzrDir.__init__."""
 
703
        super(BzrDirPreSplitOut, self).__init__(_transport, _format)
 
704
        assert self._format._lock_class == lockable_files.TransportLock
 
705
        assert self._format._lock_file_name == 'branch-lock'
 
706
        self._control_files = lockable_files.LockableFiles(
 
707
                                            self.get_branch_transport(None),
 
708
                                            self._format._lock_file_name,
 
709
                                            self._format._lock_class)
 
710
 
 
711
    def break_lock(self):
 
712
        """Pre-splitout bzrdirs do not suffer from stale locks."""
 
713
        raise NotImplementedError(self.break_lock)
 
714
 
 
715
    def clone(self, url, revision_id=None, basis=None, force_new_repo=False):
 
716
        """See BzrDir.clone()."""
 
717
        from bzrlib.workingtree import WorkingTreeFormat2
 
718
        self._make_tail(url)
 
719
        result = self._format._initialize_for_clone(url)
 
720
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
721
        self.open_repository().clone(result, revision_id=revision_id, basis=basis_repo)
 
722
        from_branch = self.open_branch()
 
723
        from_branch.clone(result, revision_id=revision_id)
 
724
        try:
 
725
            self.open_workingtree().clone(result, basis=basis_tree)
 
726
        except errors.NotLocalUrl:
 
727
            # make a new one, this format always has to have one.
 
728
            try:
 
729
                WorkingTreeFormat2().initialize(result)
 
730
            except errors.NotLocalUrl:
 
731
                # but we cannot do it for remote trees.
 
732
                to_branch = result.open_branch()
 
733
                WorkingTreeFormat2().stub_initialize_remote(to_branch.control_files)
 
734
        return result
 
735
 
 
736
    def create_branch(self):
 
737
        """See BzrDir.create_branch."""
 
738
        return self.open_branch()
 
739
 
 
740
    def create_repository(self, shared=False):
 
741
        """See BzrDir.create_repository."""
 
742
        if shared:
 
743
            raise errors.IncompatibleFormat('shared repository', self._format)
 
744
        return self.open_repository()
 
745
 
 
746
    def create_workingtree(self, revision_id=None):
 
747
        """See BzrDir.create_workingtree."""
 
748
        # this looks buggy but is not -really-
 
749
        # clone and sprout will have set the revision_id
 
750
        # and that will have set it for us, its only
 
751
        # specific uses of create_workingtree in isolation
 
752
        # that can do wonky stuff here, and that only
 
753
        # happens for creating checkouts, which cannot be 
 
754
        # done on this format anyway. So - acceptable wart.
 
755
        result = self.open_workingtree()
 
756
        if revision_id is not None:
 
757
            if revision_id == _mod_revision.NULL_REVISION:
 
758
                result.set_parent_ids([])
 
759
            else:
 
760
                result.set_parent_ids([revision_id])
 
761
        return result
 
762
 
 
763
    def destroy_workingtree(self):
 
764
        """See BzrDir.destroy_workingtree."""
 
765
        raise errors.UnsupportedOperation(self.destroy_workingtree, self)
 
766
 
 
767
    def destroy_workingtree_metadata(self):
 
768
        """See BzrDir.destroy_workingtree_metadata."""
 
769
        raise errors.UnsupportedOperation(self.destroy_workingtree_metadata, 
 
770
                                          self)
 
771
 
 
772
    def get_branch_transport(self, branch_format):
 
773
        """See BzrDir.get_branch_transport()."""
 
774
        if branch_format is None:
 
775
            return self.transport
 
776
        try:
 
777
            branch_format.get_format_string()
 
778
        except NotImplementedError:
 
779
            return self.transport
 
780
        raise errors.IncompatibleFormat(branch_format, self._format)
 
781
 
 
782
    def get_repository_transport(self, repository_format):
 
783
        """See BzrDir.get_repository_transport()."""
 
784
        if repository_format is None:
 
785
            return self.transport
 
786
        try:
 
787
            repository_format.get_format_string()
 
788
        except NotImplementedError:
 
789
            return self.transport
 
790
        raise errors.IncompatibleFormat(repository_format, self._format)
 
791
 
 
792
    def get_workingtree_transport(self, workingtree_format):
 
793
        """See BzrDir.get_workingtree_transport()."""
 
794
        if workingtree_format is None:
 
795
            return self.transport
 
796
        try:
 
797
            workingtree_format.get_format_string()
 
798
        except NotImplementedError:
 
799
            return self.transport
 
800
        raise errors.IncompatibleFormat(workingtree_format, self._format)
 
801
 
 
802
    def needs_format_conversion(self, format=None):
 
803
        """See BzrDir.needs_format_conversion()."""
 
804
        # if the format is not the same as the system default,
 
805
        # an upgrade is needed.
 
806
        if format is None:
 
807
            format = BzrDirFormat.get_default_format()
 
808
        return not isinstance(self._format, format.__class__)
 
809
 
 
810
    def open_branch(self, unsupported=False):
 
811
        """See BzrDir.open_branch."""
 
812
        from bzrlib.branch import BzrBranchFormat4
 
813
        format = BzrBranchFormat4()
 
814
        self._check_supported(format, unsupported)
 
815
        return format.open(self, _found=True)
 
816
 
 
817
    def sprout(self, url, revision_id=None, basis=None, force_new_repo=False):
 
818
        """See BzrDir.sprout()."""
 
819
        from bzrlib.workingtree import WorkingTreeFormat2
 
820
        self._make_tail(url)
 
821
        result = self._format._initialize_for_clone(url)
 
822
        basis_repo, basis_branch, basis_tree = self._get_basis_components(basis)
 
823
        try:
 
824
            self.open_repository().clone(result, revision_id=revision_id, basis=basis_repo)
 
825
        except errors.NoRepositoryPresent:
 
826
            pass
 
827
        try:
 
828
            self.open_branch().sprout(result, revision_id=revision_id)
 
829
        except errors.NotBranchError:
 
830
            pass
 
831
        # we always want a working tree
 
832
        WorkingTreeFormat2().initialize(result)
 
833
        return result
 
834
 
 
835
 
 
836
class BzrDir4(BzrDirPreSplitOut):
 
837
    """A .bzr version 4 control object.
 
838
    
 
839
    This is a deprecated format and may be removed after sept 2006.
 
840
    """
 
841
 
 
842
    def create_repository(self, shared=False):
 
843
        """See BzrDir.create_repository."""
 
844
        return self._format.repository_format.initialize(self, shared)
 
845
 
 
846
    def needs_format_conversion(self, format=None):
 
847
        """Format 4 dirs are always in need of conversion."""
 
848
        return True
 
849
 
 
850
    def open_repository(self):
 
851
        """See BzrDir.open_repository."""
 
852
        from bzrlib.repository import RepositoryFormat4
 
853
        return RepositoryFormat4().open(self, _found=True)
 
854
 
 
855
 
 
856
class BzrDir5(BzrDirPreSplitOut):
 
857
    """A .bzr version 5 control object.
 
858
 
 
859
    This is a deprecated format and may be removed after sept 2006.
 
860
    """
 
861
 
 
862
    def open_repository(self):
 
863
        """See BzrDir.open_repository."""
 
864
        from bzrlib.repository import RepositoryFormat5
 
865
        return RepositoryFormat5().open(self, _found=True)
 
866
 
 
867
    def open_workingtree(self, _unsupported=False):
 
868
        """See BzrDir.create_workingtree."""
 
869
        from bzrlib.workingtree import WorkingTreeFormat2
 
870
        return WorkingTreeFormat2().open(self, _found=True)
 
871
 
 
872
 
 
873
class BzrDir6(BzrDirPreSplitOut):
 
874
    """A .bzr version 6 control object.
 
875
 
 
876
    This is a deprecated format and may be removed after sept 2006.
 
877
    """
 
878
 
 
879
    def open_repository(self):
 
880
        """See BzrDir.open_repository."""
 
881
        from bzrlib.repository import RepositoryFormat6
 
882
        return RepositoryFormat6().open(self, _found=True)
 
883
 
 
884
    def open_workingtree(self, _unsupported=False):
 
885
        """See BzrDir.create_workingtree."""
 
886
        from bzrlib.workingtree import WorkingTreeFormat2
 
887
        return WorkingTreeFormat2().open(self, _found=True)
 
888
 
 
889
 
 
890
class BzrDirMeta1(BzrDir):
 
891
    """A .bzr meta version 1 control object.
 
892
    
 
893
    This is the first control object where the 
 
894
    individual aspects are really split out: there are separate repository,
 
895
    workingtree and branch subdirectories and any subset of the three can be
 
896
    present within a BzrDir.
 
897
    """
 
898
 
 
899
    def can_convert_format(self):
 
900
        """See BzrDir.can_convert_format()."""
 
901
        return True
 
902
 
 
903
    def create_branch(self):
 
904
        """See BzrDir.create_branch."""
 
905
        from bzrlib.branch import BranchFormat
 
906
        return BranchFormat.get_default_format().initialize(self)
 
907
 
 
908
    def create_repository(self, shared=False):
 
909
        """See BzrDir.create_repository."""
 
910
        return self._format.repository_format.initialize(self, shared)
 
911
 
 
912
    def create_workingtree(self, revision_id=None):
 
913
        """See BzrDir.create_workingtree."""
 
914
        from bzrlib.workingtree import WorkingTreeFormat
 
915
        return WorkingTreeFormat.get_default_format().initialize(self, revision_id)
 
916
 
 
917
    def destroy_workingtree(self):
 
918
        """See BzrDir.destroy_workingtree."""
 
919
        wt = self.open_workingtree()
 
920
        repository = wt.branch.repository
 
921
        empty = repository.revision_tree(_mod_revision.NULL_REVISION)
 
922
        wt.revert([], old_tree=empty)
 
923
        self.destroy_workingtree_metadata()
 
924
 
 
925
    def destroy_workingtree_metadata(self):
 
926
        self.transport.delete_tree('checkout')
 
927
 
 
928
    def _get_mkdir_mode(self):
 
929
        """Figure out the mode to use when creating a bzrdir subdir."""
 
930
        temp_control = lockable_files.LockableFiles(self.transport, '',
 
931
                                     lockable_files.TransportLock)
 
932
        return temp_control._dir_mode
 
933
 
 
934
    def get_branch_transport(self, branch_format):
 
935
        """See BzrDir.get_branch_transport()."""
 
936
        if branch_format is None:
 
937
            return self.transport.clone('branch')
 
938
        try:
 
939
            branch_format.get_format_string()
 
940
        except NotImplementedError:
 
941
            raise errors.IncompatibleFormat(branch_format, self._format)
 
942
        try:
 
943
            self.transport.mkdir('branch', mode=self._get_mkdir_mode())
 
944
        except errors.FileExists:
 
945
            pass
 
946
        return self.transport.clone('branch')
 
947
 
 
948
    def get_repository_transport(self, repository_format):
 
949
        """See BzrDir.get_repository_transport()."""
 
950
        if repository_format is None:
 
951
            return self.transport.clone('repository')
 
952
        try:
 
953
            repository_format.get_format_string()
 
954
        except NotImplementedError:
 
955
            raise errors.IncompatibleFormat(repository_format, self._format)
 
956
        try:
 
957
            self.transport.mkdir('repository', mode=self._get_mkdir_mode())
 
958
        except errors.FileExists:
 
959
            pass
 
960
        return self.transport.clone('repository')
 
961
 
 
962
    def get_workingtree_transport(self, workingtree_format):
 
963
        """See BzrDir.get_workingtree_transport()."""
 
964
        if workingtree_format is None:
 
965
            return self.transport.clone('checkout')
 
966
        try:
 
967
            workingtree_format.get_format_string()
 
968
        except NotImplementedError:
 
969
            raise errors.IncompatibleFormat(workingtree_format, self._format)
 
970
        try:
 
971
            self.transport.mkdir('checkout', mode=self._get_mkdir_mode())
 
972
        except errors.FileExists:
 
973
            pass
 
974
        return self.transport.clone('checkout')
 
975
 
 
976
    def needs_format_conversion(self, format=None):
 
977
        """See BzrDir.needs_format_conversion()."""
 
978
        if format is None:
 
979
            format = BzrDirFormat.get_default_format()
 
980
        if not isinstance(self._format, format.__class__):
 
981
            # it is not a meta dir format, conversion is needed.
 
982
            return True
 
983
        # we might want to push this down to the repository?
 
984
        try:
 
985
            if not isinstance(self.open_repository()._format,
 
986
                              format.repository_format.__class__):
 
987
                # the repository needs an upgrade.
 
988
                return True
 
989
        except errors.NoRepositoryPresent:
 
990
            pass
 
991
        # currently there are no other possible conversions for meta1 formats.
 
992
        return False
 
993
 
 
994
    def open_branch(self, unsupported=False):
 
995
        """See BzrDir.open_branch."""
 
996
        from bzrlib.branch import BranchFormat
 
997
        format = BranchFormat.find_format(self)
 
998
        self._check_supported(format, unsupported)
 
999
        return format.open(self, _found=True)
 
1000
 
 
1001
    def open_repository(self, unsupported=False):
 
1002
        """See BzrDir.open_repository."""
 
1003
        from bzrlib.repository import RepositoryFormat
 
1004
        format = RepositoryFormat.find_format(self)
 
1005
        self._check_supported(format, unsupported)
 
1006
        return format.open(self, _found=True)
 
1007
 
 
1008
    def open_workingtree(self, unsupported=False):
 
1009
        """See BzrDir.open_workingtree."""
 
1010
        from bzrlib.workingtree import WorkingTreeFormat
 
1011
        format = WorkingTreeFormat.find_format(self)
 
1012
        self._check_supported(format, unsupported)
 
1013
        return format.open(self, _found=True)
 
1014
 
 
1015
 
 
1016
class BzrDirFormat(object):
 
1017
    """An encapsulation of the initialization and open routines for a format.
 
1018
 
 
1019
    Formats provide three things:
 
1020
     * An initialization routine,
 
1021
     * a format string,
 
1022
     * an open routine.
 
1023
 
 
1024
    Formats are placed in an dict by their format string for reference 
 
1025
    during bzrdir opening. These should be subclasses of BzrDirFormat
 
1026
    for consistency.
 
1027
 
 
1028
    Once a format is deprecated, just deprecate the initialize and open
 
1029
    methods on the format class. Do not deprecate the object, as the 
 
1030
    object will be created every system load.
 
1031
    """
 
1032
 
 
1033
    _default_format = None
 
1034
    """The default format used for new .bzr dirs."""
 
1035
 
 
1036
    _formats = {}
 
1037
    """The known formats."""
 
1038
 
 
1039
    _control_formats = []
 
1040
    """The registered control formats - .bzr, ....
 
1041
    
 
1042
    This is a list of BzrDirFormat objects.
 
1043
    """
 
1044
 
 
1045
    _lock_file_name = 'branch-lock'
 
1046
 
 
1047
    # _lock_class must be set in subclasses to the lock type, typ.
 
1048
    # TransportLock or LockDir
 
1049
 
 
1050
    @classmethod
 
1051
    def find_format(klass, transport):
 
1052
        """Return the format present at transport."""
 
1053
        for format in klass._control_formats:
 
1054
            try:
 
1055
                return format.probe_transport(transport)
 
1056
            except errors.NotBranchError:
 
1057
                # this format does not find a control dir here.
 
1058
                pass
 
1059
        raise errors.NotBranchError(path=transport.base)
 
1060
 
 
1061
    @classmethod
 
1062
    def probe_transport(klass, transport):
 
1063
        """Return the .bzrdir style transport present at URL."""
 
1064
        try:
 
1065
            format_string = transport.get(".bzr/branch-format").read()
 
1066
        except errors.NoSuchFile:
 
1067
            raise errors.NotBranchError(path=transport.base)
 
1068
 
 
1069
        try:
 
1070
            return klass._formats[format_string]
 
1071
        except KeyError:
 
1072
            raise errors.UnknownFormatError(format=format_string)
 
1073
 
 
1074
    @classmethod
 
1075
    def get_default_format(klass):
 
1076
        """Return the current default format."""
 
1077
        return klass._default_format
 
1078
 
 
1079
    def get_format_string(self):
 
1080
        """Return the ASCII format string that identifies this format."""
 
1081
        raise NotImplementedError(self.get_format_string)
 
1082
 
 
1083
    def get_format_description(self):
 
1084
        """Return the short description for this format."""
 
1085
        raise NotImplementedError(self.get_format_description)
 
1086
 
 
1087
    def get_converter(self, format=None):
 
1088
        """Return the converter to use to convert bzrdirs needing converts.
 
1089
 
 
1090
        This returns a bzrlib.bzrdir.Converter object.
 
1091
 
 
1092
        This should return the best upgrader to step this format towards the
 
1093
        current default format. In the case of plugins we can/should provide
 
1094
        some means for them to extend the range of returnable converters.
 
1095
 
 
1096
        :param format: Optional format to override the default format of the 
 
1097
                       library.
 
1098
        """
 
1099
        raise NotImplementedError(self.get_converter)
 
1100
 
 
1101
    def initialize(self, url):
 
1102
        """Create a bzr control dir at this url and return an opened copy.
 
1103
        
 
1104
        Subclasses should typically override initialize_on_transport
 
1105
        instead of this method.
 
1106
        """
 
1107
        return self.initialize_on_transport(get_transport(url))
 
1108
 
 
1109
    def initialize_on_transport(self, transport):
 
1110
        """Initialize a new bzrdir in the base directory of a Transport."""
 
1111
        # Since we don't have a .bzr directory, inherit the
 
1112
        # mode from the root directory
 
1113
        temp_control = lockable_files.LockableFiles(transport,
 
1114
                            '', lockable_files.TransportLock)
 
1115
        temp_control._transport.mkdir('.bzr',
 
1116
                                      # FIXME: RBC 20060121 don't peek under
 
1117
                                      # the covers
 
1118
                                      mode=temp_control._dir_mode)
 
1119
        file_mode = temp_control._file_mode
 
1120
        del temp_control
 
1121
        mutter('created control directory in ' + transport.base)
 
1122
        control = transport.clone('.bzr')
 
1123
        utf8_files = [('README', 
 
1124
                       "This is a Bazaar-NG control directory.\n"
 
1125
                       "Do not change any files in this directory.\n"),
 
1126
                      ('branch-format', self.get_format_string()),
 
1127
                      ]
 
1128
        # NB: no need to escape relative paths that are url safe.
 
1129
        control_files = lockable_files.LockableFiles(control,
 
1130
                            self._lock_file_name, self._lock_class)
 
1131
        control_files.create_lock()
 
1132
        control_files.lock_write()
 
1133
        try:
 
1134
            for file, content in utf8_files:
 
1135
                control_files.put_utf8(file, content)
 
1136
        finally:
 
1137
            control_files.unlock()
 
1138
        return self.open(transport, _found=True)
 
1139
 
 
1140
    def is_supported(self):
 
1141
        """Is this format supported?
 
1142
 
 
1143
        Supported formats must be initializable and openable.
 
1144
        Unsupported formats may not support initialization or committing or 
 
1145
        some other features depending on the reason for not being supported.
 
1146
        """
 
1147
        return True
 
1148
 
 
1149
    def same_model(self, target_format):
 
1150
        return (self.repository_format.rich_root_data == 
 
1151
            target_format.rich_root_data)
 
1152
 
 
1153
    @classmethod
 
1154
    def known_formats(klass):
 
1155
        """Return all the known formats.
 
1156
        
 
1157
        Concrete formats should override _known_formats.
 
1158
        """
 
1159
        # There is double indirection here to make sure that control 
 
1160
        # formats used by more than one dir format will only be probed 
 
1161
        # once. This can otherwise be quite expensive for remote connections.
 
1162
        result = set()
 
1163
        for format in klass._control_formats:
 
1164
            result.update(format._known_formats())
 
1165
        return result
 
1166
    
 
1167
    @classmethod
 
1168
    def _known_formats(klass):
 
1169
        """Return the known format instances for this control format."""
 
1170
        return set(klass._formats.values())
 
1171
 
 
1172
    def open(self, transport, _found=False):
 
1173
        """Return an instance of this format for the dir transport points at.
 
1174
        
 
1175
        _found is a private parameter, do not use it.
 
1176
        """
 
1177
        if not _found:
 
1178
            assert isinstance(BzrDirFormat.find_format(transport),
 
1179
                              self.__class__)
 
1180
        return self._open(transport)
 
1181
 
 
1182
    def _open(self, transport):
 
1183
        """Template method helper for opening BzrDirectories.
 
1184
 
 
1185
        This performs the actual open and any additional logic or parameter
 
1186
        passing.
 
1187
        """
 
1188
        raise NotImplementedError(self._open)
 
1189
 
 
1190
    @classmethod
 
1191
    def register_format(klass, format):
 
1192
        klass._formats[format.get_format_string()] = format
 
1193
 
 
1194
    @classmethod
 
1195
    def register_control_format(klass, format):
 
1196
        """Register a format that does not use '.bzrdir' for its control dir.
 
1197
 
 
1198
        TODO: This should be pulled up into a 'ControlDirFormat' base class
 
1199
        which BzrDirFormat can inherit from, and renamed to register_format 
 
1200
        there. It has been done without that for now for simplicity of
 
1201
        implementation.
 
1202
        """
 
1203
        klass._control_formats.append(format)
 
1204
 
 
1205
    @classmethod
 
1206
    def set_default_format(klass, format):
 
1207
        klass._default_format = format
 
1208
 
 
1209
    def __str__(self):
 
1210
        return self.get_format_string()[:-1]
 
1211
 
 
1212
    @classmethod
 
1213
    def unregister_format(klass, format):
 
1214
        assert klass._formats[format.get_format_string()] is format
 
1215
        del klass._formats[format.get_format_string()]
 
1216
 
 
1217
    @classmethod
 
1218
    def unregister_control_format(klass, format):
 
1219
        klass._control_formats.remove(format)
 
1220
 
 
1221
 
 
1222
# register BzrDirFormat as a control format
 
1223
BzrDirFormat.register_control_format(BzrDirFormat)
 
1224
 
 
1225
 
 
1226
class BzrDirFormat4(BzrDirFormat):
 
1227
    """Bzr dir format 4.
 
1228
 
 
1229
    This format is a combined format for working tree, branch and repository.
 
1230
    It has:
 
1231
     - Format 1 working trees [always]
 
1232
     - Format 4 branches [always]
 
1233
     - Format 4 repositories [always]
 
1234
 
 
1235
    This format is deprecated: it indexes texts using a text it which is
 
1236
    removed in format 5; write support for this format has been removed.
 
1237
    """
 
1238
 
 
1239
    _lock_class = lockable_files.TransportLock
 
1240
 
 
1241
    def get_format_string(self):
 
1242
        """See BzrDirFormat.get_format_string()."""
 
1243
        return "Bazaar-NG branch, format 0.0.4\n"
 
1244
 
 
1245
    def get_format_description(self):
 
1246
        """See BzrDirFormat.get_format_description()."""
 
1247
        return "All-in-one format 4"
 
1248
 
 
1249
    def get_converter(self, format=None):
 
1250
        """See BzrDirFormat.get_converter()."""
 
1251
        # there is one and only one upgrade path here.
 
1252
        return ConvertBzrDir4To5()
 
1253
        
 
1254
    def initialize_on_transport(self, transport):
 
1255
        """Format 4 branches cannot be created."""
 
1256
        raise errors.UninitializableFormat(self)
 
1257
 
 
1258
    def is_supported(self):
 
1259
        """Format 4 is not supported.
 
1260
 
 
1261
        It is not supported because the model changed from 4 to 5 and the
 
1262
        conversion logic is expensive - so doing it on the fly was not 
 
1263
        feasible.
 
1264
        """
 
1265
        return False
 
1266
 
 
1267
    def _open(self, transport):
 
1268
        """See BzrDirFormat._open."""
 
1269
        return BzrDir4(transport, self)
 
1270
 
 
1271
    def __return_repository_format(self):
 
1272
        """Circular import protection."""
 
1273
        from bzrlib.repository import RepositoryFormat4
 
1274
        return RepositoryFormat4()
 
1275
    repository_format = property(__return_repository_format)
 
1276
 
 
1277
 
 
1278
class BzrDirFormat5(BzrDirFormat):
 
1279
    """Bzr control format 5.
 
1280
 
 
1281
    This format is a combined format for working tree, branch and repository.
 
1282
    It has:
 
1283
     - Format 2 working trees [always] 
 
1284
     - Format 4 branches [always] 
 
1285
     - Format 5 repositories [always]
 
1286
       Unhashed stores in the repository.
 
1287
    """
 
1288
 
 
1289
    _lock_class = lockable_files.TransportLock
 
1290
 
 
1291
    def get_format_string(self):
 
1292
        """See BzrDirFormat.get_format_string()."""
 
1293
        return "Bazaar-NG branch, format 5\n"
 
1294
 
 
1295
    def get_format_description(self):
 
1296
        """See BzrDirFormat.get_format_description()."""
 
1297
        return "All-in-one format 5"
 
1298
 
 
1299
    def get_converter(self, format=None):
 
1300
        """See BzrDirFormat.get_converter()."""
 
1301
        # there is one and only one upgrade path here.
 
1302
        return ConvertBzrDir5To6()
 
1303
 
 
1304
    def _initialize_for_clone(self, url):
 
1305
        return self.initialize_on_transport(get_transport(url), _cloning=True)
 
1306
        
 
1307
    def initialize_on_transport(self, transport, _cloning=False):
 
1308
        """Format 5 dirs always have working tree, branch and repository.
 
1309
        
 
1310
        Except when they are being cloned.
 
1311
        """
 
1312
        from bzrlib.branch import BzrBranchFormat4
 
1313
        from bzrlib.repository import RepositoryFormat5
 
1314
        from bzrlib.workingtree import WorkingTreeFormat2
 
1315
        result = (super(BzrDirFormat5, self).initialize_on_transport(transport))
 
1316
        RepositoryFormat5().initialize(result, _internal=True)
 
1317
        if not _cloning:
 
1318
            branch = BzrBranchFormat4().initialize(result)
 
1319
            try:
 
1320
                WorkingTreeFormat2().initialize(result)
 
1321
            except errors.NotLocalUrl:
 
1322
                # Even though we can't access the working tree, we need to
 
1323
                # create its control files.
 
1324
                WorkingTreeFormat2().stub_initialize_remote(branch.control_files)
 
1325
        return result
 
1326
 
 
1327
    def _open(self, transport):
 
1328
        """See BzrDirFormat._open."""
 
1329
        return BzrDir5(transport, self)
 
1330
 
 
1331
    def __return_repository_format(self):
 
1332
        """Circular import protection."""
 
1333
        from bzrlib.repository import RepositoryFormat5
 
1334
        return RepositoryFormat5()
 
1335
    repository_format = property(__return_repository_format)
 
1336
 
 
1337
 
 
1338
class BzrDirFormat6(BzrDirFormat):
 
1339
    """Bzr control format 6.
 
1340
 
 
1341
    This format is a combined format for working tree, branch and repository.
 
1342
    It has:
 
1343
     - Format 2 working trees [always] 
 
1344
     - Format 4 branches [always] 
 
1345
     - Format 6 repositories [always]
 
1346
    """
 
1347
 
 
1348
    _lock_class = lockable_files.TransportLock
 
1349
 
 
1350
    def get_format_string(self):
 
1351
        """See BzrDirFormat.get_format_string()."""
 
1352
        return "Bazaar-NG branch, format 6\n"
 
1353
 
 
1354
    def get_format_description(self):
 
1355
        """See BzrDirFormat.get_format_description()."""
 
1356
        return "All-in-one format 6"
 
1357
 
 
1358
    def get_converter(self, format=None):
 
1359
        """See BzrDirFormat.get_converter()."""
 
1360
        # there is one and only one upgrade path here.
 
1361
        return ConvertBzrDir6ToMeta()
 
1362
        
 
1363
    def _initialize_for_clone(self, url):
 
1364
        return self.initialize_on_transport(get_transport(url), _cloning=True)
 
1365
 
 
1366
    def initialize_on_transport(self, transport, _cloning=False):
 
1367
        """Format 6 dirs always have working tree, branch and repository.
 
1368
        
 
1369
        Except when they are being cloned.
 
1370
        """
 
1371
        from bzrlib.branch import BzrBranchFormat4
 
1372
        from bzrlib.repository import RepositoryFormat6
 
1373
        from bzrlib.workingtree import WorkingTreeFormat2
 
1374
        result = super(BzrDirFormat6, self).initialize_on_transport(transport)
 
1375
        RepositoryFormat6().initialize(result, _internal=True)
 
1376
        if not _cloning:
 
1377
            branch = BzrBranchFormat4().initialize(result)
 
1378
            try:
 
1379
                WorkingTreeFormat2().initialize(result)
 
1380
            except errors.NotLocalUrl:
 
1381
                # Even though we can't access the working tree, we need to
 
1382
                # create its control files.
 
1383
                WorkingTreeFormat2().stub_initialize_remote(branch.control_files)
 
1384
        return result
 
1385
 
 
1386
    def _open(self, transport):
 
1387
        """See BzrDirFormat._open."""
 
1388
        return BzrDir6(transport, self)
 
1389
 
 
1390
    def __return_repository_format(self):
 
1391
        """Circular import protection."""
 
1392
        from bzrlib.repository import RepositoryFormat6
 
1393
        return RepositoryFormat6()
 
1394
    repository_format = property(__return_repository_format)
 
1395
 
 
1396
 
 
1397
class BzrDirMetaFormat1(BzrDirFormat):
 
1398
    """Bzr meta control format 1
 
1399
 
 
1400
    This is the first format with split out working tree, branch and repository
 
1401
    disk storage.
 
1402
    It has:
 
1403
     - Format 3 working trees [optional]
 
1404
     - Format 5 branches [optional]
 
1405
     - Format 7 repositories [optional]
 
1406
    """
 
1407
 
 
1408
    _lock_class = lockdir.LockDir
 
1409
 
 
1410
    def get_converter(self, format=None):
 
1411
        """See BzrDirFormat.get_converter()."""
 
1412
        if format is None:
 
1413
            format = BzrDirFormat.get_default_format()
 
1414
        if not isinstance(self, format.__class__):
 
1415
            # converting away from metadir is not implemented
 
1416
            raise NotImplementedError(self.get_converter)
 
1417
        return ConvertMetaToMeta(format)
 
1418
 
 
1419
    def get_format_string(self):
 
1420
        """See BzrDirFormat.get_format_string()."""
 
1421
        return "Bazaar-NG meta directory, format 1\n"
 
1422
 
 
1423
    def get_format_description(self):
 
1424
        """See BzrDirFormat.get_format_description()."""
 
1425
        return "Meta directory format 1"
 
1426
 
 
1427
    def _open(self, transport):
 
1428
        """See BzrDirFormat._open."""
 
1429
        return BzrDirMeta1(transport, self)
 
1430
 
 
1431
    def __return_repository_format(self):
 
1432
        """Circular import protection."""
 
1433
        if getattr(self, '_repository_format', None):
 
1434
            return self._repository_format
 
1435
        from bzrlib.repository import RepositoryFormat
 
1436
        return RepositoryFormat.get_default_format()
 
1437
 
 
1438
    def __set_repository_format(self, value):
 
1439
        """Allow changint the repository format for metadir formats."""
 
1440
        self._repository_format = value
 
1441
 
 
1442
    repository_format = property(__return_repository_format, __set_repository_format)
 
1443
 
 
1444
 
 
1445
BzrDirFormat.register_format(BzrDirFormat4())
 
1446
BzrDirFormat.register_format(BzrDirFormat5())
 
1447
BzrDirFormat.register_format(BzrDirFormat6())
 
1448
__default_format = BzrDirMetaFormat1()
 
1449
BzrDirFormat.register_format(__default_format)
 
1450
BzrDirFormat.set_default_format(__default_format)
 
1451
 
 
1452
 
 
1453
class BzrDirTestProviderAdapter(object):
 
1454
    """A tool to generate a suite testing multiple bzrdir formats at once.
 
1455
 
 
1456
    This is done by copying the test once for each transport and injecting
 
1457
    the transport_server, transport_readonly_server, and bzrdir_format
 
1458
    classes into each copy. Each copy is also given a new id() to make it
 
1459
    easy to identify.
 
1460
    """
 
1461
 
 
1462
    def __init__(self, transport_server, transport_readonly_server, formats):
 
1463
        self._transport_server = transport_server
 
1464
        self._transport_readonly_server = transport_readonly_server
 
1465
        self._formats = formats
 
1466
    
 
1467
    def adapt(self, test):
 
1468
        result = unittest.TestSuite()
 
1469
        for format in self._formats:
 
1470
            new_test = deepcopy(test)
 
1471
            new_test.transport_server = self._transport_server
 
1472
            new_test.transport_readonly_server = self._transport_readonly_server
 
1473
            new_test.bzrdir_format = format
 
1474
            def make_new_test_id():
 
1475
                new_id = "%s(%s)" % (new_test.id(), format.__class__.__name__)
 
1476
                return lambda: new_id
 
1477
            new_test.id = make_new_test_id()
 
1478
            result.addTest(new_test)
 
1479
        return result
 
1480
 
 
1481
 
 
1482
class Converter(object):
 
1483
    """Converts a disk format object from one format to another."""
 
1484
 
 
1485
    def convert(self, to_convert, pb):
 
1486
        """Perform the conversion of to_convert, giving feedback via pb.
 
1487
 
 
1488
        :param to_convert: The disk object to convert.
 
1489
        :param pb: a progress bar to use for progress information.
 
1490
        """
 
1491
 
 
1492
    def step(self, message):
 
1493
        """Update the pb by a step."""
 
1494
        self.count +=1
 
1495
        self.pb.update(message, self.count, self.total)
 
1496
 
 
1497
 
 
1498
class ConvertBzrDir4To5(Converter):
 
1499
    """Converts format 4 bzr dirs to format 5."""
 
1500
 
 
1501
    def __init__(self):
 
1502
        super(ConvertBzrDir4To5, self).__init__()
 
1503
        self.converted_revs = set()
 
1504
        self.absent_revisions = set()
 
1505
        self.text_count = 0
 
1506
        self.revisions = {}
 
1507
        
 
1508
    def convert(self, to_convert, pb):
 
1509
        """See Converter.convert()."""
 
1510
        self.bzrdir = to_convert
 
1511
        self.pb = pb
 
1512
        self.pb.note('starting upgrade from format 4 to 5')
 
1513
        if isinstance(self.bzrdir.transport, LocalTransport):
 
1514
            self.bzrdir.get_workingtree_transport(None).delete('stat-cache')
 
1515
        self._convert_to_weaves()
 
1516
        return BzrDir.open(self.bzrdir.root_transport.base)
 
1517
 
 
1518
    def _convert_to_weaves(self):
 
1519
        self.pb.note('note: upgrade may be faster if all store files are ungzipped first')
 
1520
        try:
 
1521
            # TODO permissions
 
1522
            stat = self.bzrdir.transport.stat('weaves')
 
1523
            if not S_ISDIR(stat.st_mode):
 
1524
                self.bzrdir.transport.delete('weaves')
 
1525
                self.bzrdir.transport.mkdir('weaves')
 
1526
        except errors.NoSuchFile:
 
1527
            self.bzrdir.transport.mkdir('weaves')
 
1528
        # deliberately not a WeaveFile as we want to build it up slowly.
 
1529
        self.inv_weave = Weave('inventory')
 
1530
        # holds in-memory weaves for all files
 
1531
        self.text_weaves = {}
 
1532
        self.bzrdir.transport.delete('branch-format')
 
1533
        self.branch = self.bzrdir.open_branch()
 
1534
        self._convert_working_inv()
 
1535
        rev_history = self.branch.revision_history()
 
1536
        # to_read is a stack holding the revisions we still need to process;
 
1537
        # appending to it adds new highest-priority revisions
 
1538
        self.known_revisions = set(rev_history)
 
1539
        self.to_read = rev_history[-1:]
 
1540
        while self.to_read:
 
1541
            rev_id = self.to_read.pop()
 
1542
            if (rev_id not in self.revisions
 
1543
                and rev_id not in self.absent_revisions):
 
1544
                self._load_one_rev(rev_id)
 
1545
        self.pb.clear()
 
1546
        to_import = self._make_order()
 
1547
        for i, rev_id in enumerate(to_import):
 
1548
            self.pb.update('converting revision', i, len(to_import))
 
1549
            self._convert_one_rev(rev_id)
 
1550
        self.pb.clear()
 
1551
        self._write_all_weaves()
 
1552
        self._write_all_revs()
 
1553
        self.pb.note('upgraded to weaves:')
 
1554
        self.pb.note('  %6d revisions and inventories', len(self.revisions))
 
1555
        self.pb.note('  %6d revisions not present', len(self.absent_revisions))
 
1556
        self.pb.note('  %6d texts', self.text_count)
 
1557
        self._cleanup_spare_files_after_format4()
 
1558
        self.branch.control_files.put_utf8('branch-format', BzrDirFormat5().get_format_string())
 
1559
 
 
1560
    def _cleanup_spare_files_after_format4(self):
 
1561
        # FIXME working tree upgrade foo.
 
1562
        for n in 'merged-patches', 'pending-merged-patches':
 
1563
            try:
 
1564
                ## assert os.path.getsize(p) == 0
 
1565
                self.bzrdir.transport.delete(n)
 
1566
            except errors.NoSuchFile:
 
1567
                pass
 
1568
        self.bzrdir.transport.delete_tree('inventory-store')
 
1569
        self.bzrdir.transport.delete_tree('text-store')
 
1570
 
 
1571
    def _convert_working_inv(self):
 
1572
        inv = xml4.serializer_v4.read_inventory(
 
1573
                    self.branch.control_files.get('inventory'))
 
1574
        new_inv_xml = xml5.serializer_v5.write_inventory_to_string(inv)
 
1575
        # FIXME inventory is a working tree change.
 
1576
        self.branch.control_files.put('inventory', StringIO(new_inv_xml))
 
1577
 
 
1578
    def _write_all_weaves(self):
 
1579
        controlweaves = WeaveStore(self.bzrdir.transport, prefixed=False)
 
1580
        weave_transport = self.bzrdir.transport.clone('weaves')
 
1581
        weaves = WeaveStore(weave_transport, prefixed=False)
 
1582
        transaction = WriteTransaction()
 
1583
 
 
1584
        try:
 
1585
            i = 0
 
1586
            for file_id, file_weave in self.text_weaves.items():
 
1587
                self.pb.update('writing weave', i, len(self.text_weaves))
 
1588
                weaves._put_weave(file_id, file_weave, transaction)
 
1589
                i += 1
 
1590
            self.pb.update('inventory', 0, 1)
 
1591
            controlweaves._put_weave('inventory', self.inv_weave, transaction)
 
1592
            self.pb.update('inventory', 1, 1)
 
1593
        finally:
 
1594
            self.pb.clear()
 
1595
 
 
1596
    def _write_all_revs(self):
 
1597
        """Write all revisions out in new form."""
 
1598
        self.bzrdir.transport.delete_tree('revision-store')
 
1599
        self.bzrdir.transport.mkdir('revision-store')
 
1600
        revision_transport = self.bzrdir.transport.clone('revision-store')
 
1601
        # TODO permissions
 
1602
        _revision_store = TextRevisionStore(TextStore(revision_transport,
 
1603
                                                      prefixed=False,
 
1604
                                                      compressed=True))
 
1605
        try:
 
1606
            transaction = WriteTransaction()
 
1607
            for i, rev_id in enumerate(self.converted_revs):
 
1608
                self.pb.update('write revision', i, len(self.converted_revs))
 
1609
                _revision_store.add_revision(self.revisions[rev_id], transaction)
 
1610
        finally:
 
1611
            self.pb.clear()
 
1612
            
 
1613
    def _load_one_rev(self, rev_id):
 
1614
        """Load a revision object into memory.
 
1615
 
 
1616
        Any parents not either loaded or abandoned get queued to be
 
1617
        loaded."""
 
1618
        self.pb.update('loading revision',
 
1619
                       len(self.revisions),
 
1620
                       len(self.known_revisions))
 
1621
        if not self.branch.repository.has_revision(rev_id):
 
1622
            self.pb.clear()
 
1623
            self.pb.note('revision {%s} not present in branch; '
 
1624
                         'will be converted as a ghost',
 
1625
                         rev_id)
 
1626
            self.absent_revisions.add(rev_id)
 
1627
        else:
 
1628
            rev = self.branch.repository._revision_store.get_revision(rev_id,
 
1629
                self.branch.repository.get_transaction())
 
1630
            for parent_id in rev.parent_ids:
 
1631
                self.known_revisions.add(parent_id)
 
1632
                self.to_read.append(parent_id)
 
1633
            self.revisions[rev_id] = rev
 
1634
 
 
1635
    def _load_old_inventory(self, rev_id):
 
1636
        assert rev_id not in self.converted_revs
 
1637
        old_inv_xml = self.branch.repository.inventory_store.get(rev_id).read()
 
1638
        inv = xml4.serializer_v4.read_inventory_from_string(old_inv_xml)
 
1639
        inv.revision_id = rev_id
 
1640
        rev = self.revisions[rev_id]
 
1641
        if rev.inventory_sha1:
 
1642
            assert rev.inventory_sha1 == sha_string(old_inv_xml), \
 
1643
                'inventory sha mismatch for {%s}' % rev_id
 
1644
        return inv
 
1645
 
 
1646
    def _load_updated_inventory(self, rev_id):
 
1647
        assert rev_id in self.converted_revs
 
1648
        inv_xml = self.inv_weave.get_text(rev_id)
 
1649
        inv = xml5.serializer_v5.read_inventory_from_string(inv_xml)
 
1650
        return inv
 
1651
 
 
1652
    def _convert_one_rev(self, rev_id):
 
1653
        """Convert revision and all referenced objects to new format."""
 
1654
        rev = self.revisions[rev_id]
 
1655
        inv = self._load_old_inventory(rev_id)
 
1656
        present_parents = [p for p in rev.parent_ids
 
1657
                           if p not in self.absent_revisions]
 
1658
        self._convert_revision_contents(rev, inv, present_parents)
 
1659
        self._store_new_weave(rev, inv, present_parents)
 
1660
        self.converted_revs.add(rev_id)
 
1661
 
 
1662
    def _store_new_weave(self, rev, inv, present_parents):
 
1663
        # the XML is now updated with text versions
 
1664
        if __debug__:
 
1665
            entries = inv.iter_entries()
 
1666
            entries.next()
 
1667
            for path, ie in entries:
 
1668
                assert getattr(ie, 'revision', None) is not None, \
 
1669
                    'no revision on {%s} in {%s}' % \
 
1670
                    (file_id, rev.revision_id)
 
1671
        new_inv_xml = xml5.serializer_v5.write_inventory_to_string(inv)
 
1672
        new_inv_sha1 = sha_string(new_inv_xml)
 
1673
        self.inv_weave.add_lines(rev.revision_id, 
 
1674
                                 present_parents,
 
1675
                                 new_inv_xml.splitlines(True))
 
1676
        rev.inventory_sha1 = new_inv_sha1
 
1677
 
 
1678
    def _convert_revision_contents(self, rev, inv, present_parents):
 
1679
        """Convert all the files within a revision.
 
1680
 
 
1681
        Also upgrade the inventory to refer to the text revision ids."""
 
1682
        rev_id = rev.revision_id
 
1683
        mutter('converting texts of revision {%s}',
 
1684
               rev_id)
 
1685
        parent_invs = map(self._load_updated_inventory, present_parents)
 
1686
        entries = inv.iter_entries()
 
1687
        entries.next()
 
1688
        for path, ie in entries:
 
1689
            self._convert_file_version(rev, ie, parent_invs)
 
1690
 
 
1691
    def _convert_file_version(self, rev, ie, parent_invs):
 
1692
        """Convert one version of one file.
 
1693
 
 
1694
        The file needs to be added into the weave if it is a merge
 
1695
        of >=2 parents or if it's changed from its parent.
 
1696
        """
 
1697
        file_id = ie.file_id
 
1698
        rev_id = rev.revision_id
 
1699
        w = self.text_weaves.get(file_id)
 
1700
        if w is None:
 
1701
            w = Weave(file_id)
 
1702
            self.text_weaves[file_id] = w
 
1703
        text_changed = False
 
1704
        previous_entries = ie.find_previous_heads(parent_invs,
 
1705
                                                  None,
 
1706
                                                  None,
 
1707
                                                  entry_vf=w)
 
1708
        for old_revision in previous_entries:
 
1709
                # if this fails, its a ghost ?
 
1710
                assert old_revision in self.converted_revs, \
 
1711
                    "Revision {%s} not in converted_revs" % old_revision
 
1712
        self.snapshot_ie(previous_entries, ie, w, rev_id)
 
1713
        del ie.text_id
 
1714
        assert getattr(ie, 'revision', None) is not None
 
1715
 
 
1716
    def snapshot_ie(self, previous_revisions, ie, w, rev_id):
 
1717
        # TODO: convert this logic, which is ~= snapshot to
 
1718
        # a call to:. This needs the path figured out. rather than a work_tree
 
1719
        # a v4 revision_tree can be given, or something that looks enough like
 
1720
        # one to give the file content to the entry if it needs it.
 
1721
        # and we need something that looks like a weave store for snapshot to 
 
1722
        # save against.
 
1723
        #ie.snapshot(rev, PATH, previous_revisions, REVISION_TREE, InMemoryWeaveStore(self.text_weaves))
 
1724
        if len(previous_revisions) == 1:
 
1725
            previous_ie = previous_revisions.values()[0]
 
1726
            if ie._unchanged(previous_ie):
 
1727
                ie.revision = previous_ie.revision
 
1728
                return
 
1729
        if ie.has_text():
 
1730
            text = self.branch.repository.text_store.get(ie.text_id)
 
1731
            file_lines = text.readlines()
 
1732
            assert sha_strings(file_lines) == ie.text_sha1
 
1733
            assert sum(map(len, file_lines)) == ie.text_size
 
1734
            w.add_lines(rev_id, previous_revisions, file_lines)
 
1735
            self.text_count += 1
 
1736
        else:
 
1737
            w.add_lines(rev_id, previous_revisions, [])
 
1738
        ie.revision = rev_id
 
1739
 
 
1740
    def _make_order(self):
 
1741
        """Return a suitable order for importing revisions.
 
1742
 
 
1743
        The order must be such that an revision is imported after all
 
1744
        its (present) parents.
 
1745
        """
 
1746
        todo = set(self.revisions.keys())
 
1747
        done = self.absent_revisions.copy()
 
1748
        order = []
 
1749
        while todo:
 
1750
            # scan through looking for a revision whose parents
 
1751
            # are all done
 
1752
            for rev_id in sorted(list(todo)):
 
1753
                rev = self.revisions[rev_id]
 
1754
                parent_ids = set(rev.parent_ids)
 
1755
                if parent_ids.issubset(done):
 
1756
                    # can take this one now
 
1757
                    order.append(rev_id)
 
1758
                    todo.remove(rev_id)
 
1759
                    done.add(rev_id)
 
1760
        return order
 
1761
 
 
1762
 
 
1763
class ConvertBzrDir5To6(Converter):
 
1764
    """Converts format 5 bzr dirs to format 6."""
 
1765
 
 
1766
    def convert(self, to_convert, pb):
 
1767
        """See Converter.convert()."""
 
1768
        self.bzrdir = to_convert
 
1769
        self.pb = pb
 
1770
        self.pb.note('starting upgrade from format 5 to 6')
 
1771
        self._convert_to_prefixed()
 
1772
        return BzrDir.open(self.bzrdir.root_transport.base)
 
1773
 
 
1774
    def _convert_to_prefixed(self):
 
1775
        from bzrlib.store import TransportStore
 
1776
        self.bzrdir.transport.delete('branch-format')
 
1777
        for store_name in ["weaves", "revision-store"]:
 
1778
            self.pb.note("adding prefixes to %s" % store_name)
 
1779
            store_transport = self.bzrdir.transport.clone(store_name)
 
1780
            store = TransportStore(store_transport, prefixed=True)
 
1781
            for urlfilename in store_transport.list_dir('.'):
 
1782
                filename = urlutils.unescape(urlfilename)
 
1783
                if (filename.endswith(".weave") or
 
1784
                    filename.endswith(".gz") or
 
1785
                    filename.endswith(".sig")):
 
1786
                    file_id = os.path.splitext(filename)[0]
 
1787
                else:
 
1788
                    file_id = filename
 
1789
                prefix_dir = store.hash_prefix(file_id)
 
1790
                # FIXME keep track of the dirs made RBC 20060121
 
1791
                try:
 
1792
                    store_transport.move(filename, prefix_dir + '/' + filename)
 
1793
                except errors.NoSuchFile: # catches missing dirs strangely enough
 
1794
                    store_transport.mkdir(prefix_dir)
 
1795
                    store_transport.move(filename, prefix_dir + '/' + filename)
 
1796
        self.bzrdir._control_files.put_utf8('branch-format', BzrDirFormat6().get_format_string())
 
1797
 
 
1798
 
 
1799
class ConvertBzrDir6ToMeta(Converter):
 
1800
    """Converts format 6 bzr dirs to metadirs."""
 
1801
 
 
1802
    def convert(self, to_convert, pb):
 
1803
        """See Converter.convert()."""
 
1804
        from bzrlib.branch import BzrBranchFormat5
 
1805
        self.bzrdir = to_convert
 
1806
        self.pb = pb
 
1807
        self.count = 0
 
1808
        self.total = 20 # the steps we know about
 
1809
        self.garbage_inventories = []
 
1810
 
 
1811
        self.pb.note('starting upgrade from format 6 to metadir')
 
1812
        self.bzrdir._control_files.put_utf8('branch-format', "Converting to format 6")
 
1813
        # its faster to move specific files around than to open and use the apis...
 
1814
        # first off, nuke ancestry.weave, it was never used.
 
1815
        try:
 
1816
            self.step('Removing ancestry.weave')
 
1817
            self.bzrdir.transport.delete('ancestry.weave')
 
1818
        except errors.NoSuchFile:
 
1819
            pass
 
1820
        # find out whats there
 
1821
        self.step('Finding branch files')
 
1822
        last_revision = self.bzrdir.open_branch().last_revision()
 
1823
        bzrcontents = self.bzrdir.transport.list_dir('.')
 
1824
        for name in bzrcontents:
 
1825
            if name.startswith('basis-inventory.'):
 
1826
                self.garbage_inventories.append(name)
 
1827
        # create new directories for repository, working tree and branch
 
1828
        self.dir_mode = self.bzrdir._control_files._dir_mode
 
1829
        self.file_mode = self.bzrdir._control_files._file_mode
 
1830
        repository_names = [('inventory.weave', True),
 
1831
                            ('revision-store', True),
 
1832
                            ('weaves', True)]
 
1833
        self.step('Upgrading repository  ')
 
1834
        self.bzrdir.transport.mkdir('repository', mode=self.dir_mode)
 
1835
        self.make_lock('repository')
 
1836
        # we hard code the formats here because we are converting into
 
1837
        # the meta format. The meta format upgrader can take this to a 
 
1838
        # future format within each component.
 
1839
        self.put_format('repository', _mod_repository.RepositoryFormat7())
 
1840
        for entry in repository_names:
 
1841
            self.move_entry('repository', entry)
 
1842
 
 
1843
        self.step('Upgrading branch      ')
 
1844
        self.bzrdir.transport.mkdir('branch', mode=self.dir_mode)
 
1845
        self.make_lock('branch')
 
1846
        self.put_format('branch', BzrBranchFormat5())
 
1847
        branch_files = [('revision-history', True),
 
1848
                        ('branch-name', True),
 
1849
                        ('parent', False)]
 
1850
        for entry in branch_files:
 
1851
            self.move_entry('branch', entry)
 
1852
 
 
1853
        checkout_files = [('pending-merges', True),
 
1854
                          ('inventory', True),
 
1855
                          ('stat-cache', False)]
 
1856
        # If a mandatory checkout file is not present, the branch does not have
 
1857
        # a functional checkout. Do not create a checkout in the converted
 
1858
        # branch.
 
1859
        for name, mandatory in checkout_files:
 
1860
            if mandatory and name not in bzrcontents:
 
1861
                has_checkout = False
 
1862
                break
 
1863
        else:
 
1864
            has_checkout = True
 
1865
        if not has_checkout:
 
1866
            self.pb.note('No working tree.')
 
1867
            # If some checkout files are there, we may as well get rid of them.
 
1868
            for name, mandatory in checkout_files:
 
1869
                if name in bzrcontents:
 
1870
                    self.bzrdir.transport.delete(name)
 
1871
        else:
 
1872
            from bzrlib.workingtree import WorkingTreeFormat3
 
1873
            self.step('Upgrading working tree')
 
1874
            self.bzrdir.transport.mkdir('checkout', mode=self.dir_mode)
 
1875
            self.make_lock('checkout')
 
1876
            self.put_format(
 
1877
                'checkout', WorkingTreeFormat3())
 
1878
            self.bzrdir.transport.delete_multi(
 
1879
                self.garbage_inventories, self.pb)
 
1880
            for entry in checkout_files:
 
1881
                self.move_entry('checkout', entry)
 
1882
            if last_revision is not None:
 
1883
                self.bzrdir._control_files.put_utf8(
 
1884
                    'checkout/last-revision', last_revision)
 
1885
        self.bzrdir._control_files.put_utf8(
 
1886
            'branch-format', BzrDirMetaFormat1().get_format_string())
 
1887
        return BzrDir.open(self.bzrdir.root_transport.base)
 
1888
 
 
1889
    def make_lock(self, name):
 
1890
        """Make a lock for the new control dir name."""
 
1891
        self.step('Make %s lock' % name)
 
1892
        ld = lockdir.LockDir(self.bzrdir.transport,
 
1893
                             '%s/lock' % name,
 
1894
                             file_modebits=self.file_mode,
 
1895
                             dir_modebits=self.dir_mode)
 
1896
        ld.create()
 
1897
 
 
1898
    def move_entry(self, new_dir, entry):
 
1899
        """Move then entry name into new_dir."""
 
1900
        name = entry[0]
 
1901
        mandatory = entry[1]
 
1902
        self.step('Moving %s' % name)
 
1903
        try:
 
1904
            self.bzrdir.transport.move(name, '%s/%s' % (new_dir, name))
 
1905
        except errors.NoSuchFile:
 
1906
            if mandatory:
 
1907
                raise
 
1908
 
 
1909
    def put_format(self, dirname, format):
 
1910
        self.bzrdir._control_files.put_utf8('%s/format' % dirname, format.get_format_string())
 
1911
 
 
1912
 
 
1913
class ConvertMetaToMeta(Converter):
 
1914
    """Converts the components of metadirs."""
 
1915
 
 
1916
    def __init__(self, target_format):
 
1917
        """Create a metadir to metadir converter.
 
1918
 
 
1919
        :param target_format: The final metadir format that is desired.
 
1920
        """
 
1921
        self.target_format = target_format
 
1922
 
 
1923
    def convert(self, to_convert, pb):
 
1924
        """See Converter.convert()."""
 
1925
        self.bzrdir = to_convert
 
1926
        self.pb = pb
 
1927
        self.count = 0
 
1928
        self.total = 1
 
1929
        self.step('checking repository format')
 
1930
        try:
 
1931
            repo = self.bzrdir.open_repository()
 
1932
        except errors.NoRepositoryPresent:
 
1933
            pass
 
1934
        else:
 
1935
            if not isinstance(repo._format, self.target_format.repository_format.__class__):
 
1936
                from bzrlib.repository import CopyConverter
 
1937
                self.pb.note('starting repository conversion')
 
1938
                converter = CopyConverter(self.target_format.repository_format)
 
1939
                converter.convert(repo, pb)
 
1940
        return to_convert