/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/repository.py

  • Committer: Martin Pool
  • Date: 2010-10-08 06:34:10 UTC
  • mfrom: (5463.1.2 trunk)
  • mto: This revision was merged to the branch mainline in revision 5476.
  • Revision ID: mbp@sourcefrog.net-20101008063410-5nfe1g88d822r42a
Avoid -q / -v carrying over in scripts and causing mysterious failures

Show diffs side-by-side

added added

removed removed

Lines of Context:
bzrlib/repository.py
25
25
    check,
26
26
    chk_map,
27
27
    config,
 
28
    controldir,
28
29
    debug,
29
 
    errors,
30
30
    fetch as _mod_fetch,
31
31
    fifo_cache,
32
32
    generate_ids,
44
44
    symbol_versioning,
45
45
    trace,
46
46
    tsort,
47
 
    ui,
48
47
    versionedfile,
49
48
    )
50
49
from bzrlib.bundle import serializer
53
52
from bzrlib.testament import Testament
54
53
""")
55
54
 
 
55
from bzrlib import (
 
56
    errors,
 
57
    registry,
 
58
    ui,
 
59
    )
56
60
from bzrlib.decorators import needs_read_lock, needs_write_lock, only_raises
57
61
from bzrlib.inter import InterObject
58
62
from bzrlib.inventory import (
61
65
    ROOT_ID,
62
66
    entry_factory,
63
67
    )
64
 
from bzrlib.lock import _RelockDebugMixin
65
 
from bzrlib import registry
 
68
from bzrlib.recordcounter import RecordCounter
 
69
from bzrlib.lock import _RelockDebugMixin, LogicalLockResult
66
70
from bzrlib.trace import (
67
71
    log_exception_quietly, note, mutter, mutter_callsite, warning)
68
72
 
71
75
_deprecation_warning_done = False
72
76
 
73
77
 
 
78
class IsInWriteGroupError(errors.InternalBzrError):
 
79
 
 
80
    _fmt = "May not refresh_data of repo %(repo)s while in a write group."
 
81
 
 
82
    def __init__(self, repo):
 
83
        errors.InternalBzrError.__init__(self, repo=repo)
 
84
 
 
85
 
74
86
class CommitBuilder(object):
75
87
    """Provides an interface to build up a commit.
76
88
 
231
243
 
232
244
    def _gen_revision_id(self):
233
245
        """Return new revision-id."""
234
 
        return generate_ids.gen_revision_id(self._config.username(),
235
 
                                            self._timestamp)
 
246
        return generate_ids.gen_revision_id(self._committer, self._timestamp)
236
247
 
237
248
    def _generate_revision_if_needed(self):
238
249
        """Create a revision id if None was supplied.
278
289
 
279
290
        :param tree: The tree which is being committed.
280
291
        """
281
 
        # NB: if there are no parents then this method is not called, so no
282
 
        # need to guard on parents having length.
 
292
        if len(self.parents) == 0:
 
293
            raise errors.RootMissing()
283
294
        entry = entry_factory['directory'](tree.path2id(''), '',
284
295
            None)
285
296
        entry.revision = self._new_revision_id
423
434
            else:
424
435
                # we don't need to commit this, because the caller already
425
436
                # determined that an existing revision of this file is
426
 
                # appropriate. If its not being considered for committing then
 
437
                # appropriate. If it's not being considered for committing then
427
438
                # it and all its parents to the root must be unaltered so
428
439
                # no-change against the basis.
429
440
                if ie.revision == self._new_revision_id:
745
756
                    # after iter_changes examines and decides it has changed,
746
757
                    # we will unconditionally record a new version even if some
747
758
                    # other process reverts it while commit is running (with
748
 
                    # the revert happening after iter_changes did it's
 
759
                    # the revert happening after iter_changes did its
749
760
                    # examination).
750
761
                    if change[7][1]:
751
762
                        entry.executable = True
860
871
        # versioned roots do not change unless the tree found a change.
861
872
 
862
873
 
 
874
class RepositoryWriteLockResult(LogicalLockResult):
 
875
    """The result of write locking a repository.
 
876
 
 
877
    :ivar repository_token: The token obtained from the underlying lock, or
 
878
        None.
 
879
    :ivar unlock: A callable which will unlock the lock.
 
880
    """
 
881
 
 
882
    def __init__(self, unlock, repository_token):
 
883
        LogicalLockResult.__init__(self, unlock)
 
884
        self.repository_token = repository_token
 
885
 
 
886
    def __repr__(self):
 
887
        return "RepositoryWriteLockResult(%s, %s)" % (self.repository_token,
 
888
            self.unlock)
 
889
 
 
890
 
863
891
######################################################################
864
892
# Repositories
865
893
 
866
894
 
867
 
class Repository(_RelockDebugMixin, bzrdir.ControlComponent):
 
895
class Repository(_RelockDebugMixin, controldir.ControlComponent):
868
896
    """Repository holding history for one or more branches.
869
897
 
870
898
    The repository holds and retrieves historical information including
917
945
        pointing to .bzr/repository.
918
946
    """
919
947
 
920
 
    # What class to use for a CommitBuilder. Often its simpler to change this
 
948
    # What class to use for a CommitBuilder. Often it's simpler to change this
921
949
    # in a Repository class subclass rather than to override
922
950
    # get_commit_builder.
923
951
    _commit_builder_class = CommitBuilder
1018
1046
                " id and insertion revid (%r, %r)"
1019
1047
                % (inv.revision_id, revision_id))
1020
1048
        if inv.root is None:
1021
 
            raise AssertionError()
 
1049
            raise errors.RootMissing()
1022
1050
        return self._add_inventory_checked(revision_id, inv, parents)
1023
1051
 
1024
1052
    def _add_inventory_checked(self, revision_id, inv, parents):
1376
1404
        data during reads, and allows a 'write_group' to be obtained. Write
1377
1405
        groups must be used for actual data insertion.
1378
1406
 
 
1407
        A token should be passed in if you know that you have locked the object
 
1408
        some other way, and need to synchronise this object's state with that
 
1409
        fact.
 
1410
 
 
1411
        XXX: this docstring is duplicated in many places, e.g. lockable_files.py
 
1412
 
1379
1413
        :param token: if this is already locked, then lock_write will fail
1380
1414
            unless the token matches the existing lock.
1381
1415
        :returns: a token if this instance supports tokens, otherwise None.
1384
1418
        :raises MismatchedToken: if the specified token doesn't match the token
1385
1419
            of the existing lock.
1386
1420
        :seealso: start_write_group.
1387
 
 
1388
 
        A token should be passed in if you know that you have locked the object
1389
 
        some other way, and need to synchronise this object's state with that
1390
 
        fact.
1391
 
 
1392
 
        XXX: this docstring is duplicated in many places, e.g. lockable_files.py
 
1421
        :return: A RepositoryWriteLockResult.
1393
1422
        """
1394
1423
        locked = self.is_locked()
1395
 
        result = self.control_files.lock_write(token=token)
 
1424
        token = self.control_files.lock_write(token=token)
1396
1425
        if not locked:
1397
1426
            self._warn_if_deprecated()
1398
1427
            self._note_lock('w')
1400
1429
                # Writes don't affect fallback repos
1401
1430
                repo.lock_read()
1402
1431
            self._refresh_data()
1403
 
        return result
 
1432
        return RepositoryWriteLockResult(self.unlock, token)
1404
1433
 
1405
1434
    def lock_read(self):
 
1435
        """Lock the repository for read operations.
 
1436
 
 
1437
        :return: An object with an unlock method which will release the lock
 
1438
            obtained.
 
1439
        """
1406
1440
        locked = self.is_locked()
1407
1441
        self.control_files.lock_read()
1408
1442
        if not locked:
1411
1445
            for repo in self._fallback_repositories:
1412
1446
                repo.lock_read()
1413
1447
            self._refresh_data()
 
1448
        return LogicalLockResult(self.unlock)
1414
1449
 
1415
1450
    def get_physical_lock_status(self):
1416
1451
        return self.control_files.get_physical_lock_status()
1634
1669
        return missing_keys
1635
1670
 
1636
1671
    def refresh_data(self):
1637
 
        """Re-read any data needed to to synchronise with disk.
 
1672
        """Re-read any data needed to synchronise with disk.
1638
1673
 
1639
1674
        This method is intended to be called after another repository instance
1640
1675
        (such as one used by a smart server) has inserted data into the
1641
 
        repository. It may not be called during a write group, but may be
1642
 
        called at any other time.
 
1676
        repository. On all repositories this will work outside of write groups.
 
1677
        Some repository formats (pack and newer for bzrlib native formats)
 
1678
        support refresh_data inside write groups. If called inside a write
 
1679
        group on a repository that does not support refreshing in a write group
 
1680
        IsInWriteGroupError will be raised.
1643
1681
        """
1644
 
        if self.is_in_write_group():
1645
 
            raise errors.InternalBzrError(
1646
 
                "May not refresh_data while in a write group.")
1647
1682
        self._refresh_data()
1648
1683
 
1649
1684
    def resume_write_group(self, tokens):
1688
1723
                "May not fetch while in a write group.")
1689
1724
        # fast path same-url fetch operations
1690
1725
        # TODO: lift out to somewhere common with RemoteRepository
1691
 
        # <https://bugs.edge.launchpad.net/bzr/+bug/401646>
 
1726
        # <https://bugs.launchpad.net/bzr/+bug/401646>
1692
1727
        if (self.has_same_location(source)
1693
1728
            and fetch_spec is None
1694
1729
            and self._has_same_fallbacks(source)):
2476
2511
            ancestors will be traversed.
2477
2512
        """
2478
2513
        graph = self.get_graph()
2479
 
        next_id = revision_id
2480
 
        while True:
2481
 
            if next_id in (None, _mod_revision.NULL_REVISION):
2482
 
                return
2483
 
            try:
2484
 
                parents = graph.get_parent_map([next_id])[next_id]
2485
 
            except KeyError:
2486
 
                raise errors.RevisionNotPresent(next_id, self)
2487
 
            yield next_id
2488
 
            if len(parents) == 0:
2489
 
                return
2490
 
            else:
2491
 
                next_id = parents[0]
 
2514
        stop_revisions = (None, _mod_revision.NULL_REVISION)
 
2515
        return graph.iter_lefthand_ancestry(revision_id, stop_revisions)
2492
2516
 
2493
2517
    def is_shared(self):
2494
2518
        """Return True if this repository is flagged as a shared repository."""
2595
2619
        types it should be a no-op that just returns.
2596
2620
 
2597
2621
        This stub method does not require a lock, but subclasses should use
2598
 
        @needs_write_lock as this is a long running call its reasonable to
 
2622
        @needs_write_lock as this is a long running call it's reasonable to
2599
2623
        implicitly lock for the user.
2600
2624
 
2601
2625
        :param hint: If not supplied, the whole repository is packed.
3354
3378
    'bzrlib.repofmt.groupcompress_repo',
3355
3379
    'RepositoryFormat2a',
3356
3380
    )
 
3381
format_registry.register_lazy(
 
3382
    'Bazaar development format 8\n',
 
3383
    'bzrlib.repofmt.groupcompress_repo',
 
3384
    'RepositoryFormat2aSubtree',
 
3385
    )
3357
3386
 
3358
3387
 
3359
3388
class InterRepository(InterObject):
3813
3842
                basis_id, delta, current_revision_id, parents_parents)
3814
3843
            cache[current_revision_id] = parent_tree
3815
3844
 
3816
 
    def _fetch_batch(self, revision_ids, basis_id, cache, a_graph=None):
 
3845
    def _fetch_batch(self, revision_ids, basis_id, cache):
3817
3846
        """Fetch across a few revisions.
3818
3847
 
3819
3848
        :param revision_ids: The revisions to copy
3820
3849
        :param basis_id: The revision_id of a tree that must be in cache, used
3821
3850
            as a basis for delta when no other base is available
3822
3851
        :param cache: A cache of RevisionTrees that we can use.
3823
 
        :param a_graph: A Graph object to determine the heads() of the
3824
 
            rich-root data stream.
3825
3852
        :return: The revision_id of the last converted tree. The RevisionTree
3826
3853
            for it will be in cache
3827
3854
        """
3895
3922
        if root_keys_to_create:
3896
3923
            root_stream = _mod_fetch._new_root_data_stream(
3897
3924
                root_keys_to_create, self._revision_id_to_root_id, parent_map,
3898
 
                self.source, graph=a_graph)
 
3925
                self.source)
3899
3926
            to_texts.insert_record_stream(root_stream)
3900
3927
        to_texts.insert_record_stream(from_texts.get_record_stream(
3901
3928
            text_keys, self.target._format._fetch_order,
3958
3985
        cache[basis_id] = basis_tree
3959
3986
        del basis_tree # We don't want to hang on to it here
3960
3987
        hints = []
3961
 
        if self._converting_to_rich_root and len(revision_ids) > 100:
3962
 
            a_graph = _mod_fetch._get_rich_root_heads_graph(self.source,
3963
 
                                                            revision_ids)
3964
 
        else:
3965
 
            a_graph = None
 
3988
        a_graph = None
3966
3989
 
3967
3990
        for offset in range(0, len(revision_ids), batch_size):
3968
3991
            self.target.start_write_group()
3970
3993
                pb.update('Transferring revisions', offset,
3971
3994
                          len(revision_ids))
3972
3995
                batch = revision_ids[offset:offset+batch_size]
3973
 
                basis_id = self._fetch_batch(batch, basis_id, cache,
3974
 
                                             a_graph=a_graph)
 
3996
                basis_id = self._fetch_batch(batch, basis_id, cache)
3975
3997
            except:
3976
3998
                self.source._safe_to_return_from_cache = False
3977
3999
                self.target.abort_write_group()
4043
4065
            basis_id = first_rev.parent_ids[0]
4044
4066
            # only valid as a basis if the target has it
4045
4067
            self.target.get_revision(basis_id)
4046
 
            # Try to get a basis tree - if its a ghost it will hit the
 
4068
            # Try to get a basis tree - if it's a ghost it will hit the
4047
4069
            # NoSuchRevision case.
4048
4070
            basis_tree = self.source.revision_tree(basis_id)
4049
4071
        except (IndexError, errors.NoSuchRevision):
4249
4271
                is_resume = False
4250
4272
            try:
4251
4273
                # locked_insert_stream performs a commit|suspend.
4252
 
                return self._locked_insert_stream(stream, src_format, is_resume)
 
4274
                return self._locked_insert_stream(stream, src_format,
 
4275
                    is_resume)
4253
4276
            except:
4254
4277
                self.target_repo.abort_write_group(suppress_errors=True)
4255
4278
                raise
4302
4325
                # required if the serializers are different only in terms of
4303
4326
                # the inventory.
4304
4327
                if src_serializer == to_serializer:
4305
 
                    self.target_repo.revisions.insert_record_stream(
4306
 
                        substream)
 
4328
                    self.target_repo.revisions.insert_record_stream(substream)
4307
4329
                else:
4308
4330
                    self._extract_and_insert_revisions(substream,
4309
4331
                        src_serializer)
4417
4439
        """Create a StreamSource streaming from from_repository."""
4418
4440
        self.from_repository = from_repository
4419
4441
        self.to_format = to_format
 
4442
        self._record_counter = RecordCounter()
4420
4443
 
4421
4444
    def delta_on_metadata(self):
4422
4445
        """Return True if delta's are permitted on metadata streams.