/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/repofmt/knitrepo.py

  • Committer: Canonical.com Patch Queue Manager
  • Date: 2008-09-26 05:14:51 UTC
  • mfrom: (3737.1.3 trivial_python_compat)
  • Revision ID: pqm@pqm.ubuntu.com-20080926051451-dvc1qg5inn7msjvr
(jam) Some win32 tweaks for the faster iter_changes code.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2007-2010 Canonical Ltd
 
1
# Copyright (C) 2005, 2006, 2007 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
from bzrlib.lazy_import import lazy_import
18
18
lazy_import(globals(), """
19
19
from bzrlib import (
 
20
    debug,
 
21
    )
 
22
from bzrlib.store import revision
 
23
from bzrlib.store.revision.knit import KnitRevisionStore
 
24
""")
 
25
from bzrlib import (
20
26
    bzrdir,
21
27
    errors,
22
 
    knit as _mod_knit,
 
28
    knit,
23
29
    lockable_files,
24
30
    lockdir,
25
31
    osutils,
26
 
    revision as _mod_revision,
27
 
    trace,
 
32
    symbol_versioning,
28
33
    transactions,
29
 
    versionedfile,
30
34
    xml5,
31
35
    xml6,
32
36
    xml7,
33
37
    )
34
 
""")
35
 
from bzrlib import (
36
 
    symbol_versioning,
37
 
    )
38
38
from bzrlib.decorators import needs_read_lock, needs_write_lock
 
39
from bzrlib.knit import KnitVersionedFiles, _KndxIndex, _KnitKeyAccess
39
40
from bzrlib.repository import (
40
41
    CommitBuilder,
41
 
    IsInWriteGroupError,
42
42
    MetaDirRepository,
43
43
    MetaDirRepositoryFormat,
44
44
    RepositoryFormat,
45
45
    RootCommitBuilder,
46
46
    )
 
47
import bzrlib.revision as _mod_revision
 
48
from bzrlib.store.versioned import VersionedFileStore
 
49
from bzrlib.trace import mutter, mutter_callsite
 
50
from bzrlib.util import bencode
 
51
from bzrlib.versionedfile import ConstantMapper, HashEscapedPrefixMapper
47
52
 
48
53
 
49
54
class _KnitParentsProvider(object):
54
59
    def __repr__(self):
55
60
        return 'KnitParentsProvider(%r)' % self._knit
56
61
 
 
62
    @symbol_versioning.deprecated_method(symbol_versioning.one_one)
 
63
    def get_parents(self, revision_ids):
 
64
        """See graph._StackedParentsProvider.get_parents"""
 
65
        parent_map = self.get_parent_map(revision_ids)
 
66
        return [parent_map.get(r, None) for r in revision_ids]
 
67
 
57
68
    def get_parent_map(self, keys):
58
 
        """See graph.StackedParentsProvider.get_parent_map"""
 
69
        """See graph._StackedParentsProvider.get_parent_map"""
59
70
        parent_map = {}
60
71
        for revision_id in keys:
61
72
            if revision_id is None:
86
97
        return 'KnitsParentsProvider(%r)' % self._knit
87
98
 
88
99
    def get_parent_map(self, keys):
89
 
        """See graph.StackedParentsProvider.get_parent_map"""
 
100
        """See graph._StackedParentsProvider.get_parent_map"""
90
101
        parent_map = self._knit.get_parent_map(
91
102
            [self._prefix + (key,) for key in keys])
92
103
        result = {}
119
130
        self._commit_builder_class = _commit_builder_class
120
131
        self._serializer = _serializer
121
132
        self._reconcile_fixes_text_parents = True
 
133
        self._fetch_uses_deltas = True
 
134
        self._fetch_order = 'topological'
122
135
 
123
136
    @needs_read_lock
124
137
    def _all_revision_ids(self):
208
221
        revision_id = osutils.safe_revision_id(revision_id)
209
222
        return self.get_revision_reconcile(revision_id)
210
223
 
211
 
    def _refresh_data(self):
212
 
        if not self.is_locked():
213
 
            return
214
 
        if self.is_in_write_group():
215
 
            raise IsInWriteGroupError(self)
216
 
        # Create a new transaction to force all knits to see the scope change.
217
 
        # This is safe because we're outside a write group.
218
 
        self.control_files._finish_transaction()
219
 
        if self.is_write_locked():
220
 
            self.control_files._set_write_transaction()
221
 
        else:
222
 
            self.control_files._set_read_transaction()
223
 
 
224
224
    @needs_write_lock
225
225
    def reconcile(self, other=None, thorough=False):
226
226
        """Reconcile this repository."""
228
228
        reconciler = KnitReconciler(self, thorough=thorough)
229
229
        reconciler.reconcile()
230
230
        return reconciler
231
 
 
 
231
    
232
232
    def _make_parents_provider(self):
233
233
        return _KnitsParentsProvider(self.revisions)
234
234
 
235
 
    def _find_inconsistent_revision_parents(self, revisions_iterator=None):
 
235
    def _find_inconsistent_revision_parents(self):
236
236
        """Find revisions with different parent lists in the revision object
237
237
        and in the index graph.
238
238
 
239
 
        :param revisions_iterator: None, or an iterator of (revid,
240
 
            Revision-or-None). This iterator controls the revisions checked.
241
239
        :returns: an iterator yielding tuples of (revison-id, parents-in-index,
242
240
            parents-in-revision).
243
241
        """
244
242
        if not self.is_locked():
245
243
            raise AssertionError()
246
244
        vf = self.revisions
247
 
        if revisions_iterator is None:
248
 
            revisions_iterator = self._iter_revisions(None)
249
 
        for revid, revision in revisions_iterator:
250
 
            if revision is None:
251
 
                pass
252
 
            parent_map = vf.get_parent_map([(revid,)])
 
245
        for index_version in vf.keys():
 
246
            parent_map = vf.get_parent_map([index_version])
253
247
            parents_according_to_index = tuple(parent[-1] for parent in
254
 
                parent_map[(revid,)])
 
248
                parent_map[index_version])
 
249
            revision = self.get_revision(index_version[-1])
255
250
            parents_according_to_revision = tuple(revision.parent_ids)
256
251
            if parents_according_to_index != parents_according_to_revision:
257
 
                yield (revid, parents_according_to_index,
 
252
                yield (index_version[-1], parents_according_to_index,
258
253
                    parents_according_to_revision)
259
254
 
260
255
    def _check_for_inconsistent_revision_parents(self):
270
265
 
271
266
 
272
267
class RepositoryFormatKnit(MetaDirRepositoryFormat):
273
 
    """Bzr repository knit format (generalized).
 
268
    """Bzr repository knit format (generalized). 
274
269
 
275
270
    This repository format has:
276
271
     - knits for file texts and inventory
292
287
    _commit_builder_class = None
293
288
    # Set this attribute in derived clases to control the _serializer that the
294
289
    # repository objects will have passed to their constructor.
295
 
    @property
296
 
    def _serializer(self):
297
 
        return xml5.serializer_v5
 
290
    _serializer = xml5.serializer_v5
298
291
    # Knit based repositories handle ghosts reasonably well.
299
292
    supports_ghosts = True
300
293
    # External lookups are not supported in this format.
301
294
    supports_external_lookups = False
302
 
    # No CHK support.
303
 
    supports_chks = False
304
 
    _fetch_order = 'topological'
305
 
    _fetch_uses_deltas = True
306
 
    fast_deltas = False
307
295
 
308
296
    def _get_inventories(self, repo_transport, repo, name='inventory'):
309
 
        mapper = versionedfile.ConstantMapper(name)
310
 
        index = _mod_knit._KndxIndex(repo_transport, mapper,
311
 
            repo.get_transaction, repo.is_write_locked, repo.is_locked)
312
 
        access = _mod_knit._KnitKeyAccess(repo_transport, mapper)
313
 
        return _mod_knit.KnitVersionedFiles(index, access, annotated=False)
 
297
        mapper = ConstantMapper(name)
 
298
        index = _KndxIndex(repo_transport, mapper, repo.get_transaction,
 
299
            repo.is_write_locked, repo.is_locked)
 
300
        access = _KnitKeyAccess(repo_transport, mapper)
 
301
        return KnitVersionedFiles(index, access, annotated=False)
314
302
 
315
303
    def _get_revisions(self, repo_transport, repo):
316
 
        mapper = versionedfile.ConstantMapper('revisions')
317
 
        index = _mod_knit._KndxIndex(repo_transport, mapper,
318
 
            repo.get_transaction, repo.is_write_locked, repo.is_locked)
319
 
        access = _mod_knit._KnitKeyAccess(repo_transport, mapper)
320
 
        return _mod_knit.KnitVersionedFiles(index, access, max_delta_chain=0,
 
304
        mapper = ConstantMapper('revisions')
 
305
        index = _KndxIndex(repo_transport, mapper, repo.get_transaction,
 
306
            repo.is_write_locked, repo.is_locked)
 
307
        access = _KnitKeyAccess(repo_transport, mapper)
 
308
        return KnitVersionedFiles(index, access, max_delta_chain=0,
321
309
            annotated=False)
322
310
 
323
311
    def _get_signatures(self, repo_transport, repo):
324
 
        mapper = versionedfile.ConstantMapper('signatures')
325
 
        index = _mod_knit._KndxIndex(repo_transport, mapper,
326
 
            repo.get_transaction, repo.is_write_locked, repo.is_locked)
327
 
        access = _mod_knit._KnitKeyAccess(repo_transport, mapper)
328
 
        return _mod_knit.KnitVersionedFiles(index, access, max_delta_chain=0,
 
312
        mapper = ConstantMapper('signatures')
 
313
        index = _KndxIndex(repo_transport, mapper, repo.get_transaction,
 
314
            repo.is_write_locked, repo.is_locked)
 
315
        access = _KnitKeyAccess(repo_transport, mapper)
 
316
        return KnitVersionedFiles(index, access, max_delta_chain=0,
329
317
            annotated=False)
330
318
 
331
319
    def _get_texts(self, repo_transport, repo):
332
 
        mapper = versionedfile.HashEscapedPrefixMapper()
 
320
        mapper = HashEscapedPrefixMapper()
333
321
        base_transport = repo_transport.clone('knits')
334
 
        index = _mod_knit._KndxIndex(base_transport, mapper,
335
 
            repo.get_transaction, repo.is_write_locked, repo.is_locked)
336
 
        access = _mod_knit._KnitKeyAccess(base_transport, mapper)
337
 
        return _mod_knit.KnitVersionedFiles(index, access, max_delta_chain=200,
 
322
        index = _KndxIndex(base_transport, mapper, repo.get_transaction,
 
323
            repo.is_write_locked, repo.is_locked)
 
324
        access = _KnitKeyAccess(base_transport, mapper)
 
325
        return KnitVersionedFiles(index, access, max_delta_chain=200,
338
326
            annotated=True)
339
327
 
340
328
    def initialize(self, a_bzrdir, shared=False):
345
333
        :param shared: If true the repository will be initialized as a shared
346
334
                       repository.
347
335
        """
348
 
        trace.mutter('creating repository in %s.', a_bzrdir.transport.base)
 
336
        mutter('creating repository in %s.', a_bzrdir.transport.base)
349
337
        dirs = ['knits']
350
338
        files = []
351
339
        utf8_files = [('format', self.get_format_string())]
352
 
 
 
340
        
353
341
        self._upload_blank_content(a_bzrdir, dirs, files, utf8_files, shared)
354
342
        repo_transport = a_bzrdir.get_repository_transport(None)
355
343
        control_files = lockable_files.LockableFiles(repo_transport,
363
351
        result.revisions.get_parent_map([('A',)])
364
352
        result.signatures.get_parent_map([('A',)])
365
353
        result.unlock()
366
 
        self._run_post_repo_init_hooks(result, a_bzrdir, shared)
367
354
        return result
368
355
 
369
356
    def open(self, a_bzrdir, _found=False, _override_transport=None):
370
357
        """See RepositoryFormat.open().
371
 
 
 
358
        
372
359
        :param _override_transport: INTERNAL USE ONLY. Allows opening the
373
360
                                    repository at a slightly different url
374
361
                                    than normal. I.e. during 'upgrade'.
390
377
        repo.signatures = self._get_signatures(repo_transport, repo)
391
378
        repo.inventories = self._get_inventories(repo_transport, repo)
392
379
        repo.texts = self._get_texts(repo_transport, repo)
393
 
        repo.chk_bytes = None
394
380
        repo._transport = repo_transport
395
381
        return repo
396
382
 
413
399
 
414
400
    repository_class = KnitRepository
415
401
    _commit_builder_class = CommitBuilder
416
 
    @property
417
 
    def _serializer(self):
418
 
        return xml5.serializer_v5
 
402
    _serializer = xml5.serializer_v5
419
403
 
420
404
    def __ne__(self, other):
421
405
        return self.__class__ is not other.__class__
428
412
        """See RepositoryFormat.get_format_description()."""
429
413
        return "Knit repository format 1"
430
414
 
 
415
    def check_conversion_target(self, target_format):
 
416
        pass
 
417
 
431
418
 
432
419
class RepositoryFormatKnit3(RepositoryFormatKnit):
433
420
    """Bzr repository knit format 3.
448
435
    repository_class = KnitRepository
449
436
    _commit_builder_class = RootCommitBuilder
450
437
    rich_root_data = True
451
 
    experimental = True
452
438
    supports_tree_reference = True
453
 
    @property
454
 
    def _serializer(self):
455
 
        return xml7.serializer_v7
 
439
    _serializer = xml7.serializer_v7
456
440
 
457
441
    def _get_matching_bzrdir(self):
458
442
        return bzrdir.format_registry.make_bzrdir('dirstate-with-subtree')
462
446
 
463
447
    _matchingbzrdir = property(_get_matching_bzrdir, _ignore_setting_bzrdir)
464
448
 
 
449
    def check_conversion_target(self, target_format):
 
450
        if not target_format.rich_root_data:
 
451
            raise errors.BadConversionTarget(
 
452
                'Does not support rich root data.', target_format)
 
453
        if not getattr(target_format, 'supports_tree_reference', False):
 
454
            raise errors.BadConversionTarget(
 
455
                'Does not support nested trees', target_format)
 
456
            
465
457
    def get_format_string(self):
466
458
        """See RepositoryFormat.get_format_string()."""
467
459
        return "Bazaar Knit Repository Format 3 (bzr 0.15)\n"
491
483
    _commit_builder_class = RootCommitBuilder
492
484
    rich_root_data = True
493
485
    supports_tree_reference = False
494
 
    @property
495
 
    def _serializer(self):
496
 
        return xml6.serializer_v6
 
486
    _serializer = xml6.serializer_v6
497
487
 
498
488
    def _get_matching_bzrdir(self):
499
489
        return bzrdir.format_registry.make_bzrdir('rich-root')
503
493
 
504
494
    _matchingbzrdir = property(_get_matching_bzrdir, _ignore_setting_bzrdir)
505
495
 
 
496
    def check_conversion_target(self, target_format):
 
497
        if not target_format.rich_root_data:
 
498
            raise errors.BadConversionTarget(
 
499
                'Does not support rich root data.', target_format)
 
500
 
506
501
    def get_format_string(self):
507
502
        """See RepositoryFormat.get_format_string()."""
508
503
        return 'Bazaar Knit Repository Format 4 (bzr 1.0)\n'