/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to breezy/check.py

  • Committer: Jelmer Vernooij
  • Date: 2017-06-10 00:21:41 UTC
  • mto: This revision was merged to the branch mainline in revision 6675.
  • Revision ID: jelmer@jelmer.uk-20170610002141-m1z5k7fs8laesa65
Fix import.

Show diffs side-by-side

added added

removed removed

Lines of Context:
breezy/check.py
39
39
so that when the dependent object is checked, matches can be pulled out and
40
40
evaluated in-line rather than re-reading the same data many times.
41
41
check_refs are tuples (kind, value). Currently defined kinds are:
 
42
 
42
43
* 'trees', where value is a revid and the looked up objects are revision trees.
43
44
* 'lefthand-distance', where value is a revid and the looked up objects are the
44
45
  distance along the lefthand path to NULL for that revid.
46
47
  indicating that the revision was found/not found.
47
48
"""
48
49
 
49
 
from bzrlib import errors
50
 
from bzrlib.branch import Branch
51
 
from bzrlib.bzrdir import BzrDir
52
 
from bzrlib.revision import NULL_REVISION
53
 
from bzrlib.symbol_versioning import deprecated_function, deprecated_in
54
 
from bzrlib.trace import note
55
 
import bzrlib.ui
56
 
from bzrlib.workingtree import WorkingTree
 
50
from __future__ import absolute_import
 
51
 
 
52
from . import (
 
53
    errors,
 
54
    ui,
 
55
    )
 
56
from .branch import Branch
 
57
from .controldir import ControlDir
 
58
from .revision import NULL_REVISION
 
59
from .sixish import (
 
60
    viewitems,
 
61
    )
 
62
from .trace import note
 
63
from .workingtree import WorkingTree
 
64
from .i18n import gettext
57
65
 
58
66
class Check(object):
59
67
    """Check a repository"""
60
68
 
 
69
    def __init__(self, repository, check_repo=True):
 
70
        self.repository = repository
 
71
 
 
72
    def report_results(self, verbose):
 
73
        raise NotImplementedError(self.report_results)
 
74
 
 
75
 
 
76
class VersionedFileCheck(Check):
 
77
    """Check a versioned file repository"""
 
78
 
61
79
    # The Check object interacts with InventoryEntry.check, etc.
62
80
 
63
81
    def __init__(self, repository, check_repo=True):
88
106
        if callback_refs is None:
89
107
            callback_refs = {}
90
108
        self.repository.lock_read()
91
 
        self.progress = bzrlib.ui.ui_factory.nested_progress_bar()
 
109
        self.progress = ui.ui_factory.nested_progress_bar()
92
110
        try:
93
 
            self.progress.update('check', 0, 4)
 
111
            self.progress.update(gettext('check'), 0, 4)
94
112
            if self.check_repo:
95
 
                self.progress.update('checking revisions', 0)
 
113
                self.progress.update(gettext('checking revisions'), 0)
96
114
                self.check_revisions()
97
 
                self.progress.update('checking commit contents', 1)
 
115
                self.progress.update(gettext('checking commit contents'), 1)
98
116
                self.repository._check_inventories(self)
99
 
                self.progress.update('checking file graphs', 2)
 
117
                self.progress.update(gettext('checking file graphs'), 2)
100
118
                # check_weaves is done after the revision scan so that
101
119
                # revision index is known to be valid.
102
120
                self.check_weaves()
103
 
            self.progress.update('checking branches and trees', 3)
 
121
            self.progress.update(gettext('checking branches and trees'), 3)
104
122
            if callback_refs:
105
123
                repo = self.repository
106
124
                # calculate all refs, and callback the objects requesting them.
113
131
                # landing].
114
132
                distances = set()
115
133
                existences = set()
116
 
                for ref, wantlist in callback_refs.iteritems():
 
134
                for ref, wantlist in viewitems(callback_refs):
117
135
                    wanting_items.update(wantlist)
118
136
                    kind, value = ref
119
137
                    if kind == 'trees':
126
144
                        raise AssertionError(
127
145
                            'unknown ref kind for ref %s' % ref)
128
146
                node_distances = repo.get_graph().find_lefthand_distances(distances)
129
 
                for key, distance in node_distances.iteritems():
 
147
                for key, distance in viewitems(node_distances):
130
148
                    refs[('lefthand-distance', key)] = distance
131
149
                    if key in existences and distance > 0:
132
150
                        refs[('revision-existence', key)] = True
170
188
        # - we can fill out existence flags at this point
171
189
        # - we can read the revision inventory sha at this point
172
190
        # - we can check properties and serialisers etc.
173
 
        if not self.repository.revision_graph_can_have_wrong_parents():
 
191
        if not self.repository._format.revision_graph_can_have_wrong_parents:
174
192
            # The check against the index isn't needed.
175
193
            self.revs_with_bad_parents_in_index = None
176
194
            for thing in revision_iterator:
187
205
            result.report_results(verbose)
188
206
 
189
207
    def _report_repo_results(self, verbose):
190
 
        note('checked repository %s format %s',
 
208
        note(gettext('checked repository {0} format {1}').format(
191
209
            self.repository.user_url,
192
 
            self.repository._format)
193
 
        note('%6d revisions', self.checked_rev_cnt)
194
 
        note('%6d file-ids', len(self.checked_weaves))
 
210
            self.repository._format))
 
211
        note(gettext('%6d revisions'), self.checked_rev_cnt)
 
212
        note(gettext('%6d file-ids'), len(self.checked_weaves))
195
213
        if verbose:
196
 
            note('%6d unreferenced text versions',
 
214
            note(gettext('%6d unreferenced text versions'),
197
215
                len(self.unreferenced_versions))
198
216
        if verbose and len(self.unreferenced_versions):
199
217
                for file_id, revision_id in self.unreferenced_versions:
200
 
                    note('unreferenced version: {%s} in %s', revision_id,
201
 
                        file_id)
 
218
                    note(gettext('unreferenced version: {{{0}}} in {1}').format(revision_id,
 
219
                        file_id))
202
220
        if self.missing_inventory_sha_cnt:
203
 
            note('%6d revisions are missing inventory_sha1',
 
221
            note(gettext('%6d revisions are missing inventory_sha1'),
204
222
                 self.missing_inventory_sha_cnt)
205
223
        if self.missing_revision_cnt:
206
 
            note('%6d revisions are mentioned but not present',
 
224
            note(gettext('%6d revisions are mentioned but not present'),
207
225
                 self.missing_revision_cnt)
208
226
        if len(self.ghosts):
209
 
            note('%6d ghost revisions', len(self.ghosts))
 
227
            note(gettext('%6d ghost revisions'), len(self.ghosts))
210
228
            if verbose:
211
229
                for ghost in self.ghosts:
212
230
                    note('      %s', ghost)
213
231
        if len(self.missing_parent_links):
214
 
            note('%6d revisions missing parents in ancestry',
 
232
            note(gettext('%6d revisions missing parents in ancestry'),
215
233
                 len(self.missing_parent_links))
216
234
            if verbose:
217
 
                for link, linkers in self.missing_parent_links.items():
218
 
                    note('      %s should be in the ancestry for:', link)
 
235
                for link, linkers in viewitems(self.missing_parent_links):
 
236
                    note(gettext('      %s should be in the ancestry for:'), link)
219
237
                    for linker in linkers:
220
238
                        note('       * %s', linker)
221
239
        if len(self.inconsistent_parents):
222
 
            note('%6d inconsistent parents', len(self.inconsistent_parents))
 
240
            note(gettext('%6d inconsistent parents'), len(self.inconsistent_parents))
223
241
            if verbose:
224
242
                for info in self.inconsistent_parents:
225
243
                    revision_id, file_id, found_parents, correct_parents = info
226
 
                    note('      * %s version %s has parents %r '
227
 
                         'but should have %r'
228
 
                         % (file_id, revision_id, found_parents,
 
244
                    note(gettext('      * {0} version {1} has parents {2!r} '
 
245
                         'but should have {3!r}').format(
 
246
                         file_id, revision_id, found_parents,
229
247
                             correct_parents))
230
248
        if self.revs_with_bad_parents_in_index:
231
 
            note('%6d revisions have incorrect parents in the revision index',
 
249
            note(gettext(
 
250
                 '%6d revisions have incorrect parents in the revision index'),
232
251
                 len(self.revs_with_bad_parents_in_index))
233
252
            if verbose:
234
253
                for item in self.revs_with_bad_parents_in_index:
235
254
                    revision_id, index_parents, actual_parents = item
236
 
                    note(
237
 
                        '       %s has wrong parents in index: '
238
 
                        '%r should be %r',
239
 
                        revision_id, index_parents, actual_parents)
 
255
                    note(gettext(
 
256
                        '       {0} has wrong parents in index: '
 
257
                        '{1!r} should be {2!r}').format(
 
258
                        revision_id, index_parents, actual_parents))
240
259
        for item in self._report_items:
241
260
            note(item)
242
261
 
247
266
        :param rev: A revision or None to indicate a missing revision.
248
267
        """
249
268
        if rev.revision_id != rev_id:
250
 
            self._report_items.append(
251
 
                'Mismatched internal revid {%s} and index revid {%s}' % (
 
269
            self._report_items.append(gettext(
 
270
                'Mismatched internal revid {{{0}}} and index revid {{{1}}}').format(
252
271
                rev.revision_id, rev_id))
253
272
            rev_id = rev.revision_id
254
273
        # Check this revision tree etc, and count as seen when we encounter a
277
296
        existing = self.pending_keys.get(key)
278
297
        if existing:
279
298
            if sha1 != existing[1]:
280
 
                self._report_items.append('Multiple expected sha1s for %s. {%s}'
281
 
                    ' expects {%s}, {%s} expects {%s}', (
 
299
                self._report_items.append(gettext('Multiple expected sha1s for {0}. {{{1}}}'
 
300
                    ' expects {{{2}}}, {{{3}}} expects {{{4}}}').format(
282
301
                    key, referer, sha1, existing[1], existing[0]))
283
302
        else:
284
303
            self.pending_keys[key] = (kind, sha1, referer)
287
306
        """Check all the weaves we can get our hands on.
288
307
        """
289
308
        weave_ids = []
290
 
        storebar = bzrlib.ui.ui_factory.nested_progress_bar()
 
309
        storebar = ui.ui_factory.nested_progress_bar()
291
310
        try:
292
311
            self._check_weaves(storebar)
293
312
        finally:
304
323
                text_key_references=self.text_key_references,
305
324
                ancestors=self.ancestors)
306
325
        storebar.update('file-graph', 1)
307
 
        result = weave_checker.check_file_version_parents(
 
326
        wrongs, unused_versions = weave_checker.check_file_version_parents(
308
327
            self.repository.texts)
309
328
        self.checked_weaves = weave_checker.file_ids
310
 
        bad_parents, unused_versions = result
311
 
        bad_parents = bad_parents.items()
312
 
        for text_key, (stored_parents, correct_parents) in bad_parents:
 
329
        for text_key, (stored_parents, correct_parents) in viewitems(wrongs):
313
330
            # XXX not ready for id join/split operations.
314
331
            weave_id = text_key[0]
315
332
            revision_id = text_key[-1]
328
345
            self.text_key_references[key] = True
329
346
 
330
347
 
331
 
@deprecated_function(deprecated_in((1,6,0)))
332
 
def check(branch, verbose):
333
 
    """Run consistency checks on a branch.
334
 
 
335
 
    Results are reported through logging.
336
 
 
337
 
    Deprecated in 1.6.  Please use check_dwim instead.
338
 
 
339
 
    :raise BzrCheckError: if there's a consistency error.
340
 
    """
341
 
    check_branch(branch, verbose)
342
 
 
343
 
 
344
 
@deprecated_function(deprecated_in((1,16,0)))
345
 
def check_branch(branch, verbose):
346
 
    """Run consistency checks on a branch.
347
 
 
348
 
    Results are reported through logging.
349
 
 
350
 
    :raise BzrCheckError: if there's a consistency error.
351
 
    """
352
 
    branch.lock_read()
353
 
    try:
354
 
        needed_refs = {}
355
 
        for ref in branch._get_check_refs():
356
 
            needed_refs.setdefault(ref, []).append(branch)
357
 
        result = branch.repository.check([branch.last_revision()], needed_refs)
358
 
        branch_result = result.other_results[0]
359
 
    finally:
360
 
        branch.unlock()
361
 
    branch_result.report_results(verbose)
362
 
 
363
 
 
364
348
def scan_branch(branch, needed_refs, to_unlock):
365
349
    """Scan a branch for refs.
366
350
 
368
352
    :param needed_refs: Refs we are accumulating.
369
353
    :param to_unlock: The unlock list accumulating.
370
354
    """
371
 
    note("Checking branch at '%s'." % (branch.base,))
 
355
    note(gettext("Checking branch at '%s'.") % (branch.base,))
372
356
    branch.lock_read()
373
357
    to_unlock.append(branch)
374
358
    branch_refs = branch._get_check_refs()
388
372
    """
389
373
    if base_tree is not None and tree.basedir == base_tree.basedir:
390
374
        return
391
 
    note("Checking working tree at '%s'." % (tree.basedir,))
 
375
    note(gettext("Checking working tree at '%s'.") % (tree.basedir,))
392
376
    tree.lock_read()
393
377
    to_unlock.append(tree)
394
378
    tree_refs = tree._get_check_refs()
405
389
    """
406
390
    try:
407
391
        base_tree, branch, repo, relpath = \
408
 
                        BzrDir.open_containing_tree_branch_or_repository(path)
 
392
                        ControlDir.open_containing_tree_branch_or_repository(path)
409
393
    except errors.NotBranchError:
410
394
        base_tree = branch = repo = None
411
395
 
441
425
                    if do_branch:
442
426
                        scan_branch(branch, needed_refs, to_unlock)
443
427
            if do_branch and not branches:
444
 
                note("No branch found at specified location.")
 
428
                note(gettext("No branch found at specified location."))
445
429
            if do_tree and base_tree is None and not saw_tree:
446
 
                note("No working tree found at specified location.")
 
430
                note(gettext("No working tree found at specified location."))
447
431
            if do_repo or do_branch or do_tree:
448
432
                if do_repo:
449
 
                    note("Checking repository at '%s'."
 
433
                    note(gettext("Checking repository at '%s'.")
450
434
                         % (repo.user_url,))
451
435
                result = repo.check(None, callback_refs=needed_refs,
452
436
                    check_repo=do_repo)
453
437
                result.report_results(verbose)
454
438
        else:
455
439
            if do_tree:
456
 
                note("No working tree found at specified location.")
 
440
                note(gettext("No working tree found at specified location."))
457
441
            if do_branch:
458
 
                note("No branch found at specified location.")
 
442
                note(gettext("No branch found at specified location."))
459
443
            if do_repo:
460
 
                note("No repository found at specified location.")
 
444
                note(gettext("No repository found at specified location."))
461
445
    finally:
462
446
        for thing in to_unlock:
463
447
            thing.unlock()