~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/check.py

  • Committer: Martin Pool
  • Date: 2005-07-05 07:19:12 UTC
  • Revision ID: mbp@sourcefrog.net-20050705071911-6a116ea7c5379658
- Renamed merge3 test suite for easier access.

- New merge approach based on finding triple-matching regions, and comparing
  the regions between them; add find_sync_regions() and some tests for it.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
#! /usr/bin/python
2
 
 
3
 
 
4
1
# Copyright (C) 2004, 2005 by Martin Pool
5
2
# Copyright (C) 2005 by Canonical Ltd
6
3
 
7
 
 
8
4
# This program is free software; you can redistribute it and/or modify
9
5
# it under the terms of the GNU General Public License as published by
10
6
# the Free Software Foundation; either version 2 of the License, or
21
17
 
22
18
 
23
19
 
24
 
######################################################################
25
 
# consistency checks
26
 
 
27
 
def check():
28
 
    """Consistency check of tree."""
29
 
    assert_in_tree()
30
 
    mutter("checking tree")
31
 
    check_patches_exist()
32
 
    check_patch_chaining()
33
 
    check_patch_uniqueness()
34
 
    check_inventory()
35
 
    mutter("tree looks OK")
36
 
    ## TODO: Check that previous-inventory and previous-manifest
37
 
    ## are the same as those stored in the previous changeset.
38
 
 
39
 
    ## TODO: Check all patches present in patch directory are
40
 
    ## mentioned in patch history; having an orphaned patch only gives
41
 
    ## a warning.
42
 
 
43
 
    ## TODO: Check cached data is consistent with data reconstructed
44
 
    ## from scratch.
45
 
 
46
 
    ## TODO: Check no control files are versioned.
47
 
 
48
 
    ## TODO: Check that the before-hash of each file in a later
49
 
    ## revision matches the after-hash in the previous revision to
50
 
    ## touch it.
51
 
 
52
 
 
53
 
def check_inventory():
54
 
    mutter("checking inventory file and ids...")
55
 
    seen_ids = Set()
56
 
    seen_names = Set()
 
20
 
 
21
def check(branch):
 
22
    """Run consistency checks on a branch.
 
23
 
 
24
    TODO: Also check non-mainline revisions mentioned as parents.
 
25
 
 
26
    TODO: Check for extra files in the control directory.
 
27
    """
 
28
    from bzrlib.trace import mutter
 
29
    from bzrlib.errors import BzrCheckError
 
30
    from bzrlib.osutils import fingerprint_file
 
31
    from bzrlib.progress import ProgressBar
 
32
 
 
33
    branch.lock_read()
 
34
 
 
35
    try:
 
36
        pb = ProgressBar(show_spinner=True)
 
37
        last_rev_id = None
 
38
 
 
39
        missing_inventory_sha_cnt = 0
 
40
        missing_revision_sha_cnt = 0
 
41
 
 
42
        history = branch.revision_history()
 
43
        revno = 0
 
44
        revcount = len(history)
 
45
        mismatch_inv_id = []
 
46
 
 
47
        # for all texts checked, text_id -> sha1
 
48
        checked_texts = {}
 
49
 
 
50
        for rev_id in history:
 
51
            revno += 1
 
52
            pb.update('checking revision', revno, revcount)
 
53
            mutter('    revision {%s}' % rev_id)
 
54
            rev = branch.get_revision(rev_id)
 
55
            if rev.revision_id != rev_id:
 
56
                raise BzrCheckError('wrong internal revision id in revision {%s}'
 
57
                                    % rev_id)
 
58
 
 
59
            # check the previous history entry is a parent of this entry
 
60
            if rev.parents:
 
61
                if last_rev_id is None:
 
62
                    raise BzrCheckError("revision {%s} has %d parents, but is the "
 
63
                                        "start of the branch"
 
64
                                        % (rev_id, len(rev.parents)))
 
65
                for prr in rev.parents:
 
66
                    if prr.revision_id == last_rev_id:
 
67
                        break
 
68
                else:
 
69
                    raise BzrCheckError("previous revision {%s} not listed among "
 
70
                                        "parents of {%s}"
 
71
                                        % (last_rev_id, rev_id))
 
72
 
 
73
                for prr in rev.parents:
 
74
                    if prr.revision_sha1 is None:
 
75
                        missing_revision_sha_cnt += 1
 
76
                        continue
 
77
                    prid = prr.revision_id
 
78
                    actual_sha = branch.get_revision_sha1(prid)
 
79
                    if prr.revision_sha1 != actual_sha:
 
80
                        raise BzrCheckError("mismatched revision sha1 for "
 
81
                                            "parent {%s} of {%s}: %s vs %s"
 
82
                                            % (prid, rev_id,
 
83
                                               prr.revision_sha1, actual_sha))
 
84
            elif last_rev_id:
 
85
                raise BzrCheckError("revision {%s} has no parents listed but preceded "
 
86
                                    "by {%s}"
 
87
                                    % (rev_id, last_rev_id))
 
88
 
 
89
            if rev.inventory_id != rev_id:
 
90
                mismatch_inv_id.append(rev_id)
 
91
 
 
92
            ## TODO: Check all the required fields are present on the revision.
 
93
 
 
94
            if rev.inventory_sha1:
 
95
                inv_sha1 = branch.get_inventory_sha1(rev.inventory_id)
 
96
                if inv_sha1 != rev.inventory_sha1:
 
97
                    raise BzrCheckError('Inventory sha1 hash doesn\'t match'
 
98
                        ' value in revision {%s}' % rev_id)
 
99
            else:
 
100
                missing_inventory_sha_cnt += 1
 
101
                mutter("no inventory_sha1 on revision {%s}" % rev_id)
 
102
 
 
103
            inv = branch.get_inventory(rev.inventory_id)
 
104
            seen_ids = {}
 
105
            seen_names = {}
 
106
 
 
107
            ## p('revision %d/%d file ids' % (revno, revcount))
 
108
            for file_id in inv:
 
109
                if file_id in seen_ids:
 
110
                    raise BzrCheckError('duplicated file_id {%s} '
 
111
                                        'in inventory for revision {%s}'
 
112
                                        % (file_id, rev_id))
 
113
                seen_ids[file_id] = True
 
114
 
 
115
            i = 0
 
116
            for file_id in inv:
 
117
                i += 1
 
118
                if i & 31 == 0:
 
119
                    pb.tick()
 
120
 
 
121
                ie = inv[file_id]
 
122
 
 
123
                if ie.parent_id != None:
 
124
                    if ie.parent_id not in seen_ids:
 
125
                        raise BzrCheckError('missing parent {%s} in inventory for revision {%s}'
 
126
                                % (ie.parent_id, rev_id))
 
127
 
 
128
                if ie.kind == 'file':
 
129
                    if ie.text_id in checked_texts:
 
130
                        fp = checked_texts[ie.text_id]
 
131
                    else:
 
132
                        if not ie.text_id in branch.text_store:
 
133
                            raise BzrCheckError('text {%s} not in text_store' % ie.text_id)
 
134
 
 
135
                        tf = branch.text_store[ie.text_id]
 
136
                        fp = fingerprint_file(tf)
 
137
                        checked_texts[ie.text_id] = fp
 
138
 
 
139
                    if ie.text_size != fp['size']:
 
140
                        raise BzrCheckError('text {%s} wrong size' % ie.text_id)
 
141
                    if ie.text_sha1 != fp['sha1']:
 
142
                        raise BzrCheckError('text {%s} wrong sha1' % ie.text_id)
 
143
                elif ie.kind == 'directory':
 
144
                    if ie.text_sha1 != None or ie.text_size != None or ie.text_id != None:
 
145
                        raise BzrCheckError('directory {%s} has text in revision {%s}'
 
146
                                % (file_id, rev_id))
 
147
 
 
148
            pb.tick()
 
149
            for path, ie in inv.iter_entries():
 
150
                if path in seen_names:
 
151
                    raise BzrCheckError('duplicated path %s '
 
152
                                        'in inventory for revision {%s}'
 
153
                                        % (path, rev_id))
 
154
            seen_names[path] = True
 
155
            last_rev_id = rev_id
 
156
 
 
157
    finally:
 
158
        branch.unlock()
 
159
 
 
160
    pb.clear()
 
161
 
 
162
    print 'checked %d revisions, %d file texts' % (revcount, len(checked_texts))
57
163
    
58
 
    for l in controlfile('inventory').readlines():
59
 
        parts = l.split()
60
 
        if len(parts) != 2:
61
 
            bailout("malformed inventory line: " + `l`)
62
 
        file_id, name = parts
63
 
        
64
 
        if file_id in seen_ids:
65
 
            bailout("duplicated file id " + file_id)
66
 
        seen_ids.add(file_id)
67
 
 
68
 
        if name in seen_names:
69
 
            bailout("duplicated file name in inventory: " + quotefn(name))
70
 
        seen_names.add(name)
71
 
        
72
 
        if is_control_file(name):
73
 
            raise BzrError("control file %s present in inventory" % quotefn(name))
74
 
 
75
 
 
76
 
def check_patches_exist():
77
 
    """Check constraint of current version: all patches exist"""
78
 
    mutter("checking all patches are present...")
79
 
    for pid in revision_history():
80
 
        read_patch_header(pid)
81
 
 
82
 
 
83
 
def check_patch_chaining():
84
 
    """Check ancestry of patches and history file is consistent"""
85
 
    mutter("checking patch chaining...")
86
 
    prev = None
87
 
    for pid in revision_history():
88
 
        log_prev = read_patch_header(pid).precursor
89
 
        if log_prev != prev:
90
 
            bailout("inconsistent precursor links on " + pid)
91
 
        prev = pid
92
 
 
93
 
 
94
 
def check_patch_uniqueness():
95
 
    """Make sure no patch is listed twice in the history.
96
 
 
97
 
    This should be implied by having correct ancestry but I'll check it
98
 
    anyhow."""
99
 
    mutter("checking history for duplicates...")
100
 
    seen = Set()
101
 
    for pid in revision_history():
102
 
        if pid in seen:
103
 
            bailout("patch " + pid + " appears twice in history")
104
 
        seen.add(pid)
105
 
        
106
 
 
 
164
    if missing_inventory_sha_cnt:
 
165
        print '%d revisions are missing inventory_sha1' % missing_inventory_sha_cnt
 
166
 
 
167
    if missing_revision_sha_cnt:
 
168
        print '%d parent links are missing revision_sha1' % missing_revision_sha_cnt
 
169
 
 
170
    if (missing_inventory_sha_cnt
 
171
        or missing_revision_sha_cnt):
 
172
        print '  (use "bzr upgrade" to fix them)'
 
173
 
 
174
    if mismatch_inv_id:
 
175
        print '%d revisions have mismatched inventory ids:' % len(mismatch_inv_id)
 
176
        for rev_id in mismatch_inv_id:
 
177
            print '  ', rev_id