/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to shamap.py

Merge thin-pack work.

Show diffs side-by-side

added added

removed removed

Lines of Context:
16
16
 
17
17
"""Map from Git sha's to Bazaar objects."""
18
18
 
19
 
import bzrlib
20
 
 
21
19
from bzrlib.errors import NoSuchRevision
22
20
 
23
 
import os
24
 
 
25
 
 
26
 
def check_pysqlite_version(sqlite3):
27
 
    """Check that sqlite library is compatible.
28
 
 
29
 
    """
30
 
    if (sqlite3.sqlite_version_info[0] < 3 or 
31
 
            (sqlite3.sqlite_version_info[0] == 3 and 
32
 
             sqlite3.sqlite_version_info[1] < 3)):
33
 
        warning('Needs at least sqlite 3.3.x')
34
 
        raise bzrlib.errors.BzrError("incompatible sqlite library")
35
 
 
36
 
try:
37
 
    try:
38
 
        import sqlite3
39
 
        check_pysqlite_version(sqlite3)
40
 
    except (ImportError, bzrlib.errors.BzrError), e: 
41
 
        from pysqlite2 import dbapi2 as sqlite3
42
 
        check_pysqlite_version(sqlite3)
43
 
except:
44
 
    warning('Needs at least Python2.5 or Python2.4 with the pysqlite2 '
45
 
            'module')
46
 
    raise bzrlib.errors.BzrError("missing sqlite library")
47
 
 
 
21
 
 
22
class GitObjectConverter(object):
 
23
 
 
24
    def __init__(self, repository, mapping=None):
 
25
        self.repository = repository
 
26
        if mapping is None:
 
27
            self.mapping = self.repository.get_mapping()
 
28
        else:
 
29
            self.mapping = mapping
 
30
 
 
31
    def __getitem__(self, sha):
 
32
        # Commit
 
33
        revid = self.mapping.revision_id_foreign_to_bzr(sha)
 
34
        try:
 
35
            rev = self.repository.get_revision(revid)
 
36
        except NoSuchRevision:
 
37
            pass
 
38
        else:
 
39
            return reconstruct_git_commit(rev)
 
40
 
 
41
        # TODO: Yeah, this won't scale, but the only alternative is a 
 
42
        # custom map..
 
43
        for (fileid, revision) in self.repository.texts.keys():
 
44
            blob = self._get_blob(
 
45
            print revision
 
46
            
48
47
 
49
48
class GitShaMap(object):
50
49
 
51
50
    def __init__(self, transport):
52
51
        self.transport = transport
53
 
        self.db = sqlite3.connect(
54
 
            os.path.join(self.transport.local_abspath("."), "git.db"))
55
 
        self.db.executescript("""
56
 
        create table if not exists commits(sha1 text, revid text, tree_sha text);
57
 
        create index if not exists commit_sha1 on commits(sha1);
58
 
        create table if not exists blobs(sha1 text, fileid text, revid text);
59
 
        create index if not exists blobs_sha1 on blobs(sha1);
60
 
        create table if not exists trees(sha1 text, fileid text, revid text);
61
 
        create index if not exists trees_sha1 on trees(sha1);
62
 
""")
63
 
 
64
 
    def _parent_lookup(self, revid):
65
 
        return self.db.execute("select sha1 from commits where revid = ?", (revid,)).fetchone()[0].encode("utf-8")
66
52
 
67
53
    def add_entry(self, sha, type, type_data):
68
54
        """Add a new entry to the database.
69
55
        """
70
 
        assert isinstance(type_data, tuple)
71
 
        assert isinstance(sha, str), "type was %r" % sha
72
 
        if type == "commit":
73
 
            self.db.execute("replace into commits (sha1, revid, tree_sha) values (?, ?, ?)", (sha, type_data[0], type_data[1]))
74
 
        elif type == "blob":
75
 
            self.db.execute("replace into blobs (sha1, fileid, revid) values (?, ?, ?)", (sha, type_data[0], type_data[1]))
76
 
        elif type == "tree":
77
 
            self.db.execute("replace into trees (sha1, fileid, revid) values (?, ?, ?)", (sha, type_data[0], type_data[1]))
78
 
        else:
79
 
            raise AssertionError("Unknown type %s" % type)
 
56
        raise NotImplementedError(self.add_entry)
80
57
 
81
58
    def lookup_git_sha(self, sha):
82
59
        """Lookup a Git sha in the database.
85
62
        :return: (type, type_data) with type_data:
86
63
            revision: revid, tree sha
87
64
        """
88
 
        row = self.db.execute("select revid, tree_sha from commits where sha1 = ?", (sha,)).fetchone()
89
 
        if row is not None:
90
 
            return ("commit", row)
91
 
        row = self.db.execute("select fileid, revid from blobs where sha1 = ?", (sha,)).fetchone()
92
 
        if row is not None:
93
 
            return ("blob", row)
94
 
        row = self.db.execute("select fileid, revid from trees where sha1 = ?", (sha,)).fetchone()
95
 
        if row is not None:
96
 
            return ("tree", row)
97
 
        raise KeyError(sha)
98
 
 
99
 
    def revids(self):
100
 
        for row in self.db.execute("select revid from commits").fetchall():
101
 
            yield row[0]
 
65
        raise NotImplementedError(self.lookup_git_sha)
 
66
 
 
67
 
 
68
class MappedGitObjectConverter(GitObjectConverter):
 
69
    
 
70
    def __init__(self, repository):
 
71
        self.repository = repository
 
72
        self._idmap = GitShaMap(self.repository._transport)
 
73
 
 
74
    def _update_sha_map(self):
 
75
        # TODO: Check which 
 
76
        raise NotImplementedError(self._update_sha_map)
 
77
 
 
78
    def __getitem__(self, sha):
 
79
        # See if sha is in map
 
80
        try:
 
81
            (type, type_data) = self._idmap.lookup_git_sha(sha)
 
82
        except KeyError:
 
83
            # if not, see if there are any unconverted revisions and add them 
 
84
            # to the map, search for sha in map again
 
85
            self._update_sha_map()
 
86
            (type, type_data) = self._idmap.lookup_git_sha(sha)
 
87
        # convert object to git object
 
88
        if type == "revision":
 
89
            return self._get_commit(*type_data)
 
90
        else:
 
91
            raise AssertionError("Unknown object type '%s'" % type)