/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to git_repository.py

Ignore .plugins dir.

Show diffs side-by-side

added added

removed removed

Lines of Context:
git_repository.py
37
37
from bzrlib.plugins.git import (
38
38
    cache,
39
39
    ids,
 
40
    versionedfiles
40
41
    )
41
42
 
42
43
 
43
 
cachedbs = {}
44
 
 
45
 
 
46
44
class GitRepository(repository.Repository):
47
45
    """An adapter to git repositories for bzr."""
48
46
 
52
50
        self.base = gitdir.root_transport.base
53
51
        self.bzrdir = gitdir
54
52
        self.control_files = lockfiles
55
 
        self._git = git.repo.Repo(gitdir.root_transport.local_abspath("."))
56
 
        self._blob_cache = {}
57
 
        self._blob_info_cache = {}
 
53
        self._git = gitdir._git
58
54
        cache_dir = cache.create_cache_dir()
59
55
        cachedir_transport = get_transport(cache_dir)
60
56
        cache_file = os.path.join(cache_dir, 'cache-%s' % ids.NAMESPACE)
61
 
        if not cachedbs.has_key(cache_file):
62
 
            cachedbs[cache_file] = cache.sqlite3.connect(cache_file)
63
 
        self.cachedb = cachedbs[cache_file]
64
 
        self._init_cachedb()
65
57
        self.texts = None
66
 
        self.signatures = versionedfile.VirtualSignatureTexts(self)
67
 
        self.revisions = None
 
58
        self.signatures = versionedfiles.VirtualSignatureTexts(self)
 
59
        self.revisions = versionedfiles.VirtualRevisionTexts(self)
68
60
        self._format = GitFormat()
69
61
        self._fallback_repositories = []
70
62
 
71
 
    def _init_cachedb(self):
72
 
        self.cachedb.executescript("""
73
 
        create table if not exists inventory (
74
 
            revid blob);
75
 
        create unique index if not exists inventory_revid
76
 
            on inventory (revid);
77
 
        create table if not exists entry_revision (
78
 
            inventory blob,
79
 
            path blob,
80
 
            gitid blob,
81
 
            executable integer,
82
 
            revision blob);
83
 
        create unique index if not exists entry_revision_revid_path
84
 
            on entry_revision (inventory, path);
85
 
        """)
86
 
        self.cachedb.commit()
 
63
    def _all_revision_ids(self):
 
64
        if self._git.heads == []:
 
65
            return set()
 
66
        ret = set()
 
67
        skip = 0
 
68
        max_count = 1000
 
69
        cms = None
 
70
        while cms != []:
 
71
            cms = self._git.commits("--all", max_count=max_count, skip=skip)
 
72
            skip += max_count
 
73
            ret.update([ids.convert_revision_id_git_to_bzr(cm.id) for cm in cms])
 
74
        return ret
87
75
 
88
76
    def is_shared(self):
89
77
        return True
91
79
    def supports_rich_root(self):
92
80
        return False
93
81
 
 
82
    #def get_revision_delta(self, revision_id):
 
83
    #    parent_revid = self.get_revision(revision_id).parent_ids[0]
 
84
    #    diff = self._git.diff(ids.convert_revision_id_bzr_to_git(parent_revid),
 
85
    #                   ids.convert_revision_id_bzr_to_git(revision_id))
 
86
 
94
87
    def get_ancestry(self, revision_id):
95
88
        revision_id = revision.ensure_null(revision_id)
96
89
        ret = []
113
106
    def get_parent_map(self, revision_ids):
114
107
        ret = {}
115
108
        for revid in revision_ids:
116
 
            commit = self._git.commit(ids.convert_revision_id_bzr_to_git(revid))
117
 
            ret[revid] = tuple([ids.convert_revision_id_git_to_bzr(p.id) for p in commit.parents])
 
109
            if revid == revision.NULL_REVISION:
 
110
                ret[revid] = ()
 
111
            else:
 
112
                commit = self._git.commit(ids.convert_revision_id_bzr_to_git(revid))
 
113
                ret[revid] = tuple([ids.convert_revision_id_git_to_bzr(p.id) for p in commit.parents])
118
114
        return ret
119
115
 
120
116
    def get_revision(self, revision_id):
165
161
 
166
162
        return GitRevisionTree(self, revision_id)
167
163
 
168
 
    def _fetch_blob(self, git_id):
169
 
        lines = self._git.cat_file('blob', git_id)
170
 
        # print "fetched blob:", git_id
171
 
        if self._building_inventory is not None:
172
 
            self._building_inventory.git_file_data[git_id] = lines
173
 
        return lines
174
 
 
175
 
    def _get_blob(self, git_id):
176
 
        try:
177
 
            return self._blob_cache[git_id]
178
 
        except KeyError:
179
 
            return self._fetch_blob(git_id)
180
 
 
181
 
    def _get_blob_caching(self, git_id):
182
 
        try:
183
 
            return self._blob_cache[git_id]
184
 
        except KeyError:
185
 
            lines = self._fetch_blob(git_id)
186
 
            self._blob_cache[git_id] = lines
187
 
            return lines
188
 
 
189
 
    def _get_blob_info(self, git_id):
190
 
        try:
191
 
            return self._blob_info_cache[git_id]
192
 
        except KeyError:
193
 
            lines = self._get_blob(git_id)
194
 
            size = sum(len(line) for line in lines)
195
 
            sha1 = osutils.sha_strings(lines)
196
 
            self._blob_info_cache[git_id] = (size, sha1)
197
 
            return size, sha1
198
 
 
199
164
    def get_inventory(self, revision_id):
200
165
        assert revision_id != None
201
166
        return self.revision_tree(revision_id).inventory
202
167
 
203
 
    def _set_entry_text_info(self, inv, entry, git_id):
204
 
        if entry.kind == 'directory':
205
 
            return
206
 
        size, sha1 = self._get_blob_info(git_id)
207
 
        entry.text_size = size
208
 
        entry.text_sha1 = sha1
209
 
        if entry.kind == 'symlink':
210
 
            lines = self._get_blob_caching(git_id)
211
 
            entry.symlink_target = ''.join(lines)
212
 
 
213
 
    def _get_file_revision(self, revision_id, path):
214
 
        lines = self._git.rev_list(
215
 
            [ids.convert_revision_id_bzr_to_git(revision_id)],
216
 
            max_count=1, topo_order=True, paths=[path])
217
 
        [line] = lines
218
 
        result = ids.convert_revision_id_git_to_bzr(line[:-1])
219
 
        # print "fetched file revision", line[:-1], path
220
 
        return result
221
 
 
222
 
    def _get_entry_revision_from_db(self, revid, path, git_id, executable):
223
 
        result = self.cachedb.execute(
224
 
            "select revision from entry_revision where"
225
 
            " inventory=? and path=? and gitid=? and executable=?",
226
 
            (revid, path, git_id, executable)).fetchone()
227
 
        if result is None:
228
 
            return None
229
 
        [revision] = result
230
 
        return revision
231
 
 
232
 
    def _set_entry_revision_in_db(self, revid, path, git_id, executable, revision):
233
 
        self.cachedb.execute(
234
 
            "insert into entry_revision"
235
 
            " (inventory, path, gitid, executable, revision)"
236
 
            " values (?, ?, ?, ?, ?)",
237
 
            (revid, path, git_id, executable, revision))
238
 
 
239
 
    def _all_inventories_in_db(self, revids):
240
 
        for revid in revids:
241
 
            result = self.cachedb.execute(
242
 
                "select count(*) from inventory where revid = ?",
243
 
                (revid,)).fetchone()
244
 
            if result is None:
245
 
                return False
246
 
        return True
247
 
 
248
 
    def _set_entry_revision(self, entry, revid, path, git_id):
249
 
        # If a revision is in the cache, we assume it contains entries for the
250
 
        # whole inventory. So if all parent revisions are in the cache, but no
251
 
        # parent entry is present, then the entry revision is the current
252
 
        # revision. That amortizes the number of _get_file_revision calls for
253
 
        # large pulls to a "small number".
254
 
        entry_rev = self._get_entry_revision_from_db(
255
 
            revid, path, git_id, entry.executable)
256
 
        if entry_rev is not None:
257
 
            entry.revision = entry_rev
258
 
            return
259
 
 
260
 
        revision = self.get_revision(revid)
261
 
        for parent_id in revision.parent_ids:
262
 
            entry_rev = self._get_entry_revision_from_db(
263
 
                parent_id, path, git_id, entry.executable)
264
 
            if entry_rev is not None:
265
 
                break
266
 
        else:
267
 
            if self._all_inventories_in_db(revision.parent_ids):
268
 
                entry_rev = revid
269
 
            else:
270
 
                entry_rev = self._get_file_revision(revid, path)
271
 
        self._set_entry_revision_in_db(
272
 
            revid, path, git_id, entry.executable, entry_rev)
273
 
        #self.cachedb.commit()
274
 
        entry.revision = entry_rev
275
 
 
276
168
 
277
169
def escape_file_id(file_id):
278
170
    return file_id.replace('_', '__').replace(' ', '_s')
279
171
 
280
172
 
 
173
def unescape_file_id(file_id):
 
174
    return file_id.replace("_s", " ").replace("__", "_")
 
175
 
 
176
 
281
177
class GitRevisionTree(revisiontree.RevisionTree):
282
178
 
283
179
    def __init__(self, repository, revision_id):
289
185
        self._inventory.root.revision = revision_id
290
186
        self._build_inventory(self.tree, self._inventory.root, "")
291
187
 
292
 
    def get_file_lines(self, file_id):
 
188
    def get_revision_id(self):
 
189
        return self.revision_id
 
190
 
 
191
    def get_file_text(self, file_id):
293
192
        entry = self._inventory[file_id]
294
 
        if entry.kind == 'directory': return []
295
 
        git_id = self._inventory.git_ids[file_id]
296
 
        if git_id in self._inventory.git_file_data:
297
 
            return self._inventory.git_file_data[git_id]
298
 
        return self._repository._get_blob(git_id)
 
193
        if entry.kind == 'directory': return ""
 
194
        return self._repository._git.blob(entry.text_id).data
299
195
 
300
196
    def _build_inventory(self, tree, ie, path):
301
197
        assert isinstance(path, str)
318
214
                else:
319
215
                    raise AssertionError(
320
216
                        "Unknown file kind, perms=%r." % (b.mode,))
 
217
                child_ie.text_id = b.id
321
218
                child_ie.text_size = b.size
322
219
            else:
323
220
                raise AssertionError(
324
221
                    "Unknown blob kind, perms=%r." % (b.mode,))
325
222
            child_ie.executable = bool(int(b.mode[3:], 8) & 0111)
326
223
            child_ie.revision = self.revision_id
327
 
            assert not basename in ie.children
328
 
            ie.children[basename] = child_ie
 
224
            self._inventory.add(child_ie)
329
225
            if b.mode[0] == '0':
330
226
                self._build_inventory(b, child_ie, child_path)
331
227