/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to remote.py

Support 'bzr serve --git'.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2007-2008 Canonical Ltd
 
1
# Copyright (C) 2007-2009 Jelmer Vernooij <jelmer@samba.org>
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
import bzrlib
18
 
from bzrlib import urlutils
19
 
from bzrlib.bzrdir import BzrDir, BzrDirFormat
20
 
from bzrlib.errors import NoSuchFile, NotLocalUrl
21
 
from bzrlib.lockable_files import TransportLock
22
 
from bzrlib.repository import Repository
23
 
from bzrlib.trace import info
24
 
from bzrlib.transport import Transport
25
 
 
26
 
from bzrlib.plugins.git import git
27
 
from bzrlib.plugins.git.branch import GitBranch
28
 
from bzrlib.plugins.git.errors import NoSuchRef
29
 
from bzrlib.plugins.git.dir import GitDir
30
 
from bzrlib.plugins.git.foreign import ForeignBranch
31
 
from bzrlib.plugins.git.repository import GitFormat, GitRepository
32
 
 
 
18
from bzrlib import (
 
19
    branch,
 
20
    tag,
 
21
    ui,
 
22
    urlutils,
 
23
    )
 
24
from bzrlib.errors import (
 
25
    BzrError,
 
26
    InvalidRevisionId,
 
27
    NoSuchFile,
 
28
    NoSuchRevision,
 
29
    NotLocalUrl,
 
30
    )
 
31
from bzrlib.trace import (
 
32
    info,
 
33
    )
 
34
from bzrlib.transport import (
 
35
    Transport,
 
36
    )
 
37
 
 
38
from bzrlib.plugins.git import (
 
39
    lazy_check_versions,
 
40
    )
 
41
lazy_check_versions()
 
42
 
 
43
from bzrlib.plugins.git.branch import (
 
44
    GitBranch,
 
45
    extract_tags,
 
46
    )
 
47
from bzrlib.plugins.git.errors import (
 
48
    GitSmartRemoteNotSupported,
 
49
    NoSuchRef,
 
50
    )
 
51
from bzrlib.plugins.git.dir import (
 
52
    GitDir,
 
53
    )
 
54
from bzrlib.plugins.git.mapping import (
 
55
    mapping_registry,
 
56
    )
 
57
from bzrlib.plugins.git.repository import (
 
58
    GitRepositoryFormat,
 
59
    GitRepository,
 
60
    )
 
61
 
 
62
import dulwich as git
 
63
from dulwich.errors import (
 
64
    GitProtocolError,
 
65
    )
 
66
from dulwich.pack import (
 
67
    Pack,
 
68
    PackData,
 
69
    )
33
70
import os
34
71
import tempfile
35
72
import urllib
36
73
import urlparse
37
74
 
38
 
from dulwich.pack import PackData, Pack
 
75
try:
 
76
    from dulwich.pack import load_pack_index
 
77
except ImportError:
 
78
    from dulwich.pack import PackIndex as load_pack_index
 
79
 
 
80
 
 
81
# Don't run any tests on GitSmartTransport as it is not intended to be 
 
82
# a full implementation of Transport
 
83
def get_test_permutations():
 
84
    return []
39
85
 
40
86
 
41
87
class GitSmartTransport(Transport):
43
89
    def __init__(self, url, _client=None):
44
90
        Transport.__init__(self, url)
45
91
        (scheme, _, loc, _, _) = urlparse.urlsplit(url)
46
 
        assert scheme == "git"
47
92
        hostport, self._path = urllib.splithost(loc)
48
 
        (self._host, self._port) = urllib.splitnport(hostport, git.protocol.TCP_GIT_PORT)
 
93
        (self._username, hostport) = urllib.splituser(hostport)
 
94
        (self._host, self._port) = urllib.splitnport(hostport, None)
49
95
        self._client = _client
50
96
 
 
97
    def has(self, relpath):
 
98
        return False
 
99
 
51
100
    def _get_client(self):
52
 
        if self._client is not None:
53
 
            ret = self._client
54
 
            self._client = None
55
 
            return ret
56
 
        return git.client.TCPGitClient(self._host, self._port)
 
101
        raise NotImplementedError(self._get_client)
 
102
 
 
103
    def _get_path(self):
 
104
        return self._path
57
105
 
58
106
    def fetch_pack(self, determine_wants, graph_walker, pack_data, progress=None):
59
107
        if progress is None:
60
108
            def progress(text):
61
109
                info("git: %s" % text)
62
 
        self._get_client().fetch_pack(self._path, determine_wants, 
63
 
            graph_walker, pack_data, progress)
 
110
        client = self._get_client()
 
111
        try:
 
112
            return client.fetch_pack(self._get_path(), determine_wants, 
 
113
                graph_walker, pack_data, progress)
 
114
        except GitProtocolError, e:
 
115
            raise BzrError(e)
 
116
 
 
117
    def send_pack(self, get_changed_refs, generate_pack_contents):
 
118
        client = self._get_client()
 
119
        try:
 
120
            return client.send_pack(self._get_path(), get_changed_refs, 
 
121
                generate_pack_contents)
 
122
        except GitProtocolError, e:
 
123
            raise BzrError(e)
64
124
 
65
125
    def get(self, path):
66
126
        raise NoSuchFile(path)
75
135
        else:
76
136
            newurl = urlutils.join(self.base, offset)
77
137
 
78
 
        return GitSmartTransport(newurl, self._client)
 
138
        return self.__class__(newurl, self._client)
 
139
 
 
140
 
 
141
class TCPGitSmartTransport(GitSmartTransport):
 
142
 
 
143
    _scheme = 'git'
 
144
 
 
145
    def _get_client(self):
 
146
        if self._client is not None:
 
147
            ret = self._client
 
148
            self._client = None
 
149
            return ret
 
150
        return git.client.TCPGitClient(self._host, self._port, thin_packs=False,
 
151
            report_activity=self._report_activity)
 
152
 
 
153
 
 
154
class SSHGitSmartTransport(GitSmartTransport):
 
155
 
 
156
    _scheme = 'git+ssh'
 
157
 
 
158
    def _get_path(self):
 
159
        if self._path.startswith("/~/"):
 
160
            return self._path[3:]
 
161
        return self._path
 
162
 
 
163
    def _get_client(self):
 
164
        if self._client is not None:
 
165
            ret = self._client
 
166
            self._client = None
 
167
            return ret
 
168
        return git.client.SSHGitClient(self._host, self._port, self._username,
 
169
            thin_packs=False, report_activity=self._report_activity)
79
170
 
80
171
 
81
172
class RemoteGitDir(GitDir):
85
176
        self.root_transport = transport
86
177
        self.transport = transport
87
178
        self._lockfiles = lockfiles
 
179
        self._mode_check_done = None
88
180
 
89
181
    def open_repository(self):
90
182
        return RemoteGitRepository(self, self._lockfiles)
91
183
 
92
 
    def open_branch(self):
 
184
    def open_branch(self, ignore_fallbacks=False):
93
185
        repo = self.open_repository()
94
186
        # TODO: Support for multiple branches in one bzrdir in bzrlib!
95
187
        return RemoteGitBranch(self, repo, "HEAD", self._lockfiles)
98
190
        raise NotLocalUrl(self.transport.base)
99
191
 
100
192
 
 
193
class EmptyObjectStoreIterator(dict):
 
194
 
 
195
    def iterobjects(self):
 
196
        return []
 
197
 
 
198
 
 
199
class TemporaryPackIterator(Pack):
 
200
 
 
201
    def __init__(self, path, resolve_ext_ref):
 
202
        super(TemporaryPackIterator, self).__init__(path)
 
203
        self.resolve_ext_ref = resolve_ext_ref
 
204
 
 
205
    @property
 
206
    def index(self):
 
207
        if self._idx is None:
 
208
            pb = ui.ui_factory.nested_progress_bar()
 
209
            try:
 
210
                def report_progress(cur, total):
 
211
                    pb.update("generating index", cur, total)
 
212
                self.data.create_index(self._idx_path, self.resolve_ext_ref,
 
213
                    progress=report_progress)
 
214
            finally:
 
215
                pb.finished()
 
216
            self._idx = load_pack_index(self._idx_path)
 
217
        return self._idx
 
218
 
 
219
    def __del__(self):
 
220
        os.remove(self._data_path)
 
221
        os.remove(self._idx_path)
 
222
 
 
223
 
101
224
class RemoteGitRepository(GitRepository):
102
225
 
103
226
    def __init__(self, gitdir, lockfiles):
104
227
        GitRepository.__init__(self, gitdir, lockfiles)
 
228
        self._refs = None
 
229
 
 
230
    @property
 
231
    def inventories(self):
 
232
        raise GitSmartRemoteNotSupported()
 
233
 
 
234
    @property
 
235
    def revisions(self):
 
236
        raise GitSmartRemoteNotSupported()
 
237
 
 
238
    @property
 
239
    def texts(self):
 
240
        raise GitSmartRemoteNotSupported()
 
241
 
 
242
    def get_refs(self):
 
243
        if self._refs is not None:
 
244
            return self._refs
 
245
        self._refs = self.bzrdir.root_transport.fetch_pack(lambda x: [], None, 
 
246
            lambda x: None, lambda x: mutter("git: %s" % x))
 
247
        return self._refs
105
248
 
106
249
    def fetch_pack(self, determine_wants, graph_walker, pack_data, 
107
250
                   progress=None):
108
 
        self._transport.fetch_pack(determine_wants, graph_walker, pack_data, 
109
 
            progress)
110
 
 
111
 
    def fetch_objects(self, determine_wants, graph_walker, progress=None):
 
251
        return self._transport.fetch_pack(determine_wants, graph_walker,
 
252
                                          pack_data, progress)
 
253
 
 
254
    def send_pack(self, get_changed_refs, generate_pack_contents):
 
255
        return self._transport.send_pack(get_changed_refs, generate_pack_contents)
 
256
 
 
257
    def fetch_objects(self, determine_wants, graph_walker, resolve_ext_ref, progress=None):
112
258
        fd, path = tempfile.mkstemp(suffix=".pack")
113
259
        self.fetch_pack(determine_wants, graph_walker, lambda x: os.write(fd, x), progress)
114
260
        os.close(fd)
 
261
        if os.path.getsize(path) == 0:
 
262
            return EmptyObjectStoreIterator()
 
263
        return TemporaryPackIterator(path[:-len(".pack")], resolve_ext_ref)
 
264
 
 
265
    def lookup_git_revid(self, bzr_revid):
 
266
        # This won't work for any round-tripped bzr revisions, but it's a start..
115
267
        try:
116
 
            basename = path[:-len(".pack")]
117
 
            p = PackData(path)
118
 
            p.create_index_v2(basename+".idx")
119
 
            for o in Pack(basename).iterobjects():
120
 
                yield o
121
 
        finally:
122
 
            os.remove(path)
 
268
            return mapping_registry.revision_id_bzr_to_foreign(bzr_revid)
 
269
        except InvalidRevisionId:
 
270
            raise NoSuchRevision(self, bzr_revid)
 
271
 
 
272
 
 
273
class RemoteGitTagDict(tag.BasicTags):
 
274
 
 
275
    def __init__(self, branch):
 
276
        self.branch = branch
 
277
        self.repository = branch.repository
 
278
 
 
279
    def get_tag_dict(self):
 
280
        return extract_tags(self.repository.get_refs(), self.branch.mapping)
 
281
 
 
282
    def set_tag(self, name, revid):
 
283
        # FIXME: Not supported yet, should do a push of a new ref
 
284
        raise NotImplementedError(self.set_tag)
123
285
 
124
286
 
125
287
class RemoteGitBranch(GitBranch):
126
288
 
127
289
    def __init__(self, bzrdir, repository, name, lockfiles):
128
 
        def determine_wants(heads):
129
 
            if not name in heads:
130
 
                raise NoSuchRef(name)
131
 
            self._ref = heads[name]
132
 
        bzrdir.root_transport.fetch_pack(determine_wants, None, lambda x: None, 
133
 
                             lambda x: mutter("git: %s" % x))
134
 
        super(RemoteGitBranch, self).__init__(bzrdir, repository, name, self._ref, lockfiles)
 
290
        self._ref = None
 
291
        super(RemoteGitBranch, self).__init__(bzrdir, repository, name, 
 
292
                lockfiles)
 
293
 
 
294
    def revision_history(self):
 
295
        raise GitSmartRemoteNotSupported()
135
296
 
136
297
    def last_revision(self):
137
 
        return self.mapping.revision_id_foreign_to_bzr(self._ref)
 
298
        return self.mapping.revision_id_foreign_to_bzr(self.head)
 
299
 
 
300
    @property
 
301
    def head(self):
 
302
        if self._ref is not None:
 
303
            return self._ref
 
304
        heads = self.repository.get_refs()
 
305
        if not self.name in heads:
 
306
            raise NoSuchRef(name)
 
307
        self._ref = heads[self.name]
 
308
        return self._ref
138
309
 
139
310
    def _synchronize_history(self, destination, revision_id):
140
311
        """See Branch._synchronize_history()."""
141
312
        destination.generate_revision_history(self.last_revision())
142
313
 
 
314
    def get_push_location(self):
 
315
        return None
 
316
 
 
317
    def set_push_location(self, url):
 
318
        pass