/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to remote.py

Merge trunk.

Show diffs side-by-side

added added

removed removed

Lines of Context:
remote.py
1
 
# Copyright (C) 2007-2008 Canonical Ltd
 
1
# Copyright (C) 2007-2009 Jelmer Vernooij <jelmer@samba.org>
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
import bzrlib
18
 
from bzrlib import urlutils
19
 
from bzrlib.bzrdir import BzrDir, BzrDirFormat
20
 
from bzrlib.errors import NoSuchFile, NotLocalUrl
21
 
from bzrlib.lockable_files import TransportLock
22
 
from bzrlib.repository import Repository
23
 
from bzrlib.trace import info
24
 
from bzrlib.transport import Transport
25
 
 
26
 
from bzrlib.plugins.git import git
27
 
from bzrlib.plugins.git.branch import GitBranch
28
 
from bzrlib.plugins.git.dir import GitDir
29
 
from bzrlib.plugins.git.foreign import ForeignBranch
30
 
from bzrlib.plugins.git.repository import GitFormat, GitRepository
31
 
 
 
18
from bzrlib import (
 
19
    config,
 
20
    tag,
 
21
    trace,
 
22
    ui,
 
23
    urlutils,
 
24
    )
 
25
from bzrlib.errors import (
 
26
    BzrError,
 
27
    InvalidRevisionId,
 
28
    NoSuchFile,
 
29
    NoSuchRevision,
 
30
    NotLocalUrl,
 
31
    )
 
32
from bzrlib.trace import (
 
33
    info,
 
34
    )
 
35
from bzrlib.transport import (
 
36
    Transport,
 
37
    )
 
38
 
 
39
from bzrlib.plugins.git import (
 
40
    lazy_check_versions,
 
41
    )
 
42
lazy_check_versions()
 
43
 
 
44
from bzrlib.plugins.git.branch import (
 
45
    GitBranch,
 
46
    extract_tags,
 
47
    )
 
48
from bzrlib.plugins.git.errors import (
 
49
    GitSmartRemoteNotSupported,
 
50
    NoSuchRef,
 
51
    )
 
52
from bzrlib.plugins.git.dir import (
 
53
    GitDir,
 
54
    )
 
55
from bzrlib.plugins.git.mapping import (
 
56
    mapping_registry,
 
57
    )
 
58
from bzrlib.plugins.git.repository import (
 
59
    GitRepository,
 
60
    )
 
61
 
 
62
import dulwich as git
 
63
from dulwich.errors import (
 
64
    GitProtocolError,
 
65
    )
 
66
from dulwich.pack import (
 
67
    Pack,
 
68
    )
 
69
import os
 
70
import tempfile
32
71
import urllib
33
72
import urlparse
34
73
 
35
 
from dulwich.pack import PackData
 
74
from dulwich.pack import load_pack_index
 
75
 
 
76
 
 
77
# Don't run any tests on GitSmartTransport as it is not intended to be 
 
78
# a full implementation of Transport
 
79
def get_test_permutations():
 
80
    return []
36
81
 
37
82
 
38
83
class GitSmartTransport(Transport):
40
85
    def __init__(self, url, _client=None):
41
86
        Transport.__init__(self, url)
42
87
        (scheme, _, loc, _, _) = urlparse.urlsplit(url)
43
 
        assert scheme == "git"
44
88
        hostport, self._path = urllib.splithost(loc)
45
 
        (self._host, self._port) = urllib.splitnport(hostport, git.protocol.TCP_GIT_PORT)
46
 
        if _client is not None:
47
 
            self._client = _client
48
 
        else:
49
 
            self._client = git.client.TCPGitClient(self._host, self._port)
 
89
        (self._username, hostport) = urllib.splituser(hostport)
 
90
        (self._host, self._port) = urllib.splitnport(hostport, None)
 
91
        self._client = _client
 
92
 
 
93
    def external_url(self):
 
94
        return self.base
 
95
 
 
96
    def has(self, relpath):
 
97
        return False
 
98
 
 
99
    def _get_client(self, thin_packs):
 
100
        raise NotImplementedError(self._get_client)
 
101
 
 
102
    def _get_path(self):
 
103
        return self._path
50
104
 
51
105
    def fetch_pack(self, determine_wants, graph_walker, pack_data, progress=None):
52
106
        if progress is None:
53
107
            def progress(text):
54
108
                info("git: %s" % text)
55
 
        self._client.fetch_pack(self._path, determine_wants, graph_walker, 
56
 
                pack_data, progress)
 
109
        client = self._get_client(thin_packs=False)
 
110
        try:
 
111
            return client.fetch_pack(self._get_path(), determine_wants, 
 
112
                graph_walker, pack_data, progress)
 
113
        except GitProtocolError, e:
 
114
            raise BzrError(e)
57
115
 
58
 
    def fetch_objects(self, determine_wants, graph_walker, progress=None):
59
 
        fd, path = tempfile.mkstemp(dir=self.pack_dir(), suffix=".pack")
60
 
        self.fetch_pack(determine_wants, graph_walker, lambda x: os.write(fd, x), progress)
61
 
        os.close(fd)
 
116
    def send_pack(self, get_changed_refs, generate_pack_contents):
 
117
        client = self._get_client(thin_packs=False)
62
118
        try:
63
 
            p = PackData(path)
64
 
            for o in p.iterobjects():
65
 
                yield o
66
 
        finally:
67
 
            os.remove(path)
 
119
            return client.send_pack(self._get_path(), get_changed_refs, 
 
120
                generate_pack_contents)
 
121
        except GitProtocolError, e:
 
122
            raise BzrError(e)
68
123
 
69
124
    def get(self, path):
70
125
        raise NoSuchFile(path)
71
126
 
 
127
    def abspath(self, relpath):
 
128
        return urlutils.join(self.base, relpath)
 
129
 
72
130
    def clone(self, offset=None):
73
131
        """See Transport.clone()."""
74
132
        if offset is None:
76
134
        else:
77
135
            newurl = urlutils.join(self.base, offset)
78
136
 
79
 
        return GitSmartTransport(newurl, self._client)
 
137
        return self.__class__(newurl, self._client)
 
138
 
 
139
 
 
140
class TCPGitSmartTransport(GitSmartTransport):
 
141
 
 
142
    _scheme = 'git'
 
143
 
 
144
    def _get_client(self, thin_packs):
 
145
        if self._client is not None:
 
146
            ret = self._client
 
147
            self._client = None
 
148
            return ret
 
149
        return git.client.TCPGitClient(self._host, self._port, thin_packs=thin_packs,
 
150
            report_activity=self._report_activity)
 
151
 
 
152
 
 
153
class SSHGitSmartTransport(GitSmartTransport):
 
154
 
 
155
    _scheme = 'git+ssh'
 
156
 
 
157
    def _get_path(self):
 
158
        if self._path.startswith("/~/"):
 
159
            return self._path[3:]
 
160
        return self._path
 
161
 
 
162
    def _get_client(self, thin_packs):
 
163
        if self._client is not None:
 
164
            ret = self._client
 
165
            self._client = None
 
166
            return ret
 
167
        return git.client.SSHGitClient(self._host, self._port, self._username,
 
168
            thin_packs=thin_packs, report_activity=self._report_activity)
80
169
 
81
170
 
82
171
class RemoteGitDir(GitDir):
86
175
        self.root_transport = transport
87
176
        self.transport = transport
88
177
        self._lockfiles = lockfiles
 
178
        self._mode_check_done = None
89
179
 
90
180
    def open_repository(self):
91
181
        return RemoteGitRepository(self, self._lockfiles)
92
182
 
93
 
    def open_branch(self):
 
183
    def open_branch(self, ignore_fallbacks=False):
94
184
        repo = self.open_repository()
95
185
        # TODO: Support for multiple branches in one bzrdir in bzrlib!
96
186
        return RemoteGitBranch(self, repo, "HEAD", self._lockfiles)
99
189
        raise NotLocalUrl(self.transport.base)
100
190
 
101
191
 
 
192
class EmptyObjectStoreIterator(dict):
 
193
 
 
194
    def iterobjects(self):
 
195
        return []
 
196
 
 
197
 
 
198
class TemporaryPackIterator(Pack):
 
199
 
 
200
    def __init__(self, path, resolve_ext_ref):
 
201
        super(TemporaryPackIterator, self).__init__(path)
 
202
        self.resolve_ext_ref = resolve_ext_ref
 
203
 
 
204
    @property
 
205
    def index(self):
 
206
        if self._idx is None:
 
207
            if not os.path.exists(self._idx_path):
 
208
                pb = ui.ui_factory.nested_progress_bar()
 
209
                try:
 
210
                    def report_progress(cur, total):
 
211
                        pb.update("generating index", cur, total)
 
212
                    self.data.create_index(self._idx_path, self.resolve_ext_ref,
 
213
                        progress=report_progress)
 
214
                finally:
 
215
                    pb.finished()
 
216
            self._idx = load_pack_index(self._idx_path)
 
217
        return self._idx
 
218
 
 
219
    def __del__(self):
 
220
        os.remove(self._data_path)
 
221
        os.remove(self._idx_path)
 
222
 
 
223
 
102
224
class RemoteGitRepository(GitRepository):
103
225
 
104
226
    def __init__(self, gitdir, lockfiles):
105
227
        GitRepository.__init__(self, gitdir, lockfiles)
 
228
        self._refs = None
 
229
 
 
230
    @property
 
231
    def inventories(self):
 
232
        raise GitSmartRemoteNotSupported()
 
233
 
 
234
    @property
 
235
    def revisions(self):
 
236
        raise GitSmartRemoteNotSupported()
 
237
 
 
238
    @property
 
239
    def texts(self):
 
240
        raise GitSmartRemoteNotSupported()
 
241
 
 
242
    def get_refs(self):
 
243
        if self._refs is not None:
 
244
            return self._refs
 
245
        self._refs = self.bzrdir.root_transport.fetch_pack(lambda x: [], None, 
 
246
            lambda x: None, lambda x: trace.mutter("git: %s" % x))
 
247
        return self._refs
106
248
 
107
249
    def fetch_pack(self, determine_wants, graph_walker, pack_data, 
108
250
                   progress=None):
109
 
        self._transport.fetch_pack(determine_wants, graph_walker, pack_data, 
110
 
            progress)
 
251
        return self._transport.fetch_pack(determine_wants, graph_walker,
 
252
                                          pack_data, progress)
 
253
 
 
254
    def send_pack(self, get_changed_refs, generate_pack_contents):
 
255
        return self._transport.send_pack(get_changed_refs, generate_pack_contents)
 
256
 
 
257
    def fetch_objects(self, determine_wants, graph_walker, resolve_ext_ref, progress=None):
 
258
        fd, path = tempfile.mkstemp(suffix=".pack")
 
259
        self.fetch_pack(determine_wants, graph_walker, lambda x: os.write(fd, x), progress)
 
260
        os.close(fd)
 
261
        if os.path.getsize(path) == 0:
 
262
            return EmptyObjectStoreIterator()
 
263
        return TemporaryPackIterator(path[:-len(".pack")], resolve_ext_ref)
 
264
 
 
265
    def lookup_git_revid(self, bzr_revid):
 
266
        # This won't work for any round-tripped bzr revisions, but it's a start..
 
267
        try:
 
268
            return mapping_registry.revision_id_bzr_to_foreign(bzr_revid)
 
269
        except InvalidRevisionId:
 
270
            raise NoSuchRevision(self, bzr_revid)
 
271
 
 
272
 
 
273
class RemoteGitTagDict(tag.BasicTags):
 
274
 
 
275
    def __init__(self, branch):
 
276
        self.branch = branch
 
277
        self.repository = branch.repository
 
278
 
 
279
    def get_tag_dict(self):
 
280
        return extract_tags(self.repository.get_refs(), self.branch.mapping)
 
281
 
 
282
    def set_tag(self, name, revid):
 
283
        # FIXME: Not supported yet, should do a push of a new ref
 
284
        raise NotImplementedError(self.set_tag)
111
285
 
112
286
 
113
287
class RemoteGitBranch(GitBranch):
114
288
 
115
289
    def __init__(self, bzrdir, repository, name, lockfiles):
116
 
        def determine_wants(heads):
117
 
            self._ref = heads[name]
118
 
        bzrdir.root_transport.fetch_pack(determine_wants, None, lambda x: None, 
119
 
                             lambda x: mutter("git: %s" % x))
120
 
        super(RemoteGitBranch, self).__init__(bzrdir, repository, name, self._ref, lockfiles)
 
290
        self._ref = None
 
291
        super(RemoteGitBranch, self).__init__(bzrdir, repository, name, 
 
292
                lockfiles)
 
293
 
 
294
    def revision_history(self):
 
295
        raise GitSmartRemoteNotSupported()
121
296
 
122
297
    def last_revision(self):
123
 
        return self.mapping.revision_id_foreign_to_bzr(self._ref)
124
 
 
 
298
        return self.mapping.revision_id_foreign_to_bzr(self.head)
 
299
 
 
300
    def _get_config(self):
 
301
        class EmptyConfig(object):
 
302
 
 
303
            def _get_configobj(self):
 
304
                return config.ConfigObj()
 
305
 
 
306
        return EmptyConfig()
 
307
 
 
308
    @property
 
309
    def head(self):
 
310
        if self._ref is not None:
 
311
            return self._ref
 
312
        heads = self.repository.get_refs()
 
313
        if not self.name in heads:
 
314
            raise NoSuchRef(self.name)
 
315
        self._ref = heads[self.name]
 
316
        return self._ref
 
317
 
 
318
    def _synchronize_history(self, destination, revision_id):
 
319
        """See Branch._synchronize_history()."""
 
320
        destination.generate_revision_history(self.last_revision())
 
321
 
 
322
    def get_push_location(self):
 
323
        return None
 
324
 
 
325
    def set_push_location(self, url):
 
326
        pass