/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to remote.py

  • Committer: Jelmer Vernooij
  • Date: 2009-04-02 15:54:49 UTC
  • mto: (0.200.326 trunk)
  • mto: This revision was merged to the branch mainline in revision 6960.
  • Revision ID: jelmer@samba.org-20090402155449-nuqhu1fsnqk6bt0g
Check that regenerated objects have the expected sha1.

Show diffs side-by-side

added added

removed removed

Lines of Context:
remote.py
1
 
# Copyright (C) 2007-2008 Canonical Ltd
 
1
# Copyright (C) 2007-2009 Jelmer Vernooij <jelmer@samba.org>
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
import bzrlib
18
 
from bzrlib import urlutils
19
 
from bzrlib.bzrdir import BzrDir, BzrDirFormat
20
 
from bzrlib.errors import NoSuchFile, NotLocalUrl
21
 
from bzrlib.lockable_files import TransportLock
22
 
from bzrlib.repository import Repository
23
 
from bzrlib.trace import info
24
 
from bzrlib.transport import Transport
 
18
from bzrlib import (
 
19
    branch,
 
20
    tag,
 
21
    urlutils,
 
22
    )
 
23
from bzrlib.bzrdir import (
 
24
    BzrDir,
 
25
    BzrDirFormat,
 
26
    )
 
27
from bzrlib.errors import (
 
28
    BzrError,
 
29
    NoSuchFile,
 
30
    NotLocalUrl,
 
31
    )
 
32
from bzrlib.lockable_files import (
 
33
    TransportLock,
 
34
    )
 
35
from bzrlib.repository import (
 
36
    Repository,
 
37
    )
 
38
from bzrlib.trace import (
 
39
    info,
 
40
    )
 
41
from bzrlib.transport import (
 
42
    Transport,
 
43
    )
25
44
 
26
 
from bzrlib.plugins.git import lazy_check_versions
 
45
from bzrlib.plugins.git import (
 
46
    lazy_check_versions,
 
47
    )
27
48
lazy_check_versions()
28
49
 
29
 
from bzrlib.plugins.git.branch import GitBranch
30
 
from bzrlib.plugins.git.errors import NoSuchRef
31
 
from bzrlib.plugins.git.dir import GitDir
32
 
from bzrlib.plugins.git.foreign import ForeignBranch
33
 
from bzrlib.plugins.git.repository import GitFormat, GitRepository
 
50
from bzrlib.plugins.git.branch import (
 
51
    GitBranch,
 
52
    )
 
53
from bzrlib.plugins.git.errors import (
 
54
    GitSmartRemoteNotSupported,
 
55
    NoSuchRef,
 
56
    )
 
57
from bzrlib.plugins.git.dir import (
 
58
    GitDir,
 
59
    )
 
60
from bzrlib.plugins.git.foreign import (
 
61
    ForeignBranch,
 
62
    )
 
63
from bzrlib.plugins.git.repository import (
 
64
    GitRepositoryFormat,
 
65
    GitRepository,
 
66
    )
34
67
 
 
68
import dulwich as git
 
69
from dulwich.errors import (
 
70
    GitProtocolError,
 
71
    )
 
72
from dulwich.pack import (
 
73
    Pack,
 
74
    PackData,
 
75
    )
35
76
import os
36
77
import tempfile
37
78
import urllib
38
79
import urlparse
39
80
 
40
 
import dulwich as git
41
 
from dulwich.pack import PackData, Pack, PackIndex
 
81
try:
 
82
    from dulwich.pack import load_pack_index
 
83
except ImportError:
 
84
    from dulwich.pack import PackIndex as load_pack_index
 
85
 
42
86
 
43
87
# Don't run any tests on GitSmartTransport as it is not intended to be 
44
88
# a full implementation of Transport
51
95
    def __init__(self, url, _client=None):
52
96
        Transport.__init__(self, url)
53
97
        (scheme, _, loc, _, _) = urlparse.urlsplit(url)
54
 
        assert scheme == "git"
55
98
        hostport, self._path = urllib.splithost(loc)
56
99
        (self._host, self._port) = urllib.splitnport(hostport, git.protocol.TCP_GIT_PORT)
57
100
        self._client = _client
58
101
 
 
102
    def has(self, relpath):
 
103
        return False
 
104
 
59
105
    def _get_client(self):
60
 
        if self._client is not None:
61
 
            ret = self._client
62
 
            self._client = None
63
 
            return ret
64
 
        return git.client.TCPGitClient(self._host, self._port)
 
106
        raise NotImplementedError(self._get_client)
65
107
 
66
108
    def fetch_pack(self, determine_wants, graph_walker, pack_data, progress=None):
67
109
        if progress is None:
68
110
            def progress(text):
69
111
                info("git: %s" % text)
70
 
        self._get_client().fetch_pack(self._path, determine_wants, 
71
 
            graph_walker, pack_data, progress)
 
112
        client = self._get_client()
 
113
        try:
 
114
            client.fetch_pack(self._path, determine_wants, 
 
115
                graph_walker, pack_data, progress)
 
116
        except GitProtocolError, e:
 
117
            raise BzrError(e)
72
118
 
73
119
    def get(self, path):
74
120
        raise NoSuchFile(path)
83
129
        else:
84
130
            newurl = urlutils.join(self.base, offset)
85
131
 
86
 
        return GitSmartTransport(newurl, self._client)
 
132
        return self.__class__(newurl, self._client)
 
133
 
 
134
 
 
135
class TCPGitSmartTransport(GitSmartTransport):
 
136
 
 
137
    def _get_client(self):
 
138
        if self._client is not None:
 
139
            ret = self._client
 
140
            self._client = None
 
141
            return ret
 
142
        return git.client.TCPGitClient(self._host, self._port, thin_packs=False)
 
143
 
 
144
 
 
145
class SSHGitSmartTransport(GitSmartTransport):
 
146
 
 
147
    def _get_client(self):
 
148
        if self._client is not None:
 
149
            ret = self._client
 
150
            self._client = None
 
151
            return ret
 
152
        return git.client.SSHGitClient(self._host, self._port, thin_packs=False)
87
153
 
88
154
 
89
155
class RemoteGitDir(GitDir):
97
163
    def open_repository(self):
98
164
        return RemoteGitRepository(self, self._lockfiles)
99
165
 
100
 
    def open_branch(self, _unsupported=False):
 
166
    def open_branch(self, ignore_fallbacks=False):
101
167
        repo = self.open_repository()
102
168
        # TODO: Support for multiple branches in one bzrdir in bzrlib!
103
169
        return RemoteGitBranch(self, repo, "HEAD", self._lockfiles)
106
172
        raise NotLocalUrl(self.transport.base)
107
173
 
108
174
 
 
175
class EmptyObjectStoreIterator(dict):
 
176
 
 
177
    def iterobjects(self):
 
178
        return []
 
179
 
 
180
 
109
181
class TemporaryPackIterator(Pack):
110
182
 
 
183
    def __init__(self, path, resolve_ext_ref):
 
184
        super(TemporaryPackIterator, self).__init__(path)
 
185
        self.resolve_ext_ref = resolve_ext_ref
 
186
 
111
187
    @property
112
188
    def idx(self):
113
189
        if self._idx is None:
114
 
            self._data.create_index_v2(self._idx_path)
115
 
            self._idx = PackIndex(self._idx_path)
 
190
            if self._data is None:
 
191
                self._data = PackData(self._data_path)
 
192
            self._data.create_index_v2(self._idx_path, self.resolve_ext_ref)
 
193
            self._idx = load_pack_index(self._idx_path)
116
194
        return self._idx
117
195
 
118
196
    def __del__(self):
124
202
 
125
203
    def __init__(self, gitdir, lockfiles):
126
204
        GitRepository.__init__(self, gitdir, lockfiles)
 
205
        self._refs = None
 
206
 
 
207
    @property
 
208
    def inventories(self):
 
209
        raise GitSmartRemoteNotSupported()
 
210
 
 
211
    @property
 
212
    def revisions(self):
 
213
        raise GitSmartRemoteNotSupported()
 
214
 
 
215
    @property
 
216
    def texts(self):
 
217
        raise GitSmartRemoteNotSupported()
 
218
 
 
219
    def get_refs(self):
 
220
        if self._refs is not None:
 
221
            return self._refs
 
222
        def determine_wants(heads):
 
223
            self._refs = heads
 
224
            return []
 
225
        self.bzrdir.root_transport.fetch_pack(determine_wants, None, 
 
226
            lambda x: None, lambda x: mutter("git: %s" % x))
 
227
        return self._refs
127
228
 
128
229
    def fetch_pack(self, determine_wants, graph_walker, pack_data, 
129
230
                   progress=None):
130
231
        self._transport.fetch_pack(determine_wants, graph_walker, pack_data, 
131
232
            progress)
132
233
 
133
 
    def fetch_objects(self, determine_wants, graph_walker, progress=None):
 
234
    def fetch_objects(self, determine_wants, graph_walker, resolve_ext_ref, progress=None):
134
235
        fd, path = tempfile.mkstemp(suffix=".pack")
135
236
        self.fetch_pack(determine_wants, graph_walker, lambda x: os.write(fd, x), progress)
136
237
        os.close(fd)
137
 
        return TemporaryPackIterator(path[:-len(".pack")])
 
238
        if os.path.getsize(path) == 0:
 
239
            return EmptyObjectStoreIterator()
 
240
        return TemporaryPackIterator(path[:-len(".pack")], resolve_ext_ref)
 
241
 
 
242
 
 
243
class RemoteGitTagDict(tag.BasicTags):
 
244
 
 
245
    def __init__(self, branch):
 
246
        self.branch = branch
 
247
        self.repository = branch.repository
 
248
 
 
249
    def get_tag_dict(self):
 
250
        ret = {}
 
251
        refs = self.repository.get_refs()
 
252
        for k,v in refs.iteritems():
 
253
            if k.startswith("refs/tags/") and not k.endswith("^{}"):
 
254
                v = refs.get(k+"^{}", v)
 
255
                ret[k[len("refs/tags/"):]] = self.branch.mapping.revision_id_foreign_to_bzr(v)
 
256
        return ret
 
257
 
 
258
    def set_tag(self, name, revid):
 
259
        # FIXME: Not supported yet, should do a push of a new ref
 
260
        raise NotImplementedError(self.set_tag)
138
261
 
139
262
 
140
263
class RemoteGitBranch(GitBranch):
141
264
 
142
265
    def __init__(self, bzrdir, repository, name, lockfiles):
143
 
        def determine_wants(heads):
144
 
            if not name in heads:
145
 
                raise NoSuchRef(name)
146
 
            self._ref = heads[name]
147
 
        bzrdir.root_transport.fetch_pack(determine_wants, None, lambda x: None, 
148
 
                             lambda x: mutter("git: %s" % x))
 
266
        heads = repository.get_refs()
 
267
        if not name in heads:
 
268
            raise NoSuchRef(name)
 
269
        self._ref = heads[name]
149
270
        super(RemoteGitBranch, self).__init__(bzrdir, repository, name, self._ref, lockfiles)
150
271
 
151
272
    def last_revision(self):