/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/tests/http_utils.py

  • Committer: Robert Collins
  • Date: 2008-02-06 04:06:42 UTC
  • mfrom: (3216 +trunk)
  • mto: This revision was merged to the branch mainline in revision 3217.
  • Revision ID: robertc@robertcollins.net-20080206040642-2efx3l4iv5f95lxp
Merge up with bzr.dev.

Show diffs side-by-side

added added

removed removed

Lines of Context:
17
17
from cStringIO import StringIO
18
18
import errno
19
19
import md5
20
 
from SimpleHTTPServer import SimpleHTTPRequestHandler
21
20
import re
22
21
import sha
23
22
import socket
 
23
import threading
24
24
import time
25
25
import urllib2
26
26
import urlparse
27
27
 
 
28
 
 
29
from bzrlib import (
 
30
    tests,
 
31
    transport,
 
32
    )
28
33
from bzrlib.smart import protocol
29
 
from bzrlib.tests import TestCaseWithTransport
30
 
from bzrlib.tests.HttpServer import (
31
 
    HttpServer,
32
 
    TestingHTTPRequestHandler,
33
 
    )
34
 
from bzrlib.transport import (
35
 
    get_transport,
36
 
    )
37
 
 
38
 
 
39
 
class WallRequestHandler(TestingHTTPRequestHandler):
40
 
    """Whatever request comes in, close the connection"""
41
 
 
42
 
    def handle_one_request(self):
43
 
        """Handle a single HTTP request, by abruptly closing the connection"""
44
 
        self.close_connection = 1
45
 
 
46
 
 
47
 
class BadStatusRequestHandler(TestingHTTPRequestHandler):
48
 
    """Whatever request comes in, returns a bad status"""
49
 
 
50
 
    def parse_request(self):
51
 
        """Fakes handling a single HTTP request, returns a bad status"""
52
 
        ignored = TestingHTTPRequestHandler.parse_request(self)
53
 
        try:
54
 
            self.send_response(0, "Bad status")
55
 
            self.end_headers()
56
 
        except socket.error, e:
57
 
            # We don't want to pollute the test results with
58
 
            # spurious server errors while test succeed. In our
59
 
            # case, it may occur that the test has already read
60
 
            # the 'Bad Status' and closed the socket while we are
61
 
            # still trying to send some headers... So the test is
62
 
            # ok, but if we raise the exception, the output is
63
 
            # dirty. So we don't raise, but we close the
64
 
            # connection, just to be safe :)
65
 
            spurious = [errno.EPIPE,
66
 
                        errno.ECONNRESET,
67
 
                        errno.ECONNABORTED,
68
 
                        ]
69
 
            if (len(e.args) > 0) and (e.args[0] in spurious):
70
 
                self.close_connection = 1
71
 
                pass
72
 
            else:
73
 
                raise
74
 
        return False
75
 
 
76
 
 
77
 
class InvalidStatusRequestHandler(TestingHTTPRequestHandler):
78
 
    """Whatever request comes in, returns am invalid status"""
79
 
 
80
 
    def parse_request(self):
81
 
        """Fakes handling a single HTTP request, returns a bad status"""
82
 
        ignored = TestingHTTPRequestHandler.parse_request(self)
83
 
        self.wfile.write("Invalid status line\r\n")
84
 
        return False
85
 
 
86
 
 
87
 
class BadProtocolRequestHandler(TestingHTTPRequestHandler):
88
 
    """Whatever request comes in, returns a bad protocol version"""
89
 
 
90
 
    def parse_request(self):
91
 
        """Fakes handling a single HTTP request, returns a bad status"""
92
 
        ignored = TestingHTTPRequestHandler.parse_request(self)
93
 
        # Returns an invalid protocol version, but curl just
94
 
        # ignores it and those cannot be tested.
95
 
        self.wfile.write("%s %d %s\r\n" % ('HTTP/0.0',
96
 
                                           404,
97
 
                                           'Look at my protocol version'))
98
 
        return False
99
 
 
100
 
 
101
 
class ForbiddenRequestHandler(TestingHTTPRequestHandler):
102
 
    """Whatever request comes in, returns a 403 code"""
103
 
 
104
 
    def parse_request(self):
105
 
        """Handle a single HTTP request, by replying we cannot handle it"""
106
 
        ignored = TestingHTTPRequestHandler.parse_request(self)
107
 
        self.send_error(403)
108
 
        return False
109
 
 
110
 
 
111
 
class HTTPServerWithSmarts(HttpServer):
 
34
from bzrlib.tests import http_server
 
35
 
 
36
 
 
37
class HTTPServerWithSmarts(http_server.HttpServer):
112
38
    """HTTPServerWithSmarts extends the HttpServer with POST methods that will
113
39
    trigger a smart server to execute with a transport rooted at the rootdir of
114
40
    the HTTP server.
115
41
    """
116
42
 
117
 
    def __init__(self):
118
 
        HttpServer.__init__(self, SmartRequestHandler)
119
 
 
120
 
 
121
 
class SmartRequestHandler(TestingHTTPRequestHandler):
 
43
    def __init__(self, protocol_version=None):
 
44
        http_server.HttpServer.__init__(self, SmartRequestHandler,
 
45
                                        protocol_version=protocol_version)
 
46
 
 
47
 
 
48
class SmartRequestHandler(http_server.TestingHTTPRequestHandler):
122
49
    """Extend TestingHTTPRequestHandler to support smart client POSTs."""
123
50
 
124
51
    def do_POST(self):
125
52
        """Hand the request off to a smart server instance."""
126
53
        self.send_response(200)
127
54
        self.send_header("Content-type", "application/octet-stream")
128
 
        transport = get_transport(self.server.test_case_server._home_dir)
 
55
        t = transport.get_transport(self.server.test_case_server._home_dir)
129
56
        # TODO: We might like to support streaming responses.  1.0 allows no
130
57
        # Content-length in this case, so for integrity we should perform our
131
58
        # own chunking within the stream.
135
62
        # HTTP trailer facility which may not be widely available.
136
63
        out_buffer = StringIO()
137
64
        smart_protocol_request = protocol.SmartServerRequestProtocolOne(
138
 
                transport, out_buffer.write)
 
65
                t, out_buffer.write)
139
66
        # if this fails, we should return 400 bad request, but failure is
140
67
        # failure for now - RBC 20060919
141
68
        data_length = int(self.headers['Content-Length'])
150
77
        self.wfile.write(out_buffer.getvalue())
151
78
 
152
79
 
153
 
class LimitedRangeRequestHandler(TestingHTTPRequestHandler):
154
 
    """Errors out when range specifiers exceed the limit"""
155
 
 
156
 
    def get_multiple_ranges(self, file, file_size, ranges):
157
 
        """Refuses the multiple ranges request"""
158
 
        tcs = self.server.test_case_server
159
 
        if tcs.range_limit is not None and len(ranges) > tcs.range_limit:
160
 
            file.close()
161
 
            # Emulate apache behavior
162
 
            self.send_error(400, "Bad Request")
163
 
            return
164
 
        return TestingHTTPRequestHandler.get_multiple_ranges(self, file,
165
 
                                                             file_size, ranges)
166
 
 
167
 
    def do_GET(self):
168
 
        tcs = self.server.test_case_server
169
 
        tcs.GET_request_nb += 1
170
 
        return TestingHTTPRequestHandler.do_GET(self)
171
 
 
172
 
 
173
 
class LimitedRangeHTTPServer(HttpServer):
174
 
    """An HttpServer erroring out on requests with too much range specifiers"""
175
 
 
176
 
    def __init__(self, request_handler=LimitedRangeRequestHandler,
177
 
                 range_limit=None):
178
 
        HttpServer.__init__(self, request_handler)
179
 
        self.range_limit = range_limit
180
 
        self.GET_request_nb = 0
181
 
 
182
 
 
183
 
class SingleRangeRequestHandler(TestingHTTPRequestHandler):
184
 
    """Always reply to range request as if they were single.
185
 
 
186
 
    Don't be explicit about it, just to annoy the clients.
187
 
    """
188
 
 
189
 
    def get_multiple_ranges(self, file, file_size, ranges):
190
 
        """Answer as if it was a single range request and ignores the rest"""
191
 
        (start, end) = ranges[0]
192
 
        return self.get_single_range(file, file_size, start, end)
193
 
 
194
 
 
195
 
class SingleOnlyRangeRequestHandler(TestingHTTPRequestHandler):
196
 
    """Only reply to simple range requests, errors out on multiple"""
197
 
 
198
 
    def get_multiple_ranges(self, file, file_size, ranges):
199
 
        """Refuses the multiple ranges request"""
200
 
        if len(ranges) > 1:
201
 
            file.close()
202
 
            self.send_error(416, "Requested range not satisfiable")
203
 
            return
204
 
        (start, end) = ranges[0]
205
 
        return self.get_single_range(file, file_size, start, end)
206
 
 
207
 
 
208
 
class NoRangeRequestHandler(TestingHTTPRequestHandler):
209
 
    """Ignore range requests without notice"""
210
 
 
211
 
    # Just bypass the range handling done by TestingHTTPRequestHandler
212
 
    do_GET = SimpleHTTPRequestHandler.do_GET
213
 
 
214
 
 
215
 
class TestCaseWithWebserver(TestCaseWithTransport):
 
80
class TestCaseWithWebserver(tests.TestCaseWithTransport):
216
81
    """A support class that provides readonly urls that are http://.
217
82
 
218
83
    This is done by forcing the readonly server to be an http
221
86
    """
222
87
    def setUp(self):
223
88
        super(TestCaseWithWebserver, self).setUp()
224
 
        self.transport_readonly_server = HttpServer
 
89
        self.transport_readonly_server = http_server.HttpServer
225
90
 
226
91
 
227
92
class TestCaseWithTwoWebservers(TestCaseWithWebserver):
232
97
    """
233
98
    def setUp(self):
234
99
        super(TestCaseWithTwoWebservers, self).setUp()
235
 
        self.transport_secondary_server = HttpServer
 
100
        self.transport_secondary_server = http_server.HttpServer
236
101
        self.__secondary_server = None
237
102
 
238
103
    def create_transport_secondary_server(self):
251
116
        return self.__secondary_server
252
117
 
253
118
 
254
 
class ProxyServer(HttpServer):
 
119
class ProxyServer(http_server.HttpServer):
255
120
    """A proxy test server for http transports."""
256
121
 
257
122
    proxy_requests = True
258
123
 
259
124
 
260
 
class RedirectRequestHandler(TestingHTTPRequestHandler):
 
125
class RedirectRequestHandler(http_server.TestingHTTPRequestHandler):
261
126
    """Redirect all request to the specified server"""
262
127
 
263
128
    def parse_request(self):
264
129
        """Redirect a single HTTP request to another host"""
265
 
        valid = TestingHTTPRequestHandler.parse_request(self)
 
130
        valid = http_server.TestingHTTPRequestHandler.parse_request(self)
266
131
        if valid:
267
132
            tcs = self.server.test_case_server
268
133
            code, target = tcs.is_redirected(self.path)
270
135
                # Redirect as instructed
271
136
                self.send_response(code)
272
137
                self.send_header('Location', target)
 
138
                # We do not send a body
 
139
                self.send_header('Content-Length', '0')
273
140
                self.end_headers()
274
141
                return False # The job is done
275
142
            else:
278
145
        return valid
279
146
 
280
147
 
281
 
class HTTPServerRedirecting(HttpServer):
 
148
class HTTPServerRedirecting(http_server.HttpServer):
282
149
    """An HttpServer redirecting to another server """
283
150
 
284
 
    def __init__(self, request_handler=RedirectRequestHandler):
285
 
        HttpServer.__init__(self, request_handler)
 
151
    def __init__(self, request_handler=RedirectRequestHandler,
 
152
                 protocol_version=None):
 
153
        http_server.HttpServer.__init__(self, request_handler,
 
154
                                        protocol_version=protocol_version)
286
155
        # redirections is a list of tuples (source, target, code)
287
156
        # - source is a regexp for the paths requested
288
157
        # - target is a replacement for re.sub describing where
340
209
       self.old_server = self.get_secondary_server()
341
210
 
342
211
 
343
 
class AuthRequestHandler(TestingHTTPRequestHandler):
 
212
class AuthRequestHandler(http_server.TestingHTTPRequestHandler):
344
213
    """Requires an authentication to process requests.
345
214
 
346
215
    This is intended to be used with a server that always and
355
224
 
356
225
    def do_GET(self):
357
226
        if self.authorized():
358
 
            return TestingHTTPRequestHandler.do_GET(self)
 
227
            return http_server.TestingHTTPRequestHandler.do_GET(self)
359
228
        else:
360
229
            # Note that we must update test_case_server *before*
361
230
            # sending the error or the client may try to read it
364
233
            tcs.auth_required_errors += 1
365
234
            self.send_response(tcs.auth_error_code)
366
235
            self.send_header_auth_reqed()
 
236
            # We do not send a body
 
237
            self.send_header('Content-Length', '0')
367
238
            self.end_headers()
368
239
            return
369
240
 
426
297
        self.send_header(tcs.auth_header_sent,header)
427
298
 
428
299
 
429
 
class AuthServer(HttpServer):
 
300
class AuthServer(http_server.HttpServer):
430
301
    """Extends HttpServer with a dictionary of passwords.
431
302
 
432
303
    This is used as a base class for various schemes which should
443
314
    auth_error_code = None
444
315
    auth_realm = "Thou should not pass"
445
316
 
446
 
    def __init__(self, request_handler, auth_scheme):
447
 
        HttpServer.__init__(self, request_handler)
 
317
    def __init__(self, request_handler, auth_scheme,
 
318
                 protocol_version=None):
 
319
        http_server.HttpServer.__init__(self, request_handler,
 
320
                                        protocol_version=protocol_version)
448
321
        self.auth_scheme = auth_scheme
449
322
        self.password_of = {}
450
323
        self.auth_required_errors = 0
473
346
 
474
347
    auth_nonce = 'now!'
475
348
 
476
 
    def __init__(self, request_handler, auth_scheme):
477
 
        AuthServer.__init__(self, request_handler, auth_scheme)
 
349
    def __init__(self, request_handler, auth_scheme,
 
350
                 protocol_version=None):
 
351
        AuthServer.__init__(self, request_handler, auth_scheme,
 
352
                            protocol_version=protocol_version)
478
353
 
479
354
    def digest_authorized(self, auth, command):
480
355
        nonce = auth['nonce']
535
410
class HTTPBasicAuthServer(HTTPAuthServer):
536
411
    """An HTTP server requiring basic authentication"""
537
412
 
538
 
    def __init__(self):
539
 
        HTTPAuthServer.__init__(self, BasicAuthRequestHandler, 'basic')
 
413
    def __init__(self, protocol_version=None):
 
414
        HTTPAuthServer.__init__(self, BasicAuthRequestHandler, 'basic',
 
415
                                protocol_version=protocol_version)
540
416
        self.init_http_auth()
541
417
 
542
418
 
543
419
class HTTPDigestAuthServer(DigestAuthServer, HTTPAuthServer):
544
420
    """An HTTP server requiring digest authentication"""
545
421
 
546
 
    def __init__(self):
547
 
        DigestAuthServer.__init__(self, DigestAuthRequestHandler, 'digest')
 
422
    def __init__(self, protocol_version=None):
 
423
        DigestAuthServer.__init__(self, DigestAuthRequestHandler, 'digest',
 
424
                                  protocol_version=protocol_version)
548
425
        self.init_http_auth()
549
426
 
550
427
 
551
428
class ProxyBasicAuthServer(ProxyAuthServer):
552
429
    """A proxy server requiring basic authentication"""
553
430
 
554
 
    def __init__(self):
555
 
        ProxyAuthServer.__init__(self, BasicAuthRequestHandler, 'basic')
 
431
    def __init__(self, protocol_version=None):
 
432
        ProxyAuthServer.__init__(self, BasicAuthRequestHandler, 'basic',
 
433
                                 protocol_version=protocol_version)
556
434
        self.init_proxy_auth()
557
435
 
558
436
 
559
437
class ProxyDigestAuthServer(DigestAuthServer, ProxyAuthServer):
560
438
    """A proxy server requiring basic authentication"""
561
439
 
562
 
    def __init__(self):
563
 
        ProxyAuthServer.__init__(self, DigestAuthRequestHandler, 'digest')
 
440
    def __init__(self, protocol_version=None):
 
441
        ProxyAuthServer.__init__(self, DigestAuthRequestHandler, 'digest',
 
442
                                 protocol_version=protocol_version)
564
443
        self.init_proxy_auth()
565
444
 
566
445