~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/transport/http/_urllib.py

Merge with prepare-shelf

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005, 2006, 2007 Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
from cStringIO import StringIO
 
18
import urllib
 
19
import urlparse
 
20
 
 
21
from bzrlib import (
 
22
    errors,
 
23
    trace,
 
24
    urlutils,
 
25
    )
 
26
from bzrlib.transport import http
 
27
# TODO: handle_response should be integrated into the http/__init__.py
 
28
from bzrlib.transport.http.response import handle_response
 
29
from bzrlib.transport.http._urllib2_wrappers import (
 
30
    Opener,
 
31
    Request,
 
32
    )
 
33
 
 
34
 
 
35
class HttpTransport_urllib(http.HttpTransportBase):
 
36
    """Python urllib transport for http and https."""
 
37
 
 
38
    # In order to debug we have to issue our traces in sync with
 
39
    # httplib, which use print :(
 
40
    _debuglevel = 0
 
41
 
 
42
    _opener_class = Opener
 
43
 
 
44
    def __init__(self, base, _from_transport=None):
 
45
        super(HttpTransport_urllib, self).__init__(
 
46
            base, _from_transport=_from_transport)
 
47
        if _from_transport is not None:
 
48
            self._opener = _from_transport._opener
 
49
        else:
 
50
            self._opener = self._opener_class()
 
51
 
 
52
    def _perform(self, request):
 
53
        """Send the request to the server and handles common errors.
 
54
 
 
55
        :returns: urllib2 Response object
 
56
        """
 
57
        connection = self._get_connection()
 
58
        if connection is not None:
 
59
            # Give back shared info
 
60
            request.connection = connection
 
61
            (auth, proxy_auth) = self._get_credentials()
 
62
            # Clean the httplib.HTTPConnection pipeline in case the previous
 
63
            # request couldn't do it
 
64
            connection.cleanup_pipe()
 
65
        else:
 
66
            # First request, initialize credentials.
 
67
            # scheme and realm will be set by the _urllib2_wrappers.AuthHandler
 
68
            auth = self._create_auth()
 
69
            # Proxy initialization will be done by the first proxied request
 
70
            proxy_auth = dict()
 
71
        # Ensure authentication info is provided
 
72
        request.auth = auth
 
73
        request.proxy_auth = proxy_auth
 
74
 
 
75
        if self._debuglevel > 0:
 
76
            print 'perform: %s base: %s, url: %s' % (request.method, self.base,
 
77
                                                     request.get_full_url())
 
78
        response = self._opener.open(request)
 
79
        if self._get_connection() is not request.connection:
 
80
            # First connection or reconnection
 
81
            self._set_connection(request.connection,
 
82
                                 (request.auth, request.proxy_auth))
 
83
        else:
 
84
            # http may change the credentials while keeping the
 
85
            # connection opened
 
86
            self._update_credentials((request.auth, request.proxy_auth))
 
87
 
 
88
        code = response.code
 
89
        if request.follow_redirections is False \
 
90
                and code in (301, 302, 303, 307):
 
91
            raise errors.RedirectRequested(request.get_full_url(),
 
92
                                           request.redirected_to,
 
93
                                           is_permanent=(code == 301),
 
94
                                           qual_proto=self._scheme)
 
95
 
 
96
        if request.redirected_to is not None:
 
97
            trace.mutter('redirected from: %s to: %s' % (request.get_full_url(),
 
98
                                                         request.redirected_to))
 
99
 
 
100
        return response
 
101
 
 
102
    def _get(self, relpath, offsets, tail_amount=0):
 
103
        """See HttpTransport._get"""
 
104
 
 
105
        abspath = self._remote_path(relpath)
 
106
        headers = {}
 
107
        accepted_errors = [200, 404]
 
108
        if offsets or tail_amount:
 
109
            range_header = self._attempted_range_header(offsets, tail_amount)
 
110
            if range_header is not None:
 
111
                accepted_errors.append(206)
 
112
                accepted_errors.append(400)
 
113
                accepted_errors.append(416)
 
114
                bytes = 'bytes=' + range_header
 
115
                headers = {'Range': bytes}
 
116
 
 
117
        request = Request('GET', abspath, None, headers,
 
118
                          accepted_errors=accepted_errors)
 
119
        response = self._perform(request)
 
120
 
 
121
        code = response.code
 
122
        if code == 404: # not found
 
123
            raise errors.NoSuchFile(abspath)
 
124
        elif code in (400, 416):
 
125
            # We don't know which, but one of the ranges we specified was
 
126
            # wrong.
 
127
            raise errors.InvalidHttpRange(abspath, range_header,
 
128
                                          'Server return code %d' % code)
 
129
 
 
130
        data = handle_response(abspath, code, response.info(), response)
 
131
        return code, data
 
132
 
 
133
    def _post(self, body_bytes):
 
134
        abspath = self._remote_path('.bzr/smart')
 
135
        # We include 403 in accepted_errors so that send_http_smart_request can
 
136
        # handle a 403.  Otherwise a 403 causes an unhandled TransportError.
 
137
        response = self._perform(Request('POST', abspath, body_bytes,
 
138
                                         accepted_errors=[200, 403]))
 
139
        code = response.code
 
140
        data = handle_response(abspath, code, response.info(), response)
 
141
        return code, data
 
142
 
 
143
    def _head(self, relpath):
 
144
        """Request the HEAD of a file.
 
145
 
 
146
        Performs the request and leaves callers handle the results.
 
147
        """
 
148
        abspath = self._remote_path(relpath)
 
149
        request = Request('HEAD', abspath,
 
150
                          accepted_errors=[200, 404])
 
151
        response = self._perform(request)
 
152
 
 
153
        return response
 
154
 
 
155
    def has(self, relpath):
 
156
        """Does the target location exist?
 
157
        """
 
158
        response = self._head(relpath)
 
159
 
 
160
        code = response.code
 
161
        if code == 200: # "ok",
 
162
            return True
 
163
        else:
 
164
            return False
 
165
 
 
166
 
 
167
def get_test_permutations():
 
168
    """Return the permutations to be used in testing."""
 
169
    from bzrlib.tests.http_server import HttpServer_urllib
 
170
    return [(HttpTransport_urllib, HttpServer_urllib),
 
171
            ]