~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/remotebranch.py

- merge improved merge base selection from aaron
aaron.bentley@utoronto.ca-20050912025534-43d7275dd948e4ad

Show diffs side-by-side

added added

removed removed

Lines of Context:
25
25
 
26
26
 
27
27
import gzip
28
 
from sets import Set
29
28
from cStringIO import StringIO
 
29
import os
30
30
import urllib2
31
 
 
32
 
from errors import BzrError, BzrCheckError
33
 
from branch import Branch, BZR_BRANCH_FORMAT
34
 
from trace import mutter
35
 
 
36
 
# velocitynet.com.au transparently proxies connections and thereby
37
 
# breaks keep-alive -- sucks!
38
 
 
39
 
 
40
 
ENABLE_URLGRABBER = True
41
 
 
 
31
import urlparse
 
32
 
 
33
from bzrlib.errors import BzrError, BzrCheckError
 
34
from bzrlib.branch import Branch, BZR_BRANCH_FORMAT
 
35
from bzrlib.trace import mutter
 
36
from bzrlib.xml import serializer_v4
 
37
 
 
38
 
 
39
ENABLE_URLGRABBER = False
 
40
 
 
41
from bzrlib.errors import BzrError, NoSuchRevision
 
42
 
 
43
class GetFailed(BzrError):
 
44
    def __init__(self, url, status):
 
45
        BzrError.__init__(self, "Get %s failed with status %s" % (url, status))
 
46
        self.url = url
 
47
        self.status = status
42
48
 
43
49
if ENABLE_URLGRABBER:
44
 
    import urlgrabber
45
 
    import urlgrabber.keepalive
46
 
    urlgrabber.keepalive.DEBUG = 0
 
50
    import util.urlgrabber
 
51
    import util.urlgrabber.keepalive
 
52
    util.urlgrabber.keepalive.DEBUG = 0
47
53
    def get_url(path, compressed=False):
48
54
        try:
49
55
            url = path
50
56
            if compressed:
51
57
                url += '.gz'
52
58
            mutter("grab url %s" % url)
53
 
            url_f = urlgrabber.urlopen(url, keepalive=1, close_connection=0)
 
59
            url_f = util.urlgrabber.urlopen(url, keepalive=1, close_connection=0)
 
60
            if url_f.status != 200:
 
61
                raise GetFailed(url, url_f.status)
54
62
            if not compressed:
55
63
                return url_f
56
64
            else:
76
84
    orig_url = url
77
85
    while True:
78
86
        try:
79
 
            ff = get_url(url + '/.bzr/branch-format')
80
 
 
 
87
            fmt_url = url + '/.bzr/branch-format'
 
88
            ff = get_url(fmt_url)
81
89
            fmt = ff.read()
82
90
            ff.close()
83
91
 
90
98
        except urllib2.URLError:
91
99
            pass
92
100
 
93
 
        try:
94
 
            idx = url.rindex('/')
95
 
        except ValueError:
96
 
            raise BzrError('no branch root found for URL %s' % orig_url)
97
 
 
98
 
        url = url[:idx]        
 
101
        scheme, host, path = list(urlparse.urlparse(url))[:3]
 
102
        # discard params, query, fragment
 
103
        
 
104
        # strip off one component of the path component
 
105
        idx = path.rfind('/')
 
106
        if idx == -1 or path == '/':
 
107
            raise BzrError('no branch root found for URL %s'
 
108
                           ' or enclosing directories'
 
109
                           % orig_url)
 
110
        path = path[:idx]
 
111
        url = urlparse.urlunparse((scheme, host, path, '', '', ''))
99
112
        
100
113
 
101
114
 
102
115
class RemoteBranch(Branch):
103
 
    def __init__(self, baseurl, find_root=True, lock_mode='r'):
 
116
    def __init__(self, baseurl, find_root=True):
104
117
        """Create new proxy for a remote branch."""
105
 
        if lock_mode not in ('', 'r'):
106
 
            raise BzrError('lock mode %r is not supported for remote branches'
107
 
                           % lock_mode)
108
 
 
109
118
        if find_root:
110
119
            self.baseurl = _find_remote_root(baseurl)
111
120
        else:
112
121
            self.baseurl = baseurl
113
122
            self._check_format()
114
123
 
 
124
        self.inventory_store = RemoteStore(baseurl + '/.bzr/inventory-store/')
 
125
        self.text_store = RemoteStore(baseurl + '/.bzr/text-store/')
 
126
        self.revision_store = RemoteStore(baseurl + '/.bzr/revision-store/')
 
127
 
115
128
    def __str__(self):
116
 
        return '%s(%r)' % (self.__class__.__name__, self.baseurl)
 
129
        b = getattr(self, 'baseurl', 'undefined')
 
130
        return '%s(%r)' % (self.__class__.__name__, b)
117
131
 
118
132
    __repr__ = __str__
119
133
 
122
136
            raise BzrError("file mode %r not supported for remote branches" % mode)
123
137
        return get_url(self.baseurl + '/.bzr/' + filename, False)
124
138
 
125
 
    def _need_readlock(self):
126
 
        # remote branch always safe for read
127
 
        pass
128
 
 
129
 
    def _need_writelock(self):
130
 
        raise BzrError("cannot get write lock on HTTP remote branch")
 
139
 
 
140
    def lock_read(self):
 
141
        # no locking for remote branches yet
 
142
        pass
 
143
 
 
144
    def lock_write(self):
 
145
        from errors import LockError
 
146
        raise LockError("write lock not supported for remote branch %s"
 
147
                        % self.baseurl)
 
148
 
 
149
    def unlock(self):
 
150
        pass
 
151
    
131
152
 
132
153
    def relpath(self, path):
133
154
        if not path.startswith(self.baseurl):
136
157
        pl = len(self.baseurl)
137
158
        return path[pl:].lstrip('/')
138
159
 
 
160
 
139
161
    def get_revision(self, revision_id):
140
 
        from revision import Revision
141
 
        revf = get_url(self.baseurl + '/.bzr/revision-store/' + revision_id,
142
 
                       True)
143
 
        r = Revision.read_xml(revf)
 
162
        try:
 
163
            revf = self.revision_store[revision_id]
 
164
        except KeyError:
 
165
            raise NoSuchRevision(self, revision_id)
 
166
        r = serializer_v4.read_revision(revf)
144
167
        if r.revision_id != revision_id:
145
168
            raise BzrCheckError('revision stored as {%s} actually contains {%s}'
146
169
                                % (revision_id, r.revision_id))
147
170
        return r
 
171
 
 
172
 
 
173
class RemoteStore(object):
 
174
    def __init__(self, baseurl):
 
175
        self._baseurl = baseurl
 
176
        
 
177
 
 
178
    def _path(self, name):
 
179
        if '/' in name:
 
180
            raise ValueError('invalid store id', name)
 
181
        return self._baseurl + '/' + name
 
182
        
 
183
    def __getitem__(self, fileid):
 
184
        p = self._path(fileid)
 
185
        try:
 
186
            return get_url(p, compressed=True)
 
187
        except:
 
188
            raise KeyError(fileid)
148
189
    
149
190
 
150
 
def simple_walk():
151
 
    from revision import Revision
152
 
    from branch import Branch
153
 
    from inventory import Inventory
154
 
 
155
 
    got_invs = Set()
156
 
    got_texts = Set()
157
 
 
158
 
    print 'read history'
159
 
    history = get_url('/.bzr/revision-history').readlines()
160
 
    num_revs = len(history)
161
 
    for i, rev_id in enumerate(history):
162
 
        rev_id = rev_id.rstrip()
163
 
        print 'read revision %d/%d' % (i, num_revs)
164
 
 
165
 
        # python gzip needs a seekable file (!!) but the HTTP response
166
 
        # isn't, so we need to buffer it
167
 
 
168
 
        rev_f = get_url('/.bzr/revision-store/%s' % rev_id,
169
 
                        compressed=True)
170
 
 
171
 
        rev = Revision.read_xml(rev_f)
172
 
        print rev.message
173
 
        inv_id = rev.inventory_id
174
 
        if inv_id not in got_invs:
175
 
            print 'get inventory %s' % inv_id
176
 
            inv_f = get_url('/.bzr/inventory-store/%s' % inv_id,
177
 
                            compressed=True)
178
 
            inv = Inventory.read_xml(inv_f)
179
 
            print '%4d inventory entries' % len(inv)
180
 
 
181
 
            for path, ie in inv.iter_entries():
182
 
                text_id = ie.text_id
183
 
                if text_id == None:
184
 
                    continue
185
 
                if text_id in got_texts:
186
 
                    continue
187
 
                print '  fetch %s text {%s}' % (path, text_id)
188
 
                text_f = get_url('/.bzr/text-store/%s' % text_id,
189
 
                                 compressed=True)
190
 
                got_texts.add(text_id)
191
 
 
192
 
            got_invs.add(inv_id)
193
 
 
194
 
        print '----'
195
 
 
196
 
 
197
 
def try_me():
198
 
    BASE_URL = 'http://bazaar-ng.org/bzr/bzr.dev/'
199
 
    b = RemoteBranch(BASE_URL)
200
 
    ## print '\n'.join(b.revision_history())
201
 
    from log import show_log
202
 
    show_log(b)
203
 
 
204
 
 
205
 
if __name__ == '__main__':
206
 
    try_me()
207
191