~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/tree.py

[merge] John, sftp and others

Show diffs side-by-side

added added

removed removed

Lines of Context:
17
17
"""Tree classes, representing directory at point in time.
18
18
"""
19
19
 
20
 
from osutils import pumpfile, appendpath, fingerprint_file
21
20
import os
 
21
from cStringIO import StringIO
22
22
 
 
23
import bzrlib
23
24
from bzrlib.trace import mutter, note
24
 
from bzrlib.errors import BzrError
25
 
 
26
 
import bzrlib
27
 
 
28
 
exporters = {}
 
25
from bzrlib.errors import BzrError, BzrCheckError
 
26
from bzrlib.inventory import Inventory
 
27
from bzrlib.osutils import appendpath, fingerprint_file
29
28
 
30
29
class Tree(object):
31
30
    """Abstract file tree.
56
55
    def has_id(self, file_id):
57
56
        return self.inventory.has_id(file_id)
58
57
 
 
58
    def has_or_had_id(self, file_id):
 
59
        if file_id == self.inventory.root.file_id:
 
60
            return True
 
61
        return self.inventory.has_id(file_id)
 
62
 
59
63
    __contains__ = has_id
60
64
 
61
65
    def __iter__(self):
64
68
    def id2path(self, file_id):
65
69
        return self.inventory.id2path(file_id)
66
70
 
 
71
    def kind(self, file_id):
 
72
        raise NotImplementedError("subclasses must implement kind")
 
73
 
67
74
    def _get_inventory(self):
68
75
        return self._inventory
 
76
    
 
77
    def get_file_by_path(self, path):
 
78
        return self.get_file(self._inventory.path2id(path))
69
79
 
70
80
    inventory = property(_get_inventory,
71
81
                         doc="Inventory of this Tree")
72
82
 
73
83
    def _check_retrieved(self, ie, f):
 
84
        if not __debug__:
 
85
            return  
74
86
        fp = fingerprint_file(f)
75
87
        f.seek(0)
76
88
        
88
100
                     "store is probably damaged/corrupt"])
89
101
 
90
102
 
91
 
    def print_file(self, fileid):
92
 
        """Print file with id `fileid` to stdout."""
 
103
    def print_file(self, file_id):
 
104
        """Print file with id `file_id` to stdout."""
93
105
        import sys
94
 
        pumpfile(self.get_file(fileid), sys.stdout)
95
 
        
96
 
        
97
 
    def export(self, dest, format='dir', root=None):
98
 
        """Export this tree."""
99
 
        try:
100
 
            exporter = exporters[format]
101
 
        except KeyError:
102
 
            from bzrlib.errors import BzrCommandError
103
 
            raise BzrCommandError("export format %r not supported" % format)
104
 
        exporter(self, dest, root)
105
 
 
106
 
 
107
 
 
 
106
        sys.stdout.write(self.get_file_text(file_id))
 
107
        
 
108
        
108
109
class RevisionTree(Tree):
109
110
    """Tree viewing a previous revision.
110
111
 
115
116
           or at least passing a description to the constructor.
116
117
    """
117
118
    
118
 
    def __init__(self, store, inv):
119
 
        self._store = store
 
119
    def __init__(self, weave_store, inv, revision_id):
 
120
        self._weave_store = weave_store
120
121
        self._inventory = inv
 
122
        self._revision_id = revision_id
 
123
 
 
124
    def get_weave(self, file_id):
 
125
        # FIXME: RevisionTree should be given a branch
 
126
        # not a store, or the store should know the branch.
 
127
        import bzrlib.transactions as transactions
 
128
        return self._weave_store.get_weave(file_id,
 
129
            transactions.PassThroughTransaction())
 
130
 
 
131
 
 
132
    def get_file_lines(self, file_id):
 
133
        ie = self._inventory[file_id]
 
134
        weave = self.get_weave(file_id)
 
135
        return weave.get(ie.revision)
 
136
        
 
137
 
 
138
    def get_file_text(self, file_id):
 
139
        return ''.join(self.get_file_lines(file_id))
 
140
 
121
141
 
122
142
    def get_file(self, file_id):
123
 
        ie = self._inventory[file_id]
124
 
        f = self._store[ie.text_id]
125
 
        mutter("  get fileid{%s} from %r" % (file_id, self))
126
 
        self._check_retrieved(ie, f)
127
 
        return f
 
143
        return StringIO(self.get_file_text(file_id))
128
144
 
129
145
    def get_file_size(self, file_id):
130
146
        return self._inventory[file_id].text_size
131
147
 
132
148
    def get_file_sha1(self, file_id):
133
149
        ie = self._inventory[file_id]
134
 
        return ie.text_sha1
 
150
        if ie.kind == "file":
 
151
            return ie.text_sha1
 
152
 
 
153
    def is_executable(self, file_id):
 
154
        ie = self._inventory[file_id]
 
155
        if ie.kind != "file":
 
156
            return None 
 
157
        return self._inventory[file_id].executable
135
158
 
136
159
    def has_filename(self, filename):
137
160
        return bool(self.inventory.path2id(filename))
139
162
    def list_files(self):
140
163
        # The only files returned by this are those from the version
141
164
        for path, entry in self.inventory.iter_entries():
142
 
            yield path, 'V', entry.kind, entry.file_id
 
165
            yield path, 'V', entry.kind, entry.file_id, entry
 
166
 
 
167
    def get_symlink_target(self, file_id):
 
168
        ie = self._inventory[file_id]
 
169
        return ie.symlink_target;
 
170
 
 
171
    def kind(self, file_id):
 
172
        return self._inventory[file_id].kind
143
173
 
144
174
 
145
175
class EmptyTree(Tree):
146
 
    def __init__(self, root_id):
147
 
        from bzrlib.inventory import Inventory
148
 
        self._inventory = Inventory(root_id)
 
176
    def __init__(self):
 
177
        self._inventory = Inventory()
 
178
 
 
179
    def get_symlink_target(self, file_id):
 
180
        return None
149
181
 
150
182
    def has_filename(self, filename):
151
183
        return False
152
184
 
 
185
    def kind(self, file_id):
 
186
        assert self._inventory[file_id].kind == "root_directory"
 
187
        return "root_directory"
 
188
 
153
189
    def list_files(self):
154
 
        if False:  # just to make it a generator
155
 
            yield None
 
190
        return iter([])
156
191
    
 
192
    def __contains__(self, file_id):
 
193
        return file_id in self._inventory
 
194
 
 
195
    def get_file_sha1(self, file_id):
 
196
        assert self._inventory[file_id].kind == "root_directory"
 
197
        return None
157
198
 
158
199
 
159
200
######################################################################
222
263
            
223
264
 
224
265
 
225
 
######################################################################
226
 
# export
227
 
 
228
 
def dir_exporter(tree, dest, root):
229
 
    """Export this tree to a new directory.
230
 
 
231
 
    `dest` should not exist, and will be created holding the
232
 
    contents of this tree.
233
 
 
234
 
    TODO: To handle subdirectories we need to create the
235
 
           directories first.
236
 
 
237
 
    :note: If the export fails, the destination directory will be
238
 
           left in a half-assed state.
239
 
    """
240
 
    import os
241
 
    os.mkdir(dest)
242
 
    mutter('export version %r' % tree)
243
 
    inv = tree.inventory
244
 
    for dp, ie in inv.iter_entries():
245
 
        kind = ie.kind
246
 
        fullpath = appendpath(dest, dp)
247
 
        if kind == 'directory':
248
 
            os.mkdir(fullpath)
249
 
        elif kind == 'file':
250
 
            pumpfile(tree.get_file(ie.file_id), file(fullpath, 'wb'))
251
 
        else:
252
 
            raise BzrError("don't know how to export {%s} of kind %r" % (ie.file_id, kind))
253
 
        mutter("  export {%s} kind %s to %s" % (ie.file_id, kind, fullpath))
254
 
exporters['dir'] = dir_exporter
255
 
 
256
 
try:
257
 
    import tarfile
258
 
except ImportError:
259
 
    pass
260
 
else:
261
 
    def get_root_name(dest):
262
 
        """Get just the root name for a tarball.
263
 
 
264
 
        >>> get_root_name('mytar.tar')
265
 
        'mytar'
266
 
        >>> get_root_name('mytar.tar.bz2')
267
 
        'mytar'
268
 
        >>> get_root_name('tar.tar.tar.tgz')
269
 
        'tar.tar.tar'
270
 
        >>> get_root_name('bzr-0.0.5.tar.gz')
271
 
        'bzr-0.0.5'
272
 
        >>> get_root_name('a/long/path/mytar.tgz')
273
 
        'mytar'
274
 
        >>> get_root_name('../parent/../dir/other.tbz2')
275
 
        'other'
276
 
        """
277
 
        endings = ['.tar', '.tar.gz', '.tgz', '.tar.bz2', '.tbz2']
278
 
        dest = os.path.basename(dest)
279
 
        for end in endings:
280
 
            if dest.endswith(end):
281
 
                return dest[:-len(end)]
282
 
 
283
 
    def tar_exporter(tree, dest, root, compression=None):
284
 
        """Export this tree to a new tar file.
285
 
 
286
 
        `dest` will be created holding the contents of this tree; if it
287
 
        already exists, it will be clobbered, like with "tar -c".
288
 
        """
289
 
        from time import time
290
 
        now = time()
291
 
        compression = str(compression or '')
292
 
        if root is None:
293
 
            root = get_root_name(dest)
294
 
        try:
295
 
            ball = tarfile.open(dest, 'w:' + compression)
296
 
        except tarfile.CompressionError, e:
297
 
            raise BzrError(str(e))
298
 
        mutter('export version %r' % tree)
299
 
        inv = tree.inventory
300
 
        for dp, ie in inv.iter_entries():
301
 
            mutter("  export {%s} kind %s to %s" % (ie.file_id, ie.kind, dest))
302
 
            item = tarfile.TarInfo(os.path.join(root, dp))
303
 
            # TODO: would be cool to actually set it to the timestamp of the
304
 
            # revision it was last changed
305
 
            item.mtime = now
306
 
            if ie.kind == 'directory':
307
 
                item.type = tarfile.DIRTYPE
308
 
                fileobj = None
309
 
                item.name += '/'
310
 
                item.size = 0
311
 
                item.mode = 0755
312
 
            elif ie.kind == 'file':
313
 
                item.type = tarfile.REGTYPE
314
 
                fileobj = tree.get_file(ie.file_id)
315
 
                item.size = _find_file_size(fileobj)
316
 
                item.mode = 0644
317
 
            else:
318
 
                raise BzrError("don't know how to export {%s} of kind %r" %
319
 
                        (ie.file_id, ie.kind))
320
 
 
321
 
            ball.addfile(item, fileobj)
322
 
        ball.close()
323
 
    exporters['tar'] = tar_exporter
324
 
 
325
 
    def tgz_exporter(tree, dest, root):
326
 
        tar_exporter(tree, dest, root, compression='gz')
327
 
    exporters['tgz'] = tgz_exporter
328
 
 
329
 
    def tbz_exporter(tree, dest, root):
330
 
        tar_exporter(tree, dest, root, compression='bz2')
331
 
    exporters['tbz2'] = tbz_exporter
332
 
 
333
 
 
334
 
def _find_file_size(fileobj):
335
 
    offset = fileobj.tell()
336
 
    try:
337
 
        fileobj.seek(0, 2)
338
 
        size = fileobj.tell()
339
 
    except TypeError:
340
 
        # gzip doesn't accept second argument to seek()
341
 
        fileobj.seek(0)
342
 
        size = 0
343
 
        while True:
344
 
            nread = len(fileobj.read())
345
 
            if nread == 0:
346
 
                break
347
 
            size += nread
348
 
    fileobj.seek(offset)
349
 
    return size