~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/inventory.py

  • Committer: mbp at sourcefrog
  • Date: 2005-04-09 04:58:33 UTC
  • Revision ID: mbp@sourcefrog.net-20050409045833-7cf90a2f94b974591fbe8b91
new Revfile.add() dwim

Show diffs side-by-side

added added

removed removed

Lines of Context:
14
14
# along with this program; if not, write to the Free Software
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
 
17
"""Inventories map files to their name in a revision."""
 
18
 
 
19
# TODO: Maybe store inventory_id in the file?  Not really needed.
 
20
 
 
21
__author__ = "Martin Pool <mbp@canonical.com>"
 
22
 
17
23
 
18
24
# This should really be an id randomly assigned when the tree is
19
25
# created, but it's not for now.
21
27
 
22
28
 
23
29
import sys, os.path, types, re
 
30
from sets import Set
 
31
 
 
32
try:
 
33
    from cElementTree import Element, ElementTree, SubElement
 
34
except ImportError:
 
35
    from elementtree.ElementTree import Element, ElementTree, SubElement
 
36
 
 
37
from xml import XMLMixin
 
38
from errors import bailout, BzrError
24
39
 
25
40
import bzrlib
26
 
from bzrlib.errors import BzrError, BzrCheckError
27
 
 
28
41
from bzrlib.osutils import uuid, quotefn, splitpath, joinpath, appendpath
29
42
from bzrlib.trace import mutter
30
43
 
31
 
class InventoryEntry(object):
 
44
class InventoryEntry(XMLMixin):
32
45
    """Description of a versioned file.
33
46
 
34
47
    An InventoryEntry has the following fields, which are also
62
75
    >>> i.add(InventoryEntry('2323', 'bye.c', 'file', '123'))
63
76
    Traceback (most recent call last):
64
77
    ...
65
 
    BzrError: inventory already contains entry with id {2323}
 
78
    BzrError: ('inventory already contains entry with id {2323}', [])
66
79
    >>> i.add(InventoryEntry('2324', 'bye.c', 'file', '123'))
67
80
    >>> i.add(InventoryEntry('2325', 'wibble', 'directory', '123'))
68
81
    >>> i.path2id('src/wibble')
84
97
    >>> i.id2path('2326')
85
98
    'src/wibble/wibble.c'
86
99
 
87
 
    TODO: Maybe also keep the full path of the entry, and the children?
 
100
    :todo: Maybe also keep the full path of the entry, and the children?
88
101
           But those depend on its position within a particular inventory, and
89
102
           it would be nice not to need to hold the backpointer here.
90
103
    """
91
104
 
92
105
    # TODO: split InventoryEntry into subclasses for files,
93
106
    # directories, etc etc.
94
 
 
95
 
    __slots__ = ['text_sha1', 'text_size', 'file_id', 'name', 'kind',
96
 
                 'text_id', 'parent_id', 'children', ]
97
 
 
 
107
    
98
108
    def __init__(self, file_id, name, kind, parent_id, text_id=None):
99
109
        """Create an InventoryEntry
100
110
        
108
118
        '123'
109
119
        >>> e = InventoryEntry('123', 'src/hello.c', 'file', ROOT_ID)
110
120
        Traceback (most recent call last):
111
 
        BzrCheckError: InventoryEntry name 'src/hello.c' is invalid
 
121
        BzrError: ("InventoryEntry name is not a simple filename: 'src/hello.c'", [])
112
122
        """
113
 
        if '/' in name or '\\' in name:
114
 
            raise BzrCheckError('InventoryEntry name %r is invalid' % name)
115
 
        
116
 
        self.text_sha1 = None
117
 
        self.text_size = None
118
 
    
 
123
        
 
124
        if len(splitpath(name)) != 1:
 
125
            bailout('InventoryEntry name is not a simple filename: %r'
 
126
                    % name)
 
127
        
119
128
        self.file_id = file_id
120
129
        self.name = name
 
130
        assert kind in ['file', 'directory']
121
131
        self.kind = kind
122
132
        self.text_id = text_id
123
133
        self.parent_id = parent_id
 
134
        self.text_sha1 = None
 
135
        self.text_size = None
124
136
        if kind == 'directory':
125
137
            self.children = {}
126
 
        elif kind == 'file':
127
 
            pass
128
138
        else:
129
 
            raise BzrError("unhandled entry kind %r" % kind)
130
 
 
 
139
            assert kind == 'file'
131
140
 
132
141
 
133
142
    def sorted_children(self):
141
150
                               self.parent_id, text_id=self.text_id)
142
151
        other.text_sha1 = self.text_sha1
143
152
        other.text_size = self.text_size
144
 
        # note that children are *not* copied; they're pulled across when
145
 
        # others are added
146
153
        return other
147
154
 
148
155
 
157
164
    
158
165
    def to_element(self):
159
166
        """Convert to XML element"""
160
 
        from bzrlib.xml import Element
161
 
        
162
167
        e = Element('entry')
163
168
 
164
169
        e.set('name', self.name)
209
214
 
210
215
    from_element = classmethod(from_element)
211
216
 
212
 
    def __eq__(self, other):
 
217
    def __cmp__(self, other):
 
218
        if self is other:
 
219
            return 0
213
220
        if not isinstance(other, InventoryEntry):
214
221
            return NotImplemented
215
222
 
216
 
        return (self.file_id == other.file_id) \
217
 
               and (self.name == other.name) \
218
 
               and (self.text_sha1 == other.text_sha1) \
219
 
               and (self.text_size == other.text_size) \
220
 
               and (self.text_id == other.text_id) \
221
 
               and (self.parent_id == other.parent_id) \
222
 
               and (self.kind == other.kind)
223
 
 
224
 
 
225
 
    def __ne__(self, other):
226
 
        return not (self == other)
227
 
 
228
 
    def __hash__(self):
229
 
        raise ValueError('not hashable')
 
223
        return cmp(self.file_id, other.file_id) \
 
224
               or cmp(self.name, other.name) \
 
225
               or cmp(self.text_sha1, other.text_sha1) \
 
226
               or cmp(self.text_size, other.text_size) \
 
227
               or cmp(self.text_id, other.text_id) \
 
228
               or cmp(self.parent_id, other.parent_id) \
 
229
               or cmp(self.kind, other.kind)
230
230
 
231
231
 
232
232
 
238
238
        self.parent_id = None
239
239
        self.name = ''
240
240
 
241
 
    def __eq__(self, other):
 
241
    def __cmp__(self, other):
 
242
        if self is other:
 
243
            return 0
242
244
        if not isinstance(other, RootEntry):
243
245
            return NotImplemented
244
 
        
245
 
        return (self.file_id == other.file_id) \
246
 
               and (self.children == other.children)
247
 
 
248
 
 
249
 
 
250
 
class Inventory(object):
 
246
        return cmp(self.file_id, other.file_id) \
 
247
               or cmp(self.children, other.children)
 
248
 
 
249
 
 
250
 
 
251
class Inventory(XMLMixin):
251
252
    """Inventory of versioned files in a tree.
252
253
 
253
 
    This describes which file_id is present at each point in the tree,
254
 
    and possibly the SHA-1 or other information about the file.
255
 
    Entries can be looked up either by path or by file_id.
 
254
    An Inventory acts like a set of InventoryEntry items.  You can
 
255
    also look files up by their file_id or name.
 
256
    
 
257
    May be read from and written to a metadata file in a tree.  To
 
258
    manipulate the inventory (for example to add a file), it is read
 
259
    in, modified, and then written back out.
256
260
 
257
261
    The inventory represents a typical unix file tree, with
258
262
    directories containing files and subdirectories.  We never store
265
269
    inserted, other than through the Inventory API.
266
270
 
267
271
    >>> inv = Inventory()
 
272
    >>> inv.write_xml(sys.stdout)
 
273
    <inventory>
 
274
    </inventory>
268
275
    >>> inv.add(InventoryEntry('123-123', 'hello.c', 'file', ROOT_ID))
269
276
    >>> inv['123-123'].name
270
277
    'hello.c'
280
287
 
281
288
    >>> [x[0] for x in inv.iter_entries()]
282
289
    ['hello.c']
283
 
    >>> inv = Inventory('TREE_ROOT-12345678-12345678')
284
 
    >>> inv.add(InventoryEntry('123-123', 'hello.c', 'file', ROOT_ID))
 
290
    
 
291
    >>> inv.write_xml(sys.stdout)
 
292
    <inventory>
 
293
    <entry file_id="123-123" kind="file" name="hello.c" />
 
294
    </inventory>
 
295
 
285
296
    """
286
 
    def __init__(self, root_id=ROOT_ID):
 
297
 
 
298
    ## TODO: Make sure only canonical filenames are stored.
 
299
 
 
300
    ## TODO: Do something sensible about the possible collisions on
 
301
    ## case-losing filesystems.  Perhaps we should just always forbid
 
302
    ## such collisions.
 
303
 
 
304
    ## TODO: No special cases for root, rather just give it a file id
 
305
    ## like everything else.
 
306
 
 
307
    ## TODO: Probably change XML serialization to use nesting
 
308
 
 
309
    def __init__(self):
287
310
        """Create or read an inventory.
288
311
 
289
312
        If a working directory is specified, the inventory is read
293
316
        The inventory is created with a default root directory, with
294
317
        an id of None.
295
318
        """
296
 
        # We are letting Branch(init=True) create a unique inventory
297
 
        # root id. Rather than generating a random one here.
298
 
        #if root_id is None:
299
 
        #    root_id = bzrlib.branch.gen_file_id('TREE_ROOT')
300
 
        self.root = RootEntry(root_id)
 
319
        self.root = RootEntry(ROOT_ID)
301
320
        self._byid = {self.root.file_id: self.root}
302
321
 
303
322
 
324
343
            yield name, ie
325
344
            if ie.kind == 'directory':
326
345
                for cn, cie in self.iter_entries(from_dir=ie.file_id):
327
 
                    yield os.path.join(name, cn), cie
328
 
 
329
 
 
330
 
    def entries(self):
331
 
        """Return list of (path, ie) for all entries except the root.
332
 
 
333
 
        This may be faster than iter_entries.
 
346
                    yield '/'.join((name, cn)), cie
 
347
                    
 
348
 
 
349
 
 
350
    def directories(self):
 
351
        """Return (path, entry) pairs for all directories.
334
352
        """
335
 
        accum = []
336
 
        def descend(dir_ie, dir_path):
337
 
            kids = dir_ie.children.items()
338
 
            kids.sort()
339
 
            for name, ie in kids:
340
 
                child_path = os.path.join(dir_path, name)
341
 
                accum.append((child_path, ie))
 
353
        def descend(parent_ie):
 
354
            parent_name = parent_ie.name
 
355
            yield parent_name, parent_ie
 
356
 
 
357
            # directory children in sorted order
 
358
            dn = []
 
359
            for ie in parent_ie.children.itervalues():
342
360
                if ie.kind == 'directory':
343
 
                    descend(ie, child_path)
344
 
 
345
 
        descend(self.root, '')
346
 
        return accum
347
 
 
348
 
 
349
 
    def directories(self):
350
 
        """Return (path, entry) pairs for all directories, including the root.
351
 
        """
352
 
        accum = []
353
 
        def descend(parent_ie, parent_path):
354
 
            accum.append((parent_path, parent_ie))
 
361
                    dn.append((ie.name, ie))
 
362
            dn.sort()
355
363
            
356
 
            kids = [(ie.name, ie) for ie in parent_ie.children.itervalues() if ie.kind == 'directory']
357
 
            kids.sort()
 
364
            for name, child_ie in dn:
 
365
                for sub_name, sub_ie in descend(child_ie):
 
366
                    yield appendpath(parent_name, sub_name), sub_ie
358
367
 
359
 
            for name, child_ie in kids:
360
 
                child_path = os.path.join(parent_path, name)
361
 
                descend(child_ie, child_path)
362
 
        descend(self.root, '')
363
 
        return accum
 
368
        for name, ie in descend(self.root):
 
369
            yield name, ie
364
370
        
365
371
 
366
372
 
385
391
        >>> inv['123123'].name
386
392
        'hello.c'
387
393
        """
 
394
        if file_id == None:
 
395
            raise BzrError("can't look up file_id None")
 
396
            
388
397
        try:
389
398
            return self._byid[file_id]
390
399
        except KeyError:
391
 
            if file_id == None:
392
 
                raise BzrError("can't look up file_id None")
393
 
            else:
394
 
                raise BzrError("file_id {%s} not in inventory" % file_id)
395
 
 
396
 
 
397
 
    def get_file_kind(self, file_id):
398
 
        return self._byid[file_id].kind
 
400
            raise BzrError("file_id {%s} not in inventory" % file_id)
 
401
 
399
402
 
400
403
    def get_child(self, parent_id, filename):
401
404
        return self[parent_id].children.get(filename)
407
410
        To add  a file to a branch ready to be committed, use Branch.add,
408
411
        which calls this."""
409
412
        if entry.file_id in self._byid:
410
 
            raise BzrError("inventory already contains entry with id {%s}" % entry.file_id)
411
 
 
412
 
        if entry.parent_id == ROOT_ID or entry.parent_id is None:
413
 
            entry.parent_id = self.root.file_id
 
413
            bailout("inventory already contains entry with id {%s}" % entry.file_id)
414
414
 
415
415
        try:
416
416
            parent = self._byid[entry.parent_id]
417
417
        except KeyError:
418
 
            raise BzrError("parent_id {%s} not in inventory" % entry.parent_id)
 
418
            bailout("parent_id {%s} not in inventory" % entry.parent_id)
419
419
 
420
420
        if parent.children.has_key(entry.name):
421
 
            raise BzrError("%s is already versioned" %
 
421
            bailout("%s is already versioned" %
422
422
                    appendpath(self.id2path(parent.file_id), entry.name))
423
423
 
424
424
        self._byid[entry.file_id] = entry
429
429
        """Add entry from a path.
430
430
 
431
431
        The immediate parent must already be versioned"""
432
 
        from bzrlib.errors import NotVersionedError
433
 
        
434
432
        parts = bzrlib.osutils.splitpath(relpath)
435
433
        if len(parts) == 0:
436
 
            raise BzrError("cannot re-add root of inventory")
 
434
            bailout("cannot re-add root of inventory")
437
435
 
438
436
        if file_id == None:
439
 
            from bzrlib.branch import gen_file_id
440
 
            file_id = gen_file_id(relpath)
441
 
 
442
 
        parent_path = parts[:-1]
443
 
        parent_id = self.path2id(parent_path)
444
 
        if parent_id == None:
445
 
            raise NotVersionedError(parent_path)
446
 
 
 
437
            file_id = bzrlib.branch.gen_file_id(relpath)
 
438
 
 
439
        parent_id = self.path2id(parts[:-1])
 
440
        assert parent_id != None
447
441
        ie = InventoryEntry(file_id, parts[-1],
448
442
                            kind=kind, parent_id=parent_id)
449
443
        return self.add(ie)
475
469
        del self[ie.parent_id].children[ie.name]
476
470
 
477
471
 
 
472
    def id_set(self):
 
473
        return Set(self._byid)
 
474
 
 
475
 
478
476
    def to_element(self):
479
477
        """Convert to XML Element"""
480
 
        from bzrlib.xml import Element
481
 
        
482
478
        e = Element('inventory')
483
479
        e.text = '\n'
484
 
        if self.root.file_id not in (None, ROOT_ID):
485
 
            e.set('file_id', self.root.file_id)
486
480
        for path, ie in self.iter_entries():
487
481
            e.append(ie.to_element())
488
482
        return e
490
484
 
491
485
    def from_element(cls, elt):
492
486
        """Construct from XML Element
493
 
        
 
487
 
494
488
        >>> inv = Inventory()
495
489
        >>> inv.add(InventoryEntry('foo.c-123981239', 'foo.c', 'file', ROOT_ID))
496
490
        >>> elt = inv.to_element()
498
492
        >>> inv2 == inv
499
493
        True
500
494
        """
501
 
        # XXXX: doctest doesn't run this properly under python2.3
502
495
        assert elt.tag == 'inventory'
503
 
        root_id = elt.get('file_id') or ROOT_ID
504
 
        o = cls(root_id)
 
496
        o = cls()
505
497
        for e in elt:
506
 
            ie = InventoryEntry.from_element(e)
507
 
            if ie.parent_id == ROOT_ID:
508
 
                ie.parent_id = root_id
509
 
            o.add(ie)
 
498
            o.add(InventoryEntry.from_element(e))
510
499
        return o
511
500
        
512
501
    from_element = classmethod(from_element)
513
502
 
514
503
 
515
 
    def __eq__(self, other):
 
504
    def __cmp__(self, other):
516
505
        """Compare two sets by comparing their contents.
517
506
 
518
507
        >>> i1 = Inventory()
526
515
        >>> i1 == i2
527
516
        True
528
517
        """
 
518
        if self is other:
 
519
            return 0
 
520
        
529
521
        if not isinstance(other, Inventory):
530
522
            return NotImplemented
531
523
 
532
 
        if len(self._byid) != len(other._byid):
533
 
            # shortcut: obviously not the same
534
 
            return False
535
 
 
536
 
        return self._byid == other._byid
537
 
 
538
 
 
539
 
    def __ne__(self, other):
540
 
        return not (self == other)
541
 
 
542
 
 
543
 
    def __hash__(self):
544
 
        raise ValueError('not hashable')
545
 
 
 
524
        if self.id_set() ^ other.id_set():
 
525
            return 1
 
526
 
 
527
        for file_id in self._byid:
 
528
            c = cmp(self[file_id], other[file_id])
 
529
            if c: return c
 
530
 
 
531
        return 0
546
532
 
547
533
 
548
534
    def get_idpath(self, file_id):
558
544
            try:
559
545
                ie = self._byid[file_id]
560
546
            except KeyError:
561
 
                raise BzrError("file_id {%s} not found in inventory" % file_id)
 
547
                bailout("file_id {%s} not found in inventory" % file_id)
562
548
            p.insert(0, ie.file_id)
563
549
            file_id = ie.parent_id
564
550
        return p
568
554
        """Return as a list the path to file_id."""
569
555
 
570
556
        # get all names, skipping root
571
 
        p = [self._byid[fid].name for fid in self.get_idpath(file_id)[1:]]
572
 
        return os.sep.join(p)
 
557
        p = [self[fid].name for fid in self.get_idpath(file_id)[1:]]
 
558
        return '/'.join(p)
573
559
            
574
560
 
575
561
 
618
604
 
619
605
        This does not move the working file."""
620
606
        if not is_valid_name(new_name):
621
 
            raise BzrError("not an acceptable filename: %r" % new_name)
 
607
            bailout("not an acceptable filename: %r" % new_name)
622
608
 
623
609
        new_parent = self._byid[new_parent_id]
624
610
        if new_name in new_parent.children:
625
 
            raise BzrError("%r already exists in %r" % (new_name, self.id2path(new_parent_id)))
 
611
            bailout("%r already exists in %r" % (new_name, self.id2path(new_parent_id)))
626
612
 
627
613
        new_parent_idpath = self.get_idpath(new_parent_id)
628
614
        if file_id in new_parent_idpath:
629
 
            raise BzrError("cannot move directory %r into a subdirectory of itself, %r"
 
615
            bailout("cannot move directory %r into a subdirectory of itself, %r"
630
616
                    % (self.id2path(file_id), self.id2path(new_parent_id)))
631
617
 
632
618
        file_ie = self._byid[file_id]