~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/inventory.py

  • Committer: Martin Pool
  • Date: 2005-05-05 06:24:20 UTC
  • Revision ID: mbp@sourcefrog.net-20050505062420-7c579c756f1a1d9e
- Import stat-cache code

Show diffs side-by-side

added added

removed removed

Lines of Context:
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
 
 
18
# TODO: Maybe store inventory_id in the file?  Not really needed.
 
19
 
 
20
 
18
21
# This should really be an id randomly assigned when the tree is
19
22
# created, but it's not for now.
20
23
ROOT_ID = "TREE_ROOT"
21
24
 
22
25
 
23
26
import sys, os.path, types, re
 
27
from sets import Set
 
28
 
 
29
try:
 
30
    from cElementTree import Element, ElementTree, SubElement
 
31
except ImportError:
 
32
    from elementtree.ElementTree import Element, ElementTree, SubElement
 
33
 
 
34
from xml import XMLMixin
 
35
from errors import bailout, BzrError
24
36
 
25
37
import bzrlib
26
 
from bzrlib.errors import BzrError, BzrCheckError
27
 
 
28
38
from bzrlib.osutils import uuid, quotefn, splitpath, joinpath, appendpath
29
39
from bzrlib.trace import mutter
30
 
from bzrlib.errors import NotVersionedError
31
 
        
32
40
 
33
 
class InventoryEntry(object):
 
41
class InventoryEntry(XMLMixin):
34
42
    """Description of a versioned file.
35
43
 
36
44
    An InventoryEntry has the following fields, which are also
64
72
    >>> i.add(InventoryEntry('2323', 'bye.c', 'file', '123'))
65
73
    Traceback (most recent call last):
66
74
    ...
67
 
    BzrError: inventory already contains entry with id {2323}
 
75
    BzrError: ('inventory already contains entry with id {2323}', [])
68
76
    >>> i.add(InventoryEntry('2324', 'bye.c', 'file', '123'))
69
77
    >>> i.add(InventoryEntry('2325', 'wibble', 'directory', '123'))
70
78
    >>> i.path2id('src/wibble')
93
101
 
94
102
    # TODO: split InventoryEntry into subclasses for files,
95
103
    # directories, etc etc.
96
 
 
97
 
    __slots__ = ['text_sha1', 'text_size', 'file_id', 'name', 'kind',
98
 
                 'text_id', 'parent_id', 'children', ]
99
 
 
 
104
    
100
105
    def __init__(self, file_id, name, kind, parent_id, text_id=None):
101
106
        """Create an InventoryEntry
102
107
        
110
115
        '123'
111
116
        >>> e = InventoryEntry('123', 'src/hello.c', 'file', ROOT_ID)
112
117
        Traceback (most recent call last):
113
 
        BzrCheckError: InventoryEntry name 'src/hello.c' is invalid
 
118
        BzrError: ("InventoryEntry name is not a simple filename: 'src/hello.c'", [])
114
119
        """
115
 
        if '/' in name or '\\' in name:
116
 
            raise BzrCheckError('InventoryEntry name %r is invalid' % name)
117
 
        
118
 
        self.text_sha1 = None
119
 
        self.text_size = None
120
 
    
 
120
        
 
121
        if len(splitpath(name)) != 1:
 
122
            bailout('InventoryEntry name is not a simple filename: %r'
 
123
                    % name)
 
124
        
121
125
        self.file_id = file_id
122
126
        self.name = name
123
127
        self.kind = kind
124
128
        self.text_id = text_id
125
129
        self.parent_id = parent_id
 
130
        self.text_sha1 = None
 
131
        self.text_size = None
126
132
        if kind == 'directory':
127
133
            self.children = {}
128
134
        elif kind == 'file':
143
149
                               self.parent_id, text_id=self.text_id)
144
150
        other.text_sha1 = self.text_sha1
145
151
        other.text_size = self.text_size
146
 
        # note that children are *not* copied; they're pulled across when
147
 
        # others are added
148
152
        return other
149
153
 
150
154
 
159
163
    
160
164
    def to_element(self):
161
165
        """Convert to XML element"""
162
 
        from bzrlib.xml import Element
163
 
        
164
166
        e = Element('entry')
165
167
 
166
168
        e.set('name', self.name)
211
213
 
212
214
    from_element = classmethod(from_element)
213
215
 
214
 
    def __eq__(self, other):
 
216
    def __cmp__(self, other):
 
217
        if self is other:
 
218
            return 0
215
219
        if not isinstance(other, InventoryEntry):
216
220
            return NotImplemented
217
221
 
218
 
        return (self.file_id == other.file_id) \
219
 
               and (self.name == other.name) \
220
 
               and (self.text_sha1 == other.text_sha1) \
221
 
               and (self.text_size == other.text_size) \
222
 
               and (self.text_id == other.text_id) \
223
 
               and (self.parent_id == other.parent_id) \
224
 
               and (self.kind == other.kind)
225
 
 
226
 
 
227
 
    def __ne__(self, other):
228
 
        return not (self == other)
229
 
 
230
 
    def __hash__(self):
231
 
        raise ValueError('not hashable')
 
222
        return cmp(self.file_id, other.file_id) \
 
223
               or cmp(self.name, other.name) \
 
224
               or cmp(self.text_sha1, other.text_sha1) \
 
225
               or cmp(self.text_size, other.text_size) \
 
226
               or cmp(self.text_id, other.text_id) \
 
227
               or cmp(self.parent_id, other.parent_id) \
 
228
               or cmp(self.kind, other.kind)
232
229
 
233
230
 
234
231
 
240
237
        self.parent_id = None
241
238
        self.name = ''
242
239
 
243
 
    def __eq__(self, other):
 
240
    def __cmp__(self, other):
 
241
        if self is other:
 
242
            return 0
244
243
        if not isinstance(other, RootEntry):
245
244
            return NotImplemented
246
 
        
247
 
        return (self.file_id == other.file_id) \
248
 
               and (self.children == other.children)
249
 
 
250
 
 
251
 
 
252
 
class Inventory(object):
 
245
        return cmp(self.file_id, other.file_id) \
 
246
               or cmp(self.children, other.children)
 
247
 
 
248
 
 
249
 
 
250
class Inventory(XMLMixin):
253
251
    """Inventory of versioned files in a tree.
254
252
 
255
253
    This describes which file_id is present at each point in the tree,
267
265
    inserted, other than through the Inventory API.
268
266
 
269
267
    >>> inv = Inventory()
 
268
    >>> inv.write_xml(sys.stdout)
 
269
    <inventory>
 
270
    </inventory>
270
271
    >>> inv.add(InventoryEntry('123-123', 'hello.c', 'file', ROOT_ID))
271
272
    >>> inv['123-123'].name
272
273
    'hello.c'
282
283
 
283
284
    >>> [x[0] for x in inv.iter_entries()]
284
285
    ['hello.c']
285
 
    >>> inv = Inventory('TREE_ROOT-12345678-12345678')
286
 
    >>> inv.add(InventoryEntry('123-123', 'hello.c', 'file', ROOT_ID))
 
286
    
 
287
    >>> inv.write_xml(sys.stdout)
 
288
    <inventory>
 
289
    <entry file_id="123-123" kind="file" name="hello.c" />
 
290
    </inventory>
 
291
 
287
292
    """
288
 
    def __init__(self, root_id=ROOT_ID):
 
293
 
 
294
    ## TODO: Make sure only canonical filenames are stored.
 
295
 
 
296
    ## TODO: Do something sensible about the possible collisions on
 
297
    ## case-losing filesystems.  Perhaps we should just always forbid
 
298
    ## such collisions.
 
299
 
 
300
    ## TODO: No special cases for root, rather just give it a file id
 
301
    ## like everything else.
 
302
 
 
303
    ## TODO: Probably change XML serialization to use nesting rather
 
304
    ## than parent_id pointers.
 
305
 
 
306
    ## TODO: Perhaps hold the ElementTree in memory and work directly
 
307
    ## on that rather than converting into Python objects every time?
 
308
 
 
309
    def __init__(self):
289
310
        """Create or read an inventory.
290
311
 
291
312
        If a working directory is specified, the inventory is read
295
316
        The inventory is created with a default root directory, with
296
317
        an id of None.
297
318
        """
298
 
        # We are letting Branch(init=True) create a unique inventory
299
 
        # root id. Rather than generating a random one here.
300
 
        #if root_id is None:
301
 
        #    root_id = bzrlib.branch.gen_file_id('TREE_ROOT')
302
 
        self.root = RootEntry(root_id)
 
319
        self.root = RootEntry(ROOT_ID)
303
320
        self._byid = {self.root.file_id: self.root}
304
321
 
305
322
 
327
344
            if ie.kind == 'directory':
328
345
                for cn, cie in self.iter_entries(from_dir=ie.file_id):
329
346
                    yield os.path.join(name, cn), cie
330
 
 
331
 
 
332
 
    def entries(self):
333
 
        """Return list of (path, ie) for all entries except the root.
334
 
 
335
 
        This may be faster than iter_entries.
 
347
                    
 
348
 
 
349
 
 
350
    def directories(self):
 
351
        """Return (path, entry) pairs for all directories.
336
352
        """
337
 
        accum = []
338
 
        def descend(dir_ie, dir_path):
339
 
            kids = dir_ie.children.items()
340
 
            kids.sort()
341
 
            for name, ie in kids:
342
 
                child_path = os.path.join(dir_path, name)
343
 
                accum.append((child_path, ie))
 
353
        def descend(parent_ie):
 
354
            parent_name = parent_ie.name
 
355
            yield parent_name, parent_ie
 
356
 
 
357
            # directory children in sorted order
 
358
            dn = []
 
359
            for ie in parent_ie.children.itervalues():
344
360
                if ie.kind == 'directory':
345
 
                    descend(ie, child_path)
346
 
 
347
 
        descend(self.root, '')
348
 
        return accum
349
 
 
350
 
 
351
 
    def directories(self):
352
 
        """Return (path, entry) pairs for all directories, including the root.
353
 
        """
354
 
        accum = []
355
 
        def descend(parent_ie, parent_path):
356
 
            accum.append((parent_path, parent_ie))
 
361
                    dn.append((ie.name, ie))
 
362
            dn.sort()
357
363
            
358
 
            kids = [(ie.name, ie) for ie in parent_ie.children.itervalues() if ie.kind == 'directory']
359
 
            kids.sort()
 
364
            for name, child_ie in dn:
 
365
                for sub_name, sub_ie in descend(child_ie):
 
366
                    yield appendpath(parent_name, sub_name), sub_ie
360
367
 
361
 
            for name, child_ie in kids:
362
 
                child_path = os.path.join(parent_path, name)
363
 
                descend(child_ie, child_path)
364
 
        descend(self.root, '')
365
 
        return accum
 
368
        for name, ie in descend(self.root):
 
369
            yield name, ie
366
370
        
367
371
 
368
372
 
387
391
        >>> inv['123123'].name
388
392
        'hello.c'
389
393
        """
 
394
        if file_id == None:
 
395
            raise BzrError("can't look up file_id None")
 
396
            
390
397
        try:
391
398
            return self._byid[file_id]
392
399
        except KeyError:
393
 
            if file_id == None:
394
 
                raise BzrError("can't look up file_id None")
395
 
            else:
396
 
                raise BzrError("file_id {%s} not in inventory" % file_id)
397
 
 
398
 
 
399
 
    def get_file_kind(self, file_id):
400
 
        return self._byid[file_id].kind
 
400
            raise BzrError("file_id {%s} not in inventory" % file_id)
 
401
 
401
402
 
402
403
    def get_child(self, parent_id, filename):
403
404
        return self[parent_id].children.get(filename)
409
410
        To add  a file to a branch ready to be committed, use Branch.add,
410
411
        which calls this."""
411
412
        if entry.file_id in self._byid:
412
 
            raise BzrError("inventory already contains entry with id {%s}" % entry.file_id)
413
 
 
414
 
        if entry.parent_id == ROOT_ID or entry.parent_id is None:
415
 
            entry.parent_id = self.root.file_id
 
413
            bailout("inventory already contains entry with id {%s}" % entry.file_id)
416
414
 
417
415
        try:
418
416
            parent = self._byid[entry.parent_id]
419
417
        except KeyError:
420
 
            raise BzrError("parent_id {%s} not in inventory" % entry.parent_id)
 
418
            bailout("parent_id {%s} not in inventory" % entry.parent_id)
421
419
 
422
420
        if parent.children.has_key(entry.name):
423
 
            raise BzrError("%s is already versioned" %
 
421
            bailout("%s is already versioned" %
424
422
                    appendpath(self.id2path(parent.file_id), entry.name))
425
423
 
426
424
        self._byid[entry.file_id] = entry
431
429
        """Add entry from a path.
432
430
 
433
431
        The immediate parent must already be versioned"""
434
 
        from bzrlib.branch import gen_file_id
435
 
        
436
432
        parts = bzrlib.osutils.splitpath(relpath)
437
433
        if len(parts) == 0:
438
 
            raise BzrError("cannot re-add root of inventory")
 
434
            bailout("cannot re-add root of inventory")
439
435
 
440
436
        if file_id == None:
441
 
            file_id = gen_file_id(relpath)
442
 
 
443
 
        parent_path = parts[:-1]
444
 
        parent_id = self.path2id(parent_path)
445
 
        if parent_id == None:
446
 
            raise NotVersionedError(parent_path)
447
 
 
 
437
            file_id = bzrlib.branch.gen_file_id(relpath)
 
438
 
 
439
        parent_id = self.path2id(parts[:-1])
 
440
        assert parent_id != None
448
441
        ie = InventoryEntry(file_id, parts[-1],
449
442
                            kind=kind, parent_id=parent_id)
450
443
        return self.add(ie)
476
469
        del self[ie.parent_id].children[ie.name]
477
470
 
478
471
 
 
472
    def id_set(self):
 
473
        return Set(self._byid)
 
474
 
 
475
 
479
476
    def to_element(self):
480
477
        """Convert to XML Element"""
481
 
        from bzrlib.xml import Element
482
 
        
483
478
        e = Element('inventory')
484
479
        e.text = '\n'
485
 
        if self.root.file_id not in (None, ROOT_ID):
486
 
            e.set('file_id', self.root.file_id)
487
480
        for path, ie in self.iter_entries():
488
481
            e.append(ie.to_element())
489
482
        return e
491
484
 
492
485
    def from_element(cls, elt):
493
486
        """Construct from XML Element
494
 
        
 
487
 
495
488
        >>> inv = Inventory()
496
489
        >>> inv.add(InventoryEntry('foo.c-123981239', 'foo.c', 'file', ROOT_ID))
497
490
        >>> elt = inv.to_element()
499
492
        >>> inv2 == inv
500
493
        True
501
494
        """
502
 
        # XXXX: doctest doesn't run this properly under python2.3
503
495
        assert elt.tag == 'inventory'
504
 
        root_id = elt.get('file_id') or ROOT_ID
505
 
        o = cls(root_id)
 
496
        o = cls()
506
497
        for e in elt:
507
 
            ie = InventoryEntry.from_element(e)
508
 
            if ie.parent_id == ROOT_ID:
509
 
                ie.parent_id = root_id
510
 
            o.add(ie)
 
498
            o.add(InventoryEntry.from_element(e))
511
499
        return o
512
500
        
513
501
    from_element = classmethod(from_element)
514
502
 
515
503
 
516
 
    def __eq__(self, other):
 
504
    def __cmp__(self, other):
517
505
        """Compare two sets by comparing their contents.
518
506
 
519
507
        >>> i1 = Inventory()
527
515
        >>> i1 == i2
528
516
        True
529
517
        """
 
518
        if self is other:
 
519
            return 0
 
520
        
530
521
        if not isinstance(other, Inventory):
531
522
            return NotImplemented
532
523
 
533
 
        if len(self._byid) != len(other._byid):
534
 
            # shortcut: obviously not the same
535
 
            return False
536
 
 
537
 
        return self._byid == other._byid
538
 
 
539
 
 
540
 
    def __ne__(self, other):
541
 
        return not (self == other)
542
 
 
543
 
 
544
 
    def __hash__(self):
545
 
        raise ValueError('not hashable')
546
 
 
 
524
        if self.id_set() ^ other.id_set():
 
525
            return 1
 
526
 
 
527
        for file_id in self._byid:
 
528
            c = cmp(self[file_id], other[file_id])
 
529
            if c: return c
 
530
 
 
531
        return 0
547
532
 
548
533
 
549
534
    def get_idpath(self, file_id):
559
544
            try:
560
545
                ie = self._byid[file_id]
561
546
            except KeyError:
562
 
                raise BzrError("file_id {%s} not found in inventory" % file_id)
 
547
                bailout("file_id {%s} not found in inventory" % file_id)
563
548
            p.insert(0, ie.file_id)
564
549
            file_id = ie.parent_id
565
550
        return p
569
554
        """Return as a list the path to file_id."""
570
555
 
571
556
        # get all names, skipping root
572
 
        p = [self._byid[fid].name for fid in self.get_idpath(file_id)[1:]]
 
557
        p = [self[fid].name for fid in self.get_idpath(file_id)[1:]]
573
558
        return os.sep.join(p)
574
559
            
575
560
 
619
604
 
620
605
        This does not move the working file."""
621
606
        if not is_valid_name(new_name):
622
 
            raise BzrError("not an acceptable filename: %r" % new_name)
 
607
            bailout("not an acceptable filename: %r" % new_name)
623
608
 
624
609
        new_parent = self._byid[new_parent_id]
625
610
        if new_name in new_parent.children:
626
 
            raise BzrError("%r already exists in %r" % (new_name, self.id2path(new_parent_id)))
 
611
            bailout("%r already exists in %r" % (new_name, self.id2path(new_parent_id)))
627
612
 
628
613
        new_parent_idpath = self.get_idpath(new_parent_id)
629
614
        if file_id in new_parent_idpath:
630
 
            raise BzrError("cannot move directory %r into a subdirectory of itself, %r"
 
615
            bailout("cannot move directory %r into a subdirectory of itself, %r"
631
616
                    % (self.id2path(file_id), self.id2path(new_parent_id)))
632
617
 
633
618
        file_ie = self._byid[file_id]
644
629
 
645
630
 
646
631
 
647
 
_NAME_RE = None
 
632
_NAME_RE = re.compile(r'^[^/\\]+$')
648
633
 
649
634
def is_valid_name(name):
650
 
    global _NAME_RE
651
 
    if _NAME_RE == None:
652
 
        _NAME_RE = re.compile(r'^[^/\\]+$')
653
 
        
654
635
    return bool(_NAME_RE.match(name))