/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/inventory.py

  • Committer: mbp at sourcefrog
  • Date: 2005-04-11 02:53:57 UTC
  • Revision ID: mbp@sourcefrog.net-20050411025357-af577721308648ae
- remove profiler temporary file when done

Show diffs side-by-side

added added

removed removed

Lines of Context:
14
14
# along with this program; if not, write to the Free Software
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
 
17
"""Inventories map files to their name in a revision."""
 
18
 
 
19
# TODO: Maybe store inventory_id in the file?  Not really needed.
 
20
 
 
21
__author__ = "Martin Pool <mbp@canonical.com>"
 
22
 
17
23
 
18
24
# This should really be an id randomly assigned when the tree is
19
25
# created, but it's not for now.
21
27
 
22
28
 
23
29
import sys, os.path, types, re
 
30
from sets import Set
 
31
 
 
32
try:
 
33
    from cElementTree import Element, ElementTree, SubElement
 
34
except ImportError:
 
35
    from elementtree.ElementTree import Element, ElementTree, SubElement
 
36
 
 
37
from xml import XMLMixin
 
38
from errors import bailout, BzrError
24
39
 
25
40
import bzrlib
26
 
from bzrlib.errors import BzrError, BzrCheckError
27
 
 
28
41
from bzrlib.osutils import uuid, quotefn, splitpath, joinpath, appendpath
29
42
from bzrlib.trace import mutter
30
 
from bzrlib.errors import NotVersionedError
31
 
        
32
43
 
33
 
class InventoryEntry(object):
 
44
class InventoryEntry(XMLMixin):
34
45
    """Description of a versioned file.
35
46
 
36
47
    An InventoryEntry has the following fields, which are also
64
75
    >>> i.add(InventoryEntry('2323', 'bye.c', 'file', '123'))
65
76
    Traceback (most recent call last):
66
77
    ...
67
 
    BzrError: inventory already contains entry with id {2323}
 
78
    BzrError: ('inventory already contains entry with id {2323}', [])
68
79
    >>> i.add(InventoryEntry('2324', 'bye.c', 'file', '123'))
69
80
    >>> i.add(InventoryEntry('2325', 'wibble', 'directory', '123'))
70
81
    >>> i.path2id('src/wibble')
86
97
    >>> i.id2path('2326')
87
98
    'src/wibble/wibble.c'
88
99
 
89
 
    TODO: Maybe also keep the full path of the entry, and the children?
 
100
    :todo: Maybe also keep the full path of the entry, and the children?
90
101
           But those depend on its position within a particular inventory, and
91
102
           it would be nice not to need to hold the backpointer here.
92
103
    """
93
104
 
94
105
    # TODO: split InventoryEntry into subclasses for files,
95
106
    # directories, etc etc.
96
 
 
97
 
    __slots__ = ['text_sha1', 'text_size', 'file_id', 'name', 'kind',
98
 
                 'text_id', 'parent_id', 'children', ]
99
 
 
 
107
    
100
108
    def __init__(self, file_id, name, kind, parent_id, text_id=None):
101
109
        """Create an InventoryEntry
102
110
        
110
118
        '123'
111
119
        >>> e = InventoryEntry('123', 'src/hello.c', 'file', ROOT_ID)
112
120
        Traceback (most recent call last):
113
 
        BzrCheckError: InventoryEntry name 'src/hello.c' is invalid
 
121
        BzrError: ("InventoryEntry name is not a simple filename: 'src/hello.c'", [])
114
122
        """
115
 
        if '/' in name or '\\' in name:
116
 
            raise BzrCheckError('InventoryEntry name %r is invalid' % name)
117
 
        
118
 
        self.text_sha1 = None
119
 
        self.text_size = None
120
 
    
 
123
        
 
124
        if len(splitpath(name)) != 1:
 
125
            bailout('InventoryEntry name is not a simple filename: %r'
 
126
                    % name)
 
127
        
121
128
        self.file_id = file_id
122
129
        self.name = name
123
130
        self.kind = kind
124
131
        self.text_id = text_id
125
132
        self.parent_id = parent_id
 
133
        self.text_sha1 = None
 
134
        self.text_size = None
126
135
        if kind == 'directory':
127
136
            self.children = {}
128
137
        elif kind == 'file':
143
152
                               self.parent_id, text_id=self.text_id)
144
153
        other.text_sha1 = self.text_sha1
145
154
        other.text_size = self.text_size
146
 
        # note that children are *not* copied; they're pulled across when
147
 
        # others are added
148
155
        return other
149
156
 
150
157
 
159
166
    
160
167
    def to_element(self):
161
168
        """Convert to XML element"""
162
 
        from bzrlib.xml import Element
163
 
        
164
169
        e = Element('entry')
165
170
 
166
171
        e.set('name', self.name)
211
216
 
212
217
    from_element = classmethod(from_element)
213
218
 
214
 
    def __eq__(self, other):
 
219
    def __cmp__(self, other):
 
220
        if self is other:
 
221
            return 0
215
222
        if not isinstance(other, InventoryEntry):
216
223
            return NotImplemented
217
224
 
218
 
        return (self.file_id == other.file_id) \
219
 
               and (self.name == other.name) \
220
 
               and (self.text_sha1 == other.text_sha1) \
221
 
               and (self.text_size == other.text_size) \
222
 
               and (self.text_id == other.text_id) \
223
 
               and (self.parent_id == other.parent_id) \
224
 
               and (self.kind == other.kind)
225
 
 
226
 
 
227
 
    def __ne__(self, other):
228
 
        return not (self == other)
229
 
 
230
 
    def __hash__(self):
231
 
        raise ValueError('not hashable')
 
225
        return cmp(self.file_id, other.file_id) \
 
226
               or cmp(self.name, other.name) \
 
227
               or cmp(self.text_sha1, other.text_sha1) \
 
228
               or cmp(self.text_size, other.text_size) \
 
229
               or cmp(self.text_id, other.text_id) \
 
230
               or cmp(self.parent_id, other.parent_id) \
 
231
               or cmp(self.kind, other.kind)
232
232
 
233
233
 
234
234
 
240
240
        self.parent_id = None
241
241
        self.name = ''
242
242
 
243
 
    def __eq__(self, other):
 
243
    def __cmp__(self, other):
 
244
        if self is other:
 
245
            return 0
244
246
        if not isinstance(other, RootEntry):
245
247
            return NotImplemented
246
 
        
247
 
        return (self.file_id == other.file_id) \
248
 
               and (self.children == other.children)
249
 
 
250
 
 
251
 
 
252
 
class Inventory(object):
 
248
        return cmp(self.file_id, other.file_id) \
 
249
               or cmp(self.children, other.children)
 
250
 
 
251
 
 
252
 
 
253
class Inventory(XMLMixin):
253
254
    """Inventory of versioned files in a tree.
254
255
 
255
 
    This describes which file_id is present at each point in the tree,
256
 
    and possibly the SHA-1 or other information about the file.
257
 
    Entries can be looked up either by path or by file_id.
 
256
    An Inventory acts like a set of InventoryEntry items.  You can
 
257
    also look files up by their file_id or name.
 
258
    
 
259
    May be read from and written to a metadata file in a tree.  To
 
260
    manipulate the inventory (for example to add a file), it is read
 
261
    in, modified, and then written back out.
258
262
 
259
263
    The inventory represents a typical unix file tree, with
260
264
    directories containing files and subdirectories.  We never store
267
271
    inserted, other than through the Inventory API.
268
272
 
269
273
    >>> inv = Inventory()
 
274
    >>> inv.write_xml(sys.stdout)
 
275
    <inventory>
 
276
    </inventory>
270
277
    >>> inv.add(InventoryEntry('123-123', 'hello.c', 'file', ROOT_ID))
271
278
    >>> inv['123-123'].name
272
279
    'hello.c'
282
289
 
283
290
    >>> [x[0] for x in inv.iter_entries()]
284
291
    ['hello.c']
285
 
    >>> inv = Inventory('TREE_ROOT-12345678-12345678')
286
 
    >>> inv.add(InventoryEntry('123-123', 'hello.c', 'file', ROOT_ID))
 
292
    
 
293
    >>> inv.write_xml(sys.stdout)
 
294
    <inventory>
 
295
    <entry file_id="123-123" kind="file" name="hello.c" />
 
296
    </inventory>
 
297
 
287
298
    """
288
 
    def __init__(self, root_id=ROOT_ID):
 
299
 
 
300
    ## TODO: Make sure only canonical filenames are stored.
 
301
 
 
302
    ## TODO: Do something sensible about the possible collisions on
 
303
    ## case-losing filesystems.  Perhaps we should just always forbid
 
304
    ## such collisions.
 
305
 
 
306
    ## TODO: No special cases for root, rather just give it a file id
 
307
    ## like everything else.
 
308
 
 
309
    ## TODO: Probably change XML serialization to use nesting
 
310
 
 
311
    def __init__(self):
289
312
        """Create or read an inventory.
290
313
 
291
314
        If a working directory is specified, the inventory is read
295
318
        The inventory is created with a default root directory, with
296
319
        an id of None.
297
320
        """
298
 
        # We are letting Branch(init=True) create a unique inventory
299
 
        # root id. Rather than generating a random one here.
300
 
        #if root_id is None:
301
 
        #    root_id = bzrlib.branch.gen_file_id('TREE_ROOT')
302
 
        self.root = RootEntry(root_id)
 
321
        self.root = RootEntry(ROOT_ID)
303
322
        self._byid = {self.root.file_id: self.root}
304
323
 
305
324
 
326
345
            yield name, ie
327
346
            if ie.kind == 'directory':
328
347
                for cn, cie in self.iter_entries(from_dir=ie.file_id):
329
 
                    yield os.path.join(name, cn), cie
330
 
 
331
 
 
332
 
    def entries(self):
333
 
        """Return list of (path, ie) for all entries except the root.
334
 
 
335
 
        This may be faster than iter_entries.
 
348
                    yield '/'.join((name, cn)), cie
 
349
                    
 
350
 
 
351
 
 
352
    def directories(self):
 
353
        """Return (path, entry) pairs for all directories.
336
354
        """
337
 
        accum = []
338
 
        def descend(dir_ie, dir_path):
339
 
            kids = dir_ie.children.items()
340
 
            kids.sort()
341
 
            for name, ie in kids:
342
 
                child_path = os.path.join(dir_path, name)
343
 
                accum.append((child_path, ie))
 
355
        def descend(parent_ie):
 
356
            parent_name = parent_ie.name
 
357
            yield parent_name, parent_ie
 
358
 
 
359
            # directory children in sorted order
 
360
            dn = []
 
361
            for ie in parent_ie.children.itervalues():
344
362
                if ie.kind == 'directory':
345
 
                    descend(ie, child_path)
346
 
 
347
 
        descend(self.root, '')
348
 
        return accum
349
 
 
350
 
 
351
 
    def directories(self):
352
 
        """Return (path, entry) pairs for all directories, including the root.
353
 
        """
354
 
        accum = []
355
 
        def descend(parent_ie, parent_path):
356
 
            accum.append((parent_path, parent_ie))
 
363
                    dn.append((ie.name, ie))
 
364
            dn.sort()
357
365
            
358
 
            kids = [(ie.name, ie) for ie in parent_ie.children.itervalues() if ie.kind == 'directory']
359
 
            kids.sort()
 
366
            for name, child_ie in dn:
 
367
                for sub_name, sub_ie in descend(child_ie):
 
368
                    yield appendpath(parent_name, sub_name), sub_ie
360
369
 
361
 
            for name, child_ie in kids:
362
 
                child_path = os.path.join(parent_path, name)
363
 
                descend(child_ie, child_path)
364
 
        descend(self.root, '')
365
 
        return accum
 
370
        for name, ie in descend(self.root):
 
371
            yield name, ie
366
372
        
367
373
 
368
374
 
387
393
        >>> inv['123123'].name
388
394
        'hello.c'
389
395
        """
 
396
        if file_id == None:
 
397
            raise BzrError("can't look up file_id None")
 
398
            
390
399
        try:
391
400
            return self._byid[file_id]
392
401
        except KeyError:
393
 
            if file_id == None:
394
 
                raise BzrError("can't look up file_id None")
395
 
            else:
396
 
                raise BzrError("file_id {%s} not in inventory" % file_id)
397
 
 
398
 
 
399
 
    def get_file_kind(self, file_id):
400
 
        return self._byid[file_id].kind
 
402
            raise BzrError("file_id {%s} not in inventory" % file_id)
 
403
 
401
404
 
402
405
    def get_child(self, parent_id, filename):
403
406
        return self[parent_id].children.get(filename)
409
412
        To add  a file to a branch ready to be committed, use Branch.add,
410
413
        which calls this."""
411
414
        if entry.file_id in self._byid:
412
 
            raise BzrError("inventory already contains entry with id {%s}" % entry.file_id)
413
 
 
414
 
        if entry.parent_id == ROOT_ID or entry.parent_id is None:
415
 
            entry.parent_id = self.root.file_id
 
415
            bailout("inventory already contains entry with id {%s}" % entry.file_id)
416
416
 
417
417
        try:
418
418
            parent = self._byid[entry.parent_id]
419
419
        except KeyError:
420
 
            raise BzrError("parent_id {%s} not in inventory" % entry.parent_id)
 
420
            bailout("parent_id {%s} not in inventory" % entry.parent_id)
421
421
 
422
422
        if parent.children.has_key(entry.name):
423
 
            raise BzrError("%s is already versioned" %
 
423
            bailout("%s is already versioned" %
424
424
                    appendpath(self.id2path(parent.file_id), entry.name))
425
425
 
426
426
        self._byid[entry.file_id] = entry
431
431
        """Add entry from a path.
432
432
 
433
433
        The immediate parent must already be versioned"""
434
 
        from bzrlib.branch import gen_file_id
435
 
        
436
434
        parts = bzrlib.osutils.splitpath(relpath)
437
435
        if len(parts) == 0:
438
 
            raise BzrError("cannot re-add root of inventory")
 
436
            bailout("cannot re-add root of inventory")
439
437
 
440
438
        if file_id == None:
441
 
            file_id = gen_file_id(relpath)
442
 
 
443
 
        parent_path = parts[:-1]
444
 
        parent_id = self.path2id(parent_path)
445
 
        if parent_id == None:
446
 
            raise NotVersionedError(parent_path)
447
 
 
 
439
            file_id = bzrlib.branch.gen_file_id(relpath)
 
440
 
 
441
        parent_id = self.path2id(parts[:-1])
 
442
        assert parent_id != None
448
443
        ie = InventoryEntry(file_id, parts[-1],
449
444
                            kind=kind, parent_id=parent_id)
450
445
        return self.add(ie)
476
471
        del self[ie.parent_id].children[ie.name]
477
472
 
478
473
 
 
474
    def id_set(self):
 
475
        return Set(self._byid)
 
476
 
 
477
 
479
478
    def to_element(self):
480
479
        """Convert to XML Element"""
481
 
        from bzrlib.xml import Element
482
 
        
483
480
        e = Element('inventory')
484
481
        e.text = '\n'
485
 
        if self.root.file_id not in (None, ROOT_ID):
486
 
            e.set('file_id', self.root.file_id)
487
482
        for path, ie in self.iter_entries():
488
483
            e.append(ie.to_element())
489
484
        return e
491
486
 
492
487
    def from_element(cls, elt):
493
488
        """Construct from XML Element
494
 
        
 
489
 
495
490
        >>> inv = Inventory()
496
491
        >>> inv.add(InventoryEntry('foo.c-123981239', 'foo.c', 'file', ROOT_ID))
497
492
        >>> elt = inv.to_element()
499
494
        >>> inv2 == inv
500
495
        True
501
496
        """
502
 
        # XXXX: doctest doesn't run this properly under python2.3
503
497
        assert elt.tag == 'inventory'
504
 
        root_id = elt.get('file_id') or ROOT_ID
505
 
        o = cls(root_id)
 
498
        o = cls()
506
499
        for e in elt:
507
 
            ie = InventoryEntry.from_element(e)
508
 
            if ie.parent_id == ROOT_ID:
509
 
                ie.parent_id = root_id
510
 
            o.add(ie)
 
500
            o.add(InventoryEntry.from_element(e))
511
501
        return o
512
502
        
513
503
    from_element = classmethod(from_element)
514
504
 
515
505
 
516
 
    def __eq__(self, other):
 
506
    def __cmp__(self, other):
517
507
        """Compare two sets by comparing their contents.
518
508
 
519
509
        >>> i1 = Inventory()
527
517
        >>> i1 == i2
528
518
        True
529
519
        """
 
520
        if self is other:
 
521
            return 0
 
522
        
530
523
        if not isinstance(other, Inventory):
531
524
            return NotImplemented
532
525
 
533
 
        if len(self._byid) != len(other._byid):
534
 
            # shortcut: obviously not the same
535
 
            return False
536
 
 
537
 
        return self._byid == other._byid
538
 
 
539
 
 
540
 
    def __ne__(self, other):
541
 
        return not (self == other)
542
 
 
543
 
 
544
 
    def __hash__(self):
545
 
        raise ValueError('not hashable')
546
 
 
 
526
        if self.id_set() ^ other.id_set():
 
527
            return 1
 
528
 
 
529
        for file_id in self._byid:
 
530
            c = cmp(self[file_id], other[file_id])
 
531
            if c: return c
 
532
 
 
533
        return 0
547
534
 
548
535
 
549
536
    def get_idpath(self, file_id):
559
546
            try:
560
547
                ie = self._byid[file_id]
561
548
            except KeyError:
562
 
                raise BzrError("file_id {%s} not found in inventory" % file_id)
 
549
                bailout("file_id {%s} not found in inventory" % file_id)
563
550
            p.insert(0, ie.file_id)
564
551
            file_id = ie.parent_id
565
552
        return p
569
556
        """Return as a list the path to file_id."""
570
557
 
571
558
        # get all names, skipping root
572
 
        p = [self._byid[fid].name for fid in self.get_idpath(file_id)[1:]]
573
 
        return os.sep.join(p)
 
559
        p = [self[fid].name for fid in self.get_idpath(file_id)[1:]]
 
560
        return '/'.join(p)
574
561
            
575
562
 
576
563
 
619
606
 
620
607
        This does not move the working file."""
621
608
        if not is_valid_name(new_name):
622
 
            raise BzrError("not an acceptable filename: %r" % new_name)
 
609
            bailout("not an acceptable filename: %r" % new_name)
623
610
 
624
611
        new_parent = self._byid[new_parent_id]
625
612
        if new_name in new_parent.children:
626
 
            raise BzrError("%r already exists in %r" % (new_name, self.id2path(new_parent_id)))
 
613
            bailout("%r already exists in %r" % (new_name, self.id2path(new_parent_id)))
627
614
 
628
615
        new_parent_idpath = self.get_idpath(new_parent_id)
629
616
        if file_id in new_parent_idpath:
630
 
            raise BzrError("cannot move directory %r into a subdirectory of itself, %r"
 
617
            bailout("cannot move directory %r into a subdirectory of itself, %r"
631
618
                    % (self.id2path(file_id), self.id2path(new_parent_id)))
632
619
 
633
620
        file_ie = self._byid[file_id]