/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/mutabletree.py

merge bzr.dev.

Show diffs side-by-side

added added

removed removed

Lines of Context:
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
16
 
17
17
"""MutableTree object.
18
18
 
27
27
from bzrlib import (
28
28
    add,
29
29
    bzrdir,
 
30
    hooks,
 
31
    symbol_versioning,
30
32
    )
31
33
from bzrlib.osutils import dirname
 
34
from bzrlib.revisiontree import RevisionTree
32
35
from bzrlib.trace import mutter, warning
33
36
""")
34
37
 
39
42
    )
40
43
from bzrlib.decorators import needs_read_lock, needs_write_lock
41
44
from bzrlib.osutils import splitpath
42
 
from bzrlib.symbol_versioning import DEPRECATED_PARAMETER
43
45
 
44
46
 
45
47
def needs_tree_write_lock(unbound):
67
69
    entirely in memory.
68
70
 
69
71
    For now, we are not treating MutableTree as an interface to provide
70
 
    conformance tests for - rather we are testing MemoryTree specifically, and 
 
72
    conformance tests for - rather we are testing MemoryTree specifically, and
71
73
    interface testing implementations of WorkingTree.
72
74
 
73
75
    A mutable tree always has an associated Branch and BzrDir object - the
74
76
    branch and bzrdir attributes.
75
77
    """
 
78
    def __init__(self, *args, **kw):
 
79
        super(MutableTree, self).__init__(*args, **kw)
 
80
        # Is this tree on a case-insensitive or case-preserving file-system?
 
81
        # Sub-classes may initialize to False if they detect they are being
 
82
        # used on media which doesn't differentiate the case of names.
 
83
        self.case_sensitive = True
76
84
 
77
85
    @needs_tree_write_lock
78
86
    def add(self, files, ids=None, kinds=None):
94
102
        TODO: Perhaps callback with the ids and paths as they're added.
95
103
        """
96
104
        if isinstance(files, basestring):
97
 
            assert(ids is None or isinstance(ids, basestring))
98
 
            assert(kinds is None or isinstance(kinds, basestring))
 
105
            # XXX: Passing a single string is inconsistent and should be
 
106
            # deprecated.
 
107
            if not (ids is None or isinstance(ids, basestring)):
 
108
                raise AssertionError()
 
109
            if not (kinds is None or isinstance(kinds, basestring)):
 
110
                raise AssertionError()
99
111
            files = [files]
100
112
            if ids is not None:
101
113
                ids = [ids]
107
119
        if ids is None:
108
120
            ids = [None] * len(files)
109
121
        else:
110
 
            assert(len(ids) == len(files))
111
 
            ids = [osutils.safe_file_id(file_id) for file_id in ids]
112
 
 
 
122
            if not (len(ids) == len(files)):
 
123
                raise AssertionError()
113
124
        if kinds is None:
114
125
            kinds = [None] * len(files)
115
 
        else:
116
 
            assert(len(kinds) == len(files))
 
126
        elif not len(kinds) == len(files):
 
127
            raise AssertionError()
117
128
        for f in files:
118
129
            # generic constraint checks:
119
130
            if self.is_control_filename(f):
120
131
                raise errors.ForbiddenControlFileError(filename=f)
121
132
            fp = splitpath(f)
122
 
        # fill out file kinds for all files [not needed when we stop 
 
133
        # fill out file kinds for all files [not needed when we stop
123
134
        # caring about the instantaneous file kind within a uncommmitted tree
124
135
        #
125
136
        self._gather_kinds(files, kinds)
159
170
    def apply_inventory_delta(self, changes):
160
171
        """Apply changes to the inventory as an atomic operation.
161
172
 
162
 
        The argument is a set of changes to apply.  It must describe a
163
 
        valid result, but the order is not important.  Specifically,
164
 
        intermediate stages *may* be invalid, such as when two files
165
 
        swap names.
166
 
 
167
 
        The changes should be structured as a list of tuples, of the form
168
 
        (old_path, new_path, file_id, new_entry).  For creation, old_path
169
 
        must be None.  For deletion, new_path and new_entry must be None.
170
 
        file_id is always non-None.  For renames and other mutations, all
171
 
        values must be non-None.
172
 
 
173
 
        If the new_entry is a directory, its children should be an empty
174
 
        dict.  Children are handled by apply_inventory_delta itself.
175
 
 
176
 
        :param changes: A list of tuples for the change to apply:
177
 
            [(old_path, new_path, file_id, new_inventory_entry), ...]
 
173
        :param changes: An inventory delta to apply to the working tree's
 
174
            inventory.
 
175
        :return None:
 
176
        :seealso Inventory.apply_delta: For details on the changes parameter.
178
177
        """
179
178
        self.flush()
180
179
        inv = self.inventory
181
 
        children = {}
182
 
        for old_path, file_id in sorted(((op, f) for op, np, f, e in changes
183
 
                                        if op is not None), reverse=True):
184
 
            if file_id not in inv:
185
 
                continue
186
 
            children[file_id] = getattr(inv[file_id], 'children', {})
187
 
            inv.remove_recursive_id(file_id)
188
 
        for new_path, new_entry in sorted((np, e) for op, np, f, e in
189
 
                                          changes if np is not None):
190
 
            if getattr(new_entry, 'children', None) is not None:
191
 
                new_entry.children = children.get(new_entry.file_id, {})
192
 
            inv.add(new_entry)
 
180
        inv.apply_delta(changes)
193
181
        self._write_inventory(inv)
194
182
 
195
183
    @needs_write_lock
199
187
        from bzrlib import commit
200
188
        if revprops is None:
201
189
            revprops = {}
 
190
        possible_master_transports=[]
202
191
        if not 'branch-nick' in revprops:
203
 
            revprops['branch-nick'] = self.branch.nick
 
192
            revprops['branch-nick'] = self.branch._get_nick(
 
193
                kwargs.get('local', False),
 
194
                possible_master_transports)
 
195
        authors = kwargs.pop('authors', None)
 
196
        author = kwargs.pop('author', None)
 
197
        if authors is not None:
 
198
            if author is not None:
 
199
                raise AssertionError('Specifying both author and authors '
 
200
                        'is not allowed. Specify just authors instead')
 
201
            if 'author' in revprops or 'authors' in revprops:
 
202
                # XXX: maybe we should just accept one of them?
 
203
                raise AssertionError('author property given twice')
 
204
            if authors:
 
205
                for individual in authors:
 
206
                    if '\n' in individual:
 
207
                        raise AssertionError('\\n is not a valid character '
 
208
                                'in an author identity')
 
209
                revprops['authors'] = '\n'.join(authors)
 
210
        if author is not None:
 
211
            symbol_versioning.warn('The parameter author was deprecated'
 
212
                   ' in version 1.13. Use authors instead',
 
213
                   DeprecationWarning)
 
214
            if 'author' in revprops or 'authors' in revprops:
 
215
                # XXX: maybe we should just accept one of them?
 
216
                raise AssertionError('author property given twice')
 
217
            if '\n' in author:
 
218
                raise AssertionError('\\n is not a valid character '
 
219
                        'in an author identity')
 
220
            revprops['authors'] = author
204
221
        # args for wt.commit start at message from the Commit.commit method,
205
222
        args = (message, ) + args
 
223
        for hook in MutableTree.hooks['start_commit']:
 
224
            hook(self)
206
225
        committed_id = commit.Commit().commit(working_tree=self,
207
 
            revprops=revprops, *args, **kwargs)
 
226
            revprops=revprops,
 
227
            possible_master_transports=possible_master_transports,
 
228
            *args, **kwargs)
208
229
        return committed_id
209
230
 
210
231
    def _gather_kinds(self, files, kinds):
211
232
        """Helper function for add - sets the entries of kinds."""
212
233
        raise NotImplementedError(self._gather_kinds)
213
234
 
 
235
    def get_file_with_stat(self, file_id, path=None):
 
236
        """Get a file handle and stat object for file_id.
 
237
 
 
238
        The default implementation returns (self.get_file, None) for backwards
 
239
        compatibility.
 
240
 
 
241
        :param file_id: The file id to read.
 
242
        :param path: The path of the file, if it is known.
 
243
        :return: A tuple (file_handle, stat_value_or_None). If the tree has
 
244
            no stat facility, or need for a stat cache feedback during commit,
 
245
            it may return None for the second element of the tuple.
 
246
        """
 
247
        return (self.get_file(file_id, path), None)
 
248
 
214
249
    @needs_read_lock
215
250
    def last_revision(self):
216
251
        """Return the revision id of the last commit performed in this tree.
218
253
        In early tree formats the result of last_revision is the same as the
219
254
        branch last_revision, but that is no longer the case for modern tree
220
255
        formats.
221
 
        
 
256
 
222
257
        last_revision returns the left most parent id, or None if there are no
223
258
        parents.
224
259
 
241
276
    def lock_write(self):
242
277
        """Lock the tree and its branch. This allows mutating calls to be made.
243
278
 
244
 
        Some mutating methods will take out implicit write locks, but in 
 
279
        Some mutating methods will take out implicit write locks, but in
245
280
        general you should always obtain a write lock before calling mutating
246
281
        methods on a tree.
247
282
        """
257
292
        """
258
293
        raise NotImplementedError(self.mkdir)
259
294
 
 
295
    def _observed_sha1(self, file_id, path, (sha1, stat_value)):
 
296
        """Tell the tree we have observed a paths sha1.
 
297
 
 
298
        The intent of this function is to allow trees that have a hashcache to
 
299
        update the hashcache during commit. If the observed file is too new
 
300
        (based on the stat_value) to be safely hash-cached the tree will ignore
 
301
        it.
 
302
 
 
303
        The default implementation does nothing.
 
304
 
 
305
        :param file_id: The file id
 
306
        :param path: The file path
 
307
        :param sha1: The sha 1 that was observed.
 
308
        :param stat_value: A stat result for the file the sha1 was read from.
 
309
        :return: None
 
310
        """
 
311
 
 
312
    def _fix_case_of_inventory_path(self, path):
 
313
        """If our tree isn't case sensitive, return the canonical path"""
 
314
        if not self.case_sensitive:
 
315
            path = self.get_canonical_inventory_path(path)
 
316
        return path
 
317
 
 
318
    @needs_write_lock
 
319
    def put_file_bytes_non_atomic(self, file_id, bytes):
 
320
        """Update the content of a file in the tree.
 
321
 
 
322
        Note that the file is written in-place rather than being
 
323
        written to a temporary location and renamed. As a consequence,
 
324
        readers can potentially see the file half-written.
 
325
 
 
326
        :param file_id: file-id of the file
 
327
        :param bytes: the new file contents
 
328
        """
 
329
        raise NotImplementedError(self.put_file_bytes_non_atomic)
 
330
 
260
331
    def set_parent_ids(self, revision_ids, allow_leftmost_as_ghost=False):
261
332
        """Set the parents ids of the working tree.
262
333
 
267
338
    def set_parent_trees(self, parents_list, allow_leftmost_as_ghost=False):
268
339
        """Set the parents of the working tree.
269
340
 
270
 
        :param parents_list: A list of (revision_id, tree) tuples. 
 
341
        :param parents_list: A list of (revision_id, tree) tuples.
271
342
            If tree is None, then that element is treated as an unreachable
272
343
            parent tree - i.e. a ghost.
273
344
        """
281
352
        For the specific behaviour see the help for cmd_add().
282
353
 
283
354
        :param action: A reporter to be called with the inventory, parent_ie,
284
 
            path and kind of the path being added. It may return a file_id if 
 
355
            path and kind of the path being added. It may return a file_id if
285
356
            a specific one should be used.
286
357
        :param save: Save the inventory after completing the adds. If False
287
358
            this provides dry-run functionality by doing the add and not saving
293
364
        # not in an inner loop; and we want to remove direct use of this,
294
365
        # so here as a reminder for now. RBC 20070703
295
366
        from bzrlib.inventory import InventoryEntry
296
 
        assert isinstance(recurse, bool)
297
367
        if action is None:
298
368
            action = add.AddAction()
299
 
        
 
369
 
300
370
        if not file_list:
301
371
            # no paths supplied: add the entire tree.
302
372
            file_list = [u'.']
307
377
        dirs_to_add = []
308
378
        user_dirs = set()
309
379
 
310
 
        # validate user file paths and convert all paths to tree 
 
380
        # validate user file paths and convert all paths to tree
311
381
        # relative : it's cheaper to make a tree relative path an abspath
312
 
        # than to convert an abspath to tree relative.
313
 
        for filepath in file_list:
314
 
            rf = _FastPath(self.relpath(filepath))
 
382
        # than to convert an abspath to tree relative, and it's cheaper to
 
383
        # perform the canonicalization in bulk.
 
384
        for filepath in osutils.canonical_relpaths(self.basedir, file_list):
 
385
            rf = _FastPath(filepath)
315
386
            # validate user parameters. Our recursive code avoids adding new files
316
 
            # that need such validation 
 
387
            # that need such validation
317
388
            if self.is_control_filename(rf.raw_path):
318
389
                raise errors.ForbiddenControlFileError(filename=rf.raw_path)
319
 
            
 
390
 
320
391
            abspath = self.abspath(rf.raw_path)
321
392
            kind = osutils.file_kind(abspath)
322
393
            if kind == 'directory':
327
398
                    raise errors.BadFileKindError(filename=abspath, kind=kind)
328
399
            # ensure the named path is added, so that ignore rules in the later directory
329
400
            # walk dont skip it.
330
 
            # we dont have a parent ie known yet.: use the relatively slower inventory 
 
401
            # we dont have a parent ie known yet.: use the relatively slower inventory
331
402
            # probing method
332
403
            versioned = inv.has_filename(rf.raw_path)
333
404
            if versioned:
370
441
            if parent_ie is not None:
371
442
                versioned = directory.base_path in parent_ie.children
372
443
            else:
373
 
                # without the parent ie, use the relatively slower inventory 
 
444
                # without the parent ie, use the relatively slower inventory
374
445
                # probing method
375
 
                versioned = inv.has_filename(directory.raw_path)
 
446
                versioned = inv.has_filename(
 
447
                        self._fix_case_of_inventory_path(directory.raw_path))
376
448
 
377
449
            if kind == 'directory':
378
450
                try:
393
465
                # mutter("%r is already versioned", abspath)
394
466
            elif sub_tree:
395
467
                # XXX: This is wrong; people *might* reasonably be trying to add
396
 
                # subtrees as subtrees.  This should probably only be done in formats 
 
468
                # subtrees as subtrees.  This should probably only be done in formats
397
469
                # which can represent subtrees, and even then perhaps only when
398
470
                # the user asked to add subtrees.  At the moment you can add them
399
471
                # specially through 'join --reference', which is perhaps
409
481
                    # must be present:
410
482
                    this_ie = parent_ie.children[directory.base_path]
411
483
                else:
412
 
                    # without the parent ie, use the relatively slower inventory 
 
484
                    # without the parent ie, use the relatively slower inventory
413
485
                    # probing method
414
 
                    this_id = inv.path2id(directory.raw_path)
 
486
                    this_id = inv.path2id(
 
487
                            self._fix_case_of_inventory_path(directory.raw_path))
415
488
                    if this_id is None:
416
489
                        this_ie = None
417
490
                    else:
418
491
                        this_ie = inv[this_id]
419
492
 
420
493
                for subf in sorted(os.listdir(abspath)):
421
 
                    # here we could use TreeDirectory rather than 
 
494
                    # here we could use TreeDirectory rather than
422
495
                    # string concatenation.
423
496
                    subp = osutils.pathjoin(directory.raw_path, subf)
424
 
                    # TODO: is_control_filename is very slow. Make it faster. 
425
 
                    # TreeDirectory.is_control_filename could also make this 
426
 
                    # faster - its impossible for a non root dir to have a 
 
497
                    # TODO: is_control_filename is very slow. Make it faster.
 
498
                    # TreeDirectory.is_control_filename could also make this
 
499
                    # faster - its impossible for a non root dir to have a
427
500
                    # control file.
428
501
                    if self.is_control_filename(subp):
429
502
                        mutter("skip control directory %r", subp)
449
522
                self.read_working_inventory()
450
523
        return added, ignored
451
524
 
 
525
    def update_basis_by_delta(self, new_revid, delta):
 
526
        """Update the parents of this tree after a commit.
 
527
 
 
528
        This gives the tree one parent, with revision id new_revid. The
 
529
        inventory delta is applied to the current basis tree to generate the
 
530
        inventory for the parent new_revid, and all other parent trees are
 
531
        discarded.
 
532
 
 
533
        All the changes in the delta should be changes synchronising the basis
 
534
        tree with some or all of the working tree, with a change to a directory
 
535
        requiring that its contents have been recursively included. That is,
 
536
        this is not a general purpose tree modification routine, but a helper
 
537
        for commit which is not required to handle situations that do not arise
 
538
        outside of commit.
 
539
 
 
540
        :param new_revid: The new revision id for the trees parent.
 
541
        :param delta: An inventory delta (see apply_inventory_delta) describing
 
542
            the changes from the current left most parent revision to new_revid.
 
543
        """
 
544
        # if the tree is updated by a pull to the branch, as happens in
 
545
        # WorkingTree2, when there was no separation between branch and tree,
 
546
        # then just clear merges, efficiency is not a concern for now as this
 
547
        # is legacy environments only, and they are slow regardless.
 
548
        if self.last_revision() == new_revid:
 
549
            self.set_parent_ids([new_revid])
 
550
            return
 
551
        # generic implementation based on Inventory manipulation. See
 
552
        # WorkingTree classes for optimised versions for specific format trees.
 
553
        basis = self.basis_tree()
 
554
        basis.lock_read()
 
555
        # TODO: Consider re-evaluating the need for this with CHKInventory
 
556
        # we don't strictly need to mutate an inventory for this
 
557
        # it only makes sense when apply_delta is cheaper than get_inventory()
 
558
        inventory = basis.inventory._get_mutable_inventory()
 
559
        basis.unlock()
 
560
        inventory.apply_delta(delta)
 
561
        rev_tree = RevisionTree(self.branch.repository, inventory, new_revid)
 
562
        self.set_parent_trees([(new_revid, rev_tree)])
 
563
 
 
564
 
 
565
class MutableTreeHooks(hooks.Hooks):
 
566
    """A dictionary mapping a hook name to a list of callables for mutabletree
 
567
    hooks.
 
568
    """
 
569
 
 
570
    def __init__(self):
 
571
        """Create the default hooks.
 
572
 
 
573
        """
 
574
        hooks.Hooks.__init__(self)
 
575
        self.create_hook(hooks.HookPoint('start_commit',
 
576
            "Called before a commit is performed on a tree. The start commit "
 
577
            "hook is able to change the tree before the commit takes place. "
 
578
            "start_commit is called with the bzrlib.tree.MutableTree that the "
 
579
            "commit is being performed on.", (1, 4), None))
 
580
 
 
581
 
 
582
# install the default hooks into the MutableTree class.
 
583
MutableTree.hooks = MutableTreeHooks()
 
584
 
452
585
 
453
586
class _FastPath(object):
454
587
    """A path object with fast accessors for things like basename."""
489
622
        added = []
490
623
    else:
491
624
        # slower but does not need parent_ie
492
 
        if inv.has_filename(path.raw_path):
 
625
        if inv.has_filename(tree._fix_case_of_inventory_path(path.raw_path)):
493
626
            return []
494
627
        # its really not there : add the parent
495
628
        # note that the dirname use leads to some extra str copying etc but as