/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/workingtree.py

  • Committer: Robert Collins
  • Date: 2006-07-24 02:05:29 UTC
  • mto: (1852.8.1 InterTree)
  • mto: This revision was merged to the branch mainline in revision 1891.
  • Revision ID: robertc@robertcollins.net-20060724020529-b10a2193bd191d78
Move RevisionTree out of tree.py.

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005, 2006 Canonical Ltd
 
2
 
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
 
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
 
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
"""WorkingTree object and friends.
 
18
 
 
19
A WorkingTree represents the editable working copy of a branch.
 
20
Operations which represent the WorkingTree are also done here, 
 
21
such as renaming or adding files.  The WorkingTree has an inventory 
 
22
which is updated by these operations.  A commit produces a 
 
23
new revision based on the workingtree and its inventory.
 
24
 
 
25
At the moment every WorkingTree has its own branch.  Remote
 
26
WorkingTrees aren't supported.
 
27
 
 
28
To get a WorkingTree, call bzrdir.open_workingtree() or
 
29
WorkingTree.open(dir).
 
30
"""
 
31
 
 
32
MERGE_MODIFIED_HEADER_1 = "BZR merge-modified list format 1"
 
33
CONFLICT_HEADER_1 = "BZR conflict list format 1"
 
34
 
 
35
# TODO: Give the workingtree sole responsibility for the working inventory;
 
36
# remove the variable and references to it from the branch.  This may require
 
37
# updating the commit code so as to update the inventory within the working
 
38
# copy, and making sure there's only one WorkingTree for any directory on disk.
 
39
# At the moment they may alias the inventory and have old copies of it in
 
40
# memory.  (Now done? -- mbp 20060309)
 
41
 
 
42
from binascii import hexlify
 
43
import collections
 
44
from copy import deepcopy
 
45
from cStringIO import StringIO
 
46
import errno
 
47
import fnmatch
 
48
import os
 
49
import re
 
50
import stat
 
51
from time import time
 
52
import warnings
 
53
 
 
54
from bzrlib import bzrdir, errors, osutils, urlutils
 
55
from bzrlib.atomicfile import AtomicFile
 
56
import bzrlib.branch
 
57
from bzrlib.conflicts import Conflict, ConflictList, CONFLICT_SUFFIXES
 
58
from bzrlib.decorators import needs_read_lock, needs_write_lock
 
59
from bzrlib.errors import (BzrCheckError,
 
60
                           BzrError,
 
61
                           ConflictFormatError,
 
62
                           WeaveRevisionNotPresent,
 
63
                           NotBranchError,
 
64
                           NoSuchFile,
 
65
                           NotVersionedError,
 
66
                           MergeModifiedFormatError,
 
67
                           UnsupportedOperation,
 
68
                           )
 
69
from bzrlib.inventory import InventoryEntry, Inventory
 
70
from bzrlib.lockable_files import LockableFiles, TransportLock
 
71
from bzrlib.lockdir import LockDir
 
72
from bzrlib.merge import merge_inner, transform_tree
 
73
from bzrlib.osutils import (
 
74
                            abspath,
 
75
                            compact_date,
 
76
                            file_kind,
 
77
                            isdir,
 
78
                            getcwd,
 
79
                            pathjoin,
 
80
                            pumpfile,
 
81
                            safe_unicode,
 
82
                            splitpath,
 
83
                            rand_chars,
 
84
                            normpath,
 
85
                            realpath,
 
86
                            relpath,
 
87
                            rename,
 
88
                            supports_executable,
 
89
                            )
 
90
from bzrlib.progress import DummyProgress, ProgressPhase
 
91
from bzrlib.revision import NULL_REVISION
 
92
from bzrlib.rio import RioReader, rio_file, Stanza
 
93
from bzrlib.symbol_versioning import (deprecated_passed,
 
94
        deprecated_method,
 
95
        deprecated_function,
 
96
        DEPRECATED_PARAMETER,
 
97
        zero_eight,
 
98
        )
 
99
from bzrlib.trace import mutter, note
 
100
from bzrlib.transform import build_tree
 
101
from bzrlib.transport import get_transport
 
102
from bzrlib.transport.local import LocalTransport
 
103
from bzrlib.textui import show_status
 
104
import bzrlib.tree
 
105
import bzrlib.ui
 
106
import bzrlib.xml5
 
107
 
 
108
 
 
109
# the regex here does the following:
 
110
# 1) remove any weird characters; we don't escape them but rather
 
111
# just pull them out
 
112
 # 2) match leading '.'s to make it not hidden
 
113
_gen_file_id_re = re.compile(r'[^\w.]|(^\.*)')
 
114
_gen_id_suffix = None
 
115
_gen_id_serial = 0
 
116
 
 
117
 
 
118
def _next_id_suffix():
 
119
    """Create a new file id suffix that is reasonably unique.
 
120
    
 
121
    On the first call we combine the current time with 64 bits of randomness
 
122
    to give a highly probably globally unique number. Then each call in the same
 
123
    process adds 1 to a serial number we append to that unique value.
 
124
    """
 
125
    # XXX TODO: change bzrlib.add.smart_add to call workingtree.add() rather 
 
126
    # than having to move the id randomness out of the inner loop like this.
 
127
    # XXX TODO: for the global randomness this uses we should add the thread-id
 
128
    # before the serial #.
 
129
    global _gen_id_suffix, _gen_id_serial
 
130
    if _gen_id_suffix is None:
 
131
        _gen_id_suffix = "-%s-%s-" % (compact_date(time()), rand_chars(16))
 
132
    _gen_id_serial += 1
 
133
    return _gen_id_suffix + str(_gen_id_serial)
 
134
 
 
135
 
 
136
def gen_file_id(name):
 
137
    """Return new file id for the basename 'name'.
 
138
 
 
139
    The uniqueness is supplied from _next_id_suffix.
 
140
    """
 
141
    # XXX TODO: squash the filename to lowercase.
 
142
    # XXX TODO: truncate the filename to something like 20 or 30 chars.
 
143
    # XXX TODO: consider what to do with ids that look like illegal filepaths
 
144
    # on platforms we support.
 
145
    return _gen_file_id_re.sub('', name) + _next_id_suffix()
 
146
 
 
147
 
 
148
def gen_root_id():
 
149
    """Return a new tree-root file id."""
 
150
    return gen_file_id('TREE_ROOT')
 
151
 
 
152
 
 
153
class TreeEntry(object):
 
154
    """An entry that implements the minimum interface used by commands.
 
155
 
 
156
    This needs further inspection, it may be better to have 
 
157
    InventoryEntries without ids - though that seems wrong. For now,
 
158
    this is a parallel hierarchy to InventoryEntry, and needs to become
 
159
    one of several things: decorates to that hierarchy, children of, or
 
160
    parents of it.
 
161
    Another note is that these objects are currently only used when there is
 
162
    no InventoryEntry available - i.e. for unversioned objects.
 
163
    Perhaps they should be UnversionedEntry et al. ? - RBC 20051003
 
164
    """
 
165
 
 
166
    def __eq__(self, other):
 
167
        # yes, this us ugly, TODO: best practice __eq__ style.
 
168
        return (isinstance(other, TreeEntry)
 
169
                and other.__class__ == self.__class__)
 
170
 
 
171
    def kind_character(self):
 
172
        return "???"
 
173
 
 
174
 
 
175
class TreeDirectory(TreeEntry):
 
176
    """See TreeEntry. This is a directory in a working tree."""
 
177
 
 
178
    def __eq__(self, other):
 
179
        return (isinstance(other, TreeDirectory)
 
180
                and other.__class__ == self.__class__)
 
181
 
 
182
    def kind_character(self):
 
183
        return "/"
 
184
 
 
185
 
 
186
class TreeFile(TreeEntry):
 
187
    """See TreeEntry. This is a regular file in a working tree."""
 
188
 
 
189
    def __eq__(self, other):
 
190
        return (isinstance(other, TreeFile)
 
191
                and other.__class__ == self.__class__)
 
192
 
 
193
    def kind_character(self):
 
194
        return ''
 
195
 
 
196
 
 
197
class TreeLink(TreeEntry):
 
198
    """See TreeEntry. This is a symlink in a working tree."""
 
199
 
 
200
    def __eq__(self, other):
 
201
        return (isinstance(other, TreeLink)
 
202
                and other.__class__ == self.__class__)
 
203
 
 
204
    def kind_character(self):
 
205
        return ''
 
206
 
 
207
 
 
208
class WorkingTree(bzrlib.tree.Tree):
 
209
    """Working copy tree.
 
210
 
 
211
    The inventory is held in the `Branch` working-inventory, and the
 
212
    files are in a directory on disk.
 
213
 
 
214
    It is possible for a `WorkingTree` to have a filename which is
 
215
    not listed in the Inventory and vice versa.
 
216
    """
 
217
 
 
218
    def __init__(self, basedir='.',
 
219
                 branch=DEPRECATED_PARAMETER,
 
220
                 _inventory=None,
 
221
                 _control_files=None,
 
222
                 _internal=False,
 
223
                 _format=None,
 
224
                 _bzrdir=None):
 
225
        """Construct a WorkingTree for basedir.
 
226
 
 
227
        If the branch is not supplied, it is opened automatically.
 
228
        If the branch is supplied, it must be the branch for this basedir.
 
229
        (branch.base is not cross checked, because for remote branches that
 
230
        would be meaningless).
 
231
        """
 
232
        self._format = _format
 
233
        self.bzrdir = _bzrdir
 
234
        if not _internal:
 
235
            # not created via open etc.
 
236
            warnings.warn("WorkingTree() is deprecated as of bzr version 0.8. "
 
237
                 "Please use bzrdir.open_workingtree or WorkingTree.open().",
 
238
                 DeprecationWarning,
 
239
                 stacklevel=2)
 
240
            wt = WorkingTree.open(basedir)
 
241
            self._branch = wt.branch
 
242
            self.basedir = wt.basedir
 
243
            self._control_files = wt._control_files
 
244
            self._hashcache = wt._hashcache
 
245
            self._set_inventory(wt._inventory)
 
246
            self._format = wt._format
 
247
            self.bzrdir = wt.bzrdir
 
248
        from bzrlib.hashcache import HashCache
 
249
        from bzrlib.trace import note, mutter
 
250
        assert isinstance(basedir, basestring), \
 
251
            "base directory %r is not a string" % basedir
 
252
        basedir = safe_unicode(basedir)
 
253
        mutter("opening working tree %r", basedir)
 
254
        if deprecated_passed(branch):
 
255
            if not _internal:
 
256
                warnings.warn("WorkingTree(..., branch=XXX) is deprecated as of bzr 0.8."
 
257
                     " Please use bzrdir.open_workingtree() or"
 
258
                     " WorkingTree.open().",
 
259
                     DeprecationWarning,
 
260
                     stacklevel=2
 
261
                     )
 
262
            self._branch = branch
 
263
        else:
 
264
            self._branch = self.bzrdir.open_branch()
 
265
        self.basedir = realpath(basedir)
 
266
        # if branch is at our basedir and is a format 6 or less
 
267
        if isinstance(self._format, WorkingTreeFormat2):
 
268
            # share control object
 
269
            self._control_files = self.branch.control_files
 
270
        else:
 
271
            # assume all other formats have their own control files.
 
272
            assert isinstance(_control_files, LockableFiles), \
 
273
                    "_control_files must be a LockableFiles, not %r" \
 
274
                    % _control_files
 
275
            self._control_files = _control_files
 
276
        # update the whole cache up front and write to disk if anything changed;
 
277
        # in the future we might want to do this more selectively
 
278
        # two possible ways offer themselves : in self._unlock, write the cache
 
279
        # if needed, or, when the cache sees a change, append it to the hash
 
280
        # cache file, and have the parser take the most recent entry for a
 
281
        # given path only.
 
282
        cache_filename = self.bzrdir.get_workingtree_transport(None).local_abspath('stat-cache')
 
283
        hc = self._hashcache = HashCache(basedir, cache_filename, self._control_files._file_mode)
 
284
        hc.read()
 
285
        # is this scan needed ? it makes things kinda slow.
 
286
        #hc.scan()
 
287
 
 
288
        if hc.needs_write:
 
289
            mutter("write hc")
 
290
            hc.write()
 
291
 
 
292
        if _inventory is None:
 
293
            self._set_inventory(self.read_working_inventory())
 
294
        else:
 
295
            self._set_inventory(_inventory)
 
296
 
 
297
    branch = property(
 
298
        fget=lambda self: self._branch,
 
299
        doc="""The branch this WorkingTree is connected to.
 
300
 
 
301
            This cannot be set - it is reflective of the actual disk structure
 
302
            the working tree has been constructed from.
 
303
            """)
 
304
 
 
305
    def break_lock(self):
 
306
        """Break a lock if one is present from another instance.
 
307
 
 
308
        Uses the ui factory to ask for confirmation if the lock may be from
 
309
        an active process.
 
310
 
 
311
        This will probe the repository for its lock as well.
 
312
        """
 
313
        self._control_files.break_lock()
 
314
        self.branch.break_lock()
 
315
 
 
316
    def _set_inventory(self, inv):
 
317
        self._inventory = inv
 
318
        self.path2id = self._inventory.path2id
 
319
 
 
320
    def is_control_filename(self, filename):
 
321
        """True if filename is the name of a control file in this tree.
 
322
        
 
323
        :param filename: A filename within the tree. This is a relative path
 
324
        from the root of this tree.
 
325
 
 
326
        This is true IF and ONLY IF the filename is part of the meta data
 
327
        that bzr controls in this tree. I.E. a random .bzr directory placed
 
328
        on disk will not be a control file for this tree.
 
329
        """
 
330
        return self.bzrdir.is_control_filename(filename)
 
331
 
 
332
    @staticmethod
 
333
    def open(path=None, _unsupported=False):
 
334
        """Open an existing working tree at path.
 
335
 
 
336
        """
 
337
        if path is None:
 
338
            path = os.path.getcwdu()
 
339
        control = bzrdir.BzrDir.open(path, _unsupported)
 
340
        return control.open_workingtree(_unsupported)
 
341
        
 
342
    @staticmethod
 
343
    def open_containing(path=None):
 
344
        """Open an existing working tree which has its root about path.
 
345
        
 
346
        This probes for a working tree at path and searches upwards from there.
 
347
 
 
348
        Basically we keep looking up until we find the control directory or
 
349
        run into /.  If there isn't one, raises NotBranchError.
 
350
        TODO: give this a new exception.
 
351
        If there is one, it is returned, along with the unused portion of path.
 
352
 
 
353
        :return: The WorkingTree that contains 'path', and the rest of path
 
354
        """
 
355
        if path is None:
 
356
            path = osutils.getcwd()
 
357
        control, relpath = bzrdir.BzrDir.open_containing(path)
 
358
 
 
359
        return control.open_workingtree(), relpath
 
360
 
 
361
    @staticmethod
 
362
    def open_downlevel(path=None):
 
363
        """Open an unsupported working tree.
 
364
 
 
365
        Only intended for advanced situations like upgrading part of a bzrdir.
 
366
        """
 
367
        return WorkingTree.open(path, _unsupported=True)
 
368
 
 
369
    def __iter__(self):
 
370
        """Iterate through file_ids for this tree.
 
371
 
 
372
        file_ids are in a WorkingTree if they are in the working inventory
 
373
        and the working file exists.
 
374
        """
 
375
        inv = self._inventory
 
376
        for path, ie in inv.iter_entries():
 
377
            if bzrlib.osutils.lexists(self.abspath(path)):
 
378
                yield ie.file_id
 
379
 
 
380
    def __repr__(self):
 
381
        return "<%s of %s>" % (self.__class__.__name__,
 
382
                               getattr(self, 'basedir', None))
 
383
 
 
384
    def abspath(self, filename):
 
385
        return pathjoin(self.basedir, filename)
 
386
    
 
387
    def basis_tree(self):
 
388
        """Return RevisionTree for the current last revision."""
 
389
        revision_id = self.last_revision()
 
390
        if revision_id is not None:
 
391
            try:
 
392
                xml = self.read_basis_inventory()
 
393
                inv = bzrlib.xml5.serializer_v5.read_inventory_from_string(xml)
 
394
            except NoSuchFile:
 
395
                inv = None
 
396
            if inv is not None and inv.revision_id == revision_id:
 
397
                return bzrlib.tree.RevisionTree(self.branch.repository, inv,
 
398
                                                revision_id)
 
399
        # FIXME? RBC 20060403 should we cache the inventory here ?
 
400
        return self.branch.repository.revision_tree(revision_id)
 
401
 
 
402
    @staticmethod
 
403
    @deprecated_method(zero_eight)
 
404
    def create(branch, directory):
 
405
        """Create a workingtree for branch at directory.
 
406
 
 
407
        If existing_directory already exists it must have a .bzr directory.
 
408
        If it does not exist, it will be created.
 
409
 
 
410
        This returns a new WorkingTree object for the new checkout.
 
411
 
 
412
        TODO FIXME RBC 20060124 when we have checkout formats in place this
 
413
        should accept an optional revisionid to checkout [and reject this if
 
414
        checking out into the same dir as a pre-checkout-aware branch format.]
 
415
 
 
416
        XXX: When BzrDir is present, these should be created through that 
 
417
        interface instead.
 
418
        """
 
419
        warnings.warn('delete WorkingTree.create', stacklevel=3)
 
420
        transport = get_transport(directory)
 
421
        if branch.bzrdir.root_transport.base == transport.base:
 
422
            # same dir 
 
423
            return branch.bzrdir.create_workingtree()
 
424
        # different directory, 
 
425
        # create a branch reference
 
426
        # and now a working tree.
 
427
        raise NotImplementedError
 
428
 
 
429
    @staticmethod
 
430
    @deprecated_method(zero_eight)
 
431
    def create_standalone(directory):
 
432
        """Create a checkout and a branch and a repo at directory.
 
433
 
 
434
        Directory must exist and be empty.
 
435
 
 
436
        please use BzrDir.create_standalone_workingtree
 
437
        """
 
438
        return bzrdir.BzrDir.create_standalone_workingtree(directory)
 
439
 
 
440
    def relpath(self, path):
 
441
        """Return the local path portion from a given path.
 
442
        
 
443
        The path may be absolute or relative. If its a relative path it is 
 
444
        interpreted relative to the python current working directory.
 
445
        """
 
446
        return relpath(self.basedir, path)
 
447
 
 
448
    def has_filename(self, filename):
 
449
        return bzrlib.osutils.lexists(self.abspath(filename))
 
450
 
 
451
    def get_file(self, file_id):
 
452
        return self.get_file_byname(self.id2path(file_id))
 
453
 
 
454
    def get_file_byname(self, filename):
 
455
        return file(self.abspath(filename), 'rb')
 
456
 
 
457
    def get_parent_ids(self):
 
458
        """See Tree.get_parent_ids.
 
459
        
 
460
        This implementation reads the pending merges list and last_revision
 
461
        value and uses that to decide what the parents list should be.
 
462
        """
 
463
        last_rev = self.last_revision()
 
464
        if last_rev is None:
 
465
            parents = []
 
466
        else:
 
467
            parents = [last_rev]
 
468
        other_parents = self.pending_merges()
 
469
        return parents + other_parents
 
470
 
 
471
    def get_root_id(self):
 
472
        """Return the id of this trees root"""
 
473
        inv = self.read_working_inventory()
 
474
        return inv.root.file_id
 
475
        
 
476
    def _get_store_filename(self, file_id):
 
477
        ## XXX: badly named; this is not in the store at all
 
478
        return self.abspath(self.id2path(file_id))
 
479
 
 
480
    @needs_read_lock
 
481
    def clone(self, to_bzrdir, revision_id=None, basis=None):
 
482
        """Duplicate this working tree into to_bzr, including all state.
 
483
        
 
484
        Specifically modified files are kept as modified, but
 
485
        ignored and unknown files are discarded.
 
486
 
 
487
        If you want to make a new line of development, see bzrdir.sprout()
 
488
 
 
489
        revision
 
490
            If not None, the cloned tree will have its last revision set to 
 
491
            revision, and and difference between the source trees last revision
 
492
            and this one merged in.
 
493
 
 
494
        basis
 
495
            If not None, a closer copy of a tree which may have some files in
 
496
            common, and which file content should be preferentially copied from.
 
497
        """
 
498
        # assumes the target bzr dir format is compatible.
 
499
        result = self._format.initialize(to_bzrdir)
 
500
        self.copy_content_into(result, revision_id)
 
501
        return result
 
502
 
 
503
    @needs_read_lock
 
504
    def copy_content_into(self, tree, revision_id=None):
 
505
        """Copy the current content and user files of this tree into tree."""
 
506
        if revision_id is None:
 
507
            transform_tree(tree, self)
 
508
        else:
 
509
            # TODO now merge from tree.last_revision to revision
 
510
            transform_tree(tree, self)
 
511
            tree.set_last_revision(revision_id)
 
512
 
 
513
    @needs_write_lock
 
514
    def commit(self, message=None, revprops=None, *args, **kwargs):
 
515
        # avoid circular imports
 
516
        from bzrlib.commit import Commit
 
517
        if revprops is None:
 
518
            revprops = {}
 
519
        if not 'branch-nick' in revprops:
 
520
            revprops['branch-nick'] = self.branch.nick
 
521
        # args for wt.commit start at message from the Commit.commit method,
 
522
        # but with branch a kwarg now, passing in args as is results in the
 
523
        #message being used for the branch
 
524
        args = (DEPRECATED_PARAMETER, message, ) + args
 
525
        committed_id = Commit().commit( working_tree=self, revprops=revprops,
 
526
            *args, **kwargs)
 
527
        self._set_inventory(self.read_working_inventory())
 
528
        return committed_id
 
529
 
 
530
    def id2abspath(self, file_id):
 
531
        return self.abspath(self.id2path(file_id))
 
532
 
 
533
    def has_id(self, file_id):
 
534
        # files that have been deleted are excluded
 
535
        inv = self._inventory
 
536
        if not inv.has_id(file_id):
 
537
            return False
 
538
        path = inv.id2path(file_id)
 
539
        return bzrlib.osutils.lexists(self.abspath(path))
 
540
 
 
541
    def has_or_had_id(self, file_id):
 
542
        if file_id == self.inventory.root.file_id:
 
543
            return True
 
544
        return self.inventory.has_id(file_id)
 
545
 
 
546
    __contains__ = has_id
 
547
 
 
548
    def get_file_size(self, file_id):
 
549
        return os.path.getsize(self.id2abspath(file_id))
 
550
 
 
551
    @needs_read_lock
 
552
    def get_file_sha1(self, file_id, path=None):
 
553
        if not path:
 
554
            path = self._inventory.id2path(file_id)
 
555
        return self._hashcache.get_sha1(path)
 
556
 
 
557
    def get_file_mtime(self, file_id, path=None):
 
558
        if not path:
 
559
            path = self._inventory.id2path(file_id)
 
560
        return os.lstat(self.abspath(path)).st_mtime
 
561
 
 
562
    if not supports_executable():
 
563
        def is_executable(self, file_id, path=None):
 
564
            return self._inventory[file_id].executable
 
565
    else:
 
566
        def is_executable(self, file_id, path=None):
 
567
            if not path:
 
568
                path = self._inventory.id2path(file_id)
 
569
            mode = os.lstat(self.abspath(path)).st_mode
 
570
            return bool(stat.S_ISREG(mode) and stat.S_IEXEC & mode)
 
571
 
 
572
    @needs_write_lock
 
573
    def add(self, files, ids=None):
 
574
        """Make files versioned.
 
575
 
 
576
        Note that the command line normally calls smart_add instead,
 
577
        which can automatically recurse.
 
578
 
 
579
        This adds the files to the inventory, so that they will be
 
580
        recorded by the next commit.
 
581
 
 
582
        files
 
583
            List of paths to add, relative to the base of the tree.
 
584
 
 
585
        ids
 
586
            If set, use these instead of automatically generated ids.
 
587
            Must be the same length as the list of files, but may
 
588
            contain None for ids that are to be autogenerated.
 
589
 
 
590
        TODO: Perhaps have an option to add the ids even if the files do
 
591
              not (yet) exist.
 
592
 
 
593
        TODO: Perhaps callback with the ids and paths as they're added.
 
594
        """
 
595
        # TODO: Re-adding a file that is removed in the working copy
 
596
        # should probably put it back with the previous ID.
 
597
        if isinstance(files, basestring):
 
598
            assert(ids is None or isinstance(ids, basestring))
 
599
            files = [files]
 
600
            if ids is not None:
 
601
                ids = [ids]
 
602
 
 
603
        if ids is None:
 
604
            ids = [None] * len(files)
 
605
        else:
 
606
            assert(len(ids) == len(files))
 
607
 
 
608
        inv = self.read_working_inventory()
 
609
        for f,file_id in zip(files, ids):
 
610
            if self.is_control_filename(f):
 
611
                raise errors.ForbiddenControlFileError(filename=f)
 
612
 
 
613
            fp = splitpath(f)
 
614
 
 
615
            if len(fp) == 0:
 
616
                raise BzrError("cannot add top-level %r" % f)
 
617
 
 
618
            fullpath = normpath(self.abspath(f))
 
619
            try:
 
620
                kind = file_kind(fullpath)
 
621
            except OSError, e:
 
622
                if e.errno == errno.ENOENT:
 
623
                    raise NoSuchFile(fullpath)
 
624
            if not InventoryEntry.versionable_kind(kind):
 
625
                raise errors.BadFileKindError(filename=f, kind=kind)
 
626
            if file_id is None:
 
627
                inv.add_path(f, kind=kind)
 
628
            else:
 
629
                inv.add_path(f, kind=kind, file_id=file_id)
 
630
 
 
631
        self._write_inventory(inv)
 
632
 
 
633
    @needs_write_lock
 
634
    def add_pending_merge(self, *revision_ids):
 
635
        # TODO: Perhaps should check at this point that the
 
636
        # history of the revision is actually present?
 
637
        p = self.pending_merges()
 
638
        updated = False
 
639
        for rev_id in revision_ids:
 
640
            if rev_id in p:
 
641
                continue
 
642
            p.append(rev_id)
 
643
            updated = True
 
644
        if updated:
 
645
            self.set_pending_merges(p)
 
646
 
 
647
    @needs_read_lock
 
648
    def pending_merges(self):
 
649
        """Return a list of pending merges.
 
650
 
 
651
        These are revisions that have been merged into the working
 
652
        directory but not yet committed.
 
653
        """
 
654
        try:
 
655
            merges_file = self._control_files.get_utf8('pending-merges')
 
656
        except NoSuchFile:
 
657
            return []
 
658
        p = []
 
659
        for l in merges_file.readlines():
 
660
            p.append(l.rstrip('\n'))
 
661
        return p
 
662
 
 
663
    @needs_write_lock
 
664
    def set_pending_merges(self, rev_list):
 
665
        self._control_files.put_utf8('pending-merges', '\n'.join(rev_list))
 
666
 
 
667
    @needs_write_lock
 
668
    def set_merge_modified(self, modified_hashes):
 
669
        def iter_stanzas():
 
670
            for file_id, hash in modified_hashes.iteritems():
 
671
                yield Stanza(file_id=file_id, hash=hash)
 
672
        self._put_rio('merge-hashes', iter_stanzas(), MERGE_MODIFIED_HEADER_1)
 
673
 
 
674
    @needs_write_lock
 
675
    def _put_rio(self, filename, stanzas, header):
 
676
        my_file = rio_file(stanzas, header)
 
677
        self._control_files.put(filename, my_file)
 
678
 
 
679
    @needs_read_lock
 
680
    def merge_modified(self):
 
681
        try:
 
682
            hashfile = self._control_files.get('merge-hashes')
 
683
        except NoSuchFile:
 
684
            return {}
 
685
        merge_hashes = {}
 
686
        try:
 
687
            if hashfile.next() != MERGE_MODIFIED_HEADER_1 + '\n':
 
688
                raise MergeModifiedFormatError()
 
689
        except StopIteration:
 
690
            raise MergeModifiedFormatError()
 
691
        for s in RioReader(hashfile):
 
692
            file_id = s.get("file_id")
 
693
            if file_id not in self.inventory:
 
694
                continue
 
695
            hash = s.get("hash")
 
696
            if hash == self.get_file_sha1(file_id):
 
697
                merge_hashes[file_id] = hash
 
698
        return merge_hashes
 
699
 
 
700
    def get_symlink_target(self, file_id):
 
701
        return os.readlink(self.id2abspath(file_id))
 
702
 
 
703
    def file_class(self, filename):
 
704
        if self.path2id(filename):
 
705
            return 'V'
 
706
        elif self.is_ignored(filename):
 
707
            return 'I'
 
708
        else:
 
709
            return '?'
 
710
 
 
711
    def list_files(self):
 
712
        """Recursively list all files as (path, class, kind, id, entry).
 
713
 
 
714
        Lists, but does not descend into unversioned directories.
 
715
 
 
716
        This does not include files that have been deleted in this
 
717
        tree.
 
718
 
 
719
        Skips the control directory.
 
720
        """
 
721
        inv = self._inventory
 
722
        # Convert these into local objects to save lookup times
 
723
        pathjoin = bzrlib.osutils.pathjoin
 
724
        file_kind = bzrlib.osutils.file_kind
 
725
 
 
726
        # transport.base ends in a slash, we want the piece
 
727
        # between the last two slashes
 
728
        transport_base_dir = self.bzrdir.transport.base.rsplit('/', 2)[1]
 
729
 
 
730
        fk_entries = {'directory':TreeDirectory, 'file':TreeFile, 'symlink':TreeLink}
 
731
 
 
732
        # directory file_id, relative path, absolute path, reverse sorted children
 
733
        children = os.listdir(self.basedir)
 
734
        children.sort()
 
735
        # jam 20060527 The kernel sized tree seems equivalent whether we 
 
736
        # use a deque and popleft to keep them sorted, or if we use a plain
 
737
        # list and just reverse() them.
 
738
        children = collections.deque(children)
 
739
        stack = [(inv.root.file_id, u'', self.basedir, children)]
 
740
        while stack:
 
741
            from_dir_id, from_dir_relpath, from_dir_abspath, children = stack[-1]
 
742
 
 
743
            while children:
 
744
                f = children.popleft()
 
745
                ## TODO: If we find a subdirectory with its own .bzr
 
746
                ## directory, then that is a separate tree and we
 
747
                ## should exclude it.
 
748
 
 
749
                # the bzrdir for this tree
 
750
                if transport_base_dir == f:
 
751
                    continue
 
752
 
 
753
                # we know that from_dir_relpath and from_dir_abspath never end in a slash
 
754
                # and 'f' doesn't begin with one, we can do a string op, rather
 
755
                # than the checks of pathjoin(), all relative paths will have an extra slash
 
756
                # at the beginning
 
757
                fp = from_dir_relpath + '/' + f
 
758
 
 
759
                # absolute path
 
760
                fap = from_dir_abspath + '/' + f
 
761
                
 
762
                f_ie = inv.get_child(from_dir_id, f)
 
763
                if f_ie:
 
764
                    c = 'V'
 
765
                elif self.is_ignored(fp[1:]):
 
766
                    c = 'I'
 
767
                else:
 
768
                    # we may not have found this file, because of a unicode issue
 
769
                    f_norm, can_access = osutils.normalized_filename(f)
 
770
                    if f == f_norm or not can_access:
 
771
                        # No change, so treat this file normally
 
772
                        c = '?'
 
773
                    else:
 
774
                        # this file can be accessed by a normalized path
 
775
                        # check again if it is versioned
 
776
                        # these lines are repeated here for performance
 
777
                        f = f_norm
 
778
                        fp = from_dir_relpath + '/' + f
 
779
                        fap = from_dir_abspath + '/' + f
 
780
                        f_ie = inv.get_child(from_dir_id, f)
 
781
                        if f_ie:
 
782
                            c = 'V'
 
783
                        elif self.is_ignored(fp[1:]):
 
784
                            c = 'I'
 
785
                        else:
 
786
                            c = '?'
 
787
 
 
788
                fk = file_kind(fap)
 
789
 
 
790
                if f_ie:
 
791
                    if f_ie.kind != fk:
 
792
                        raise BzrCheckError("file %r entered as kind %r id %r, "
 
793
                                            "now of kind %r"
 
794
                                            % (fap, f_ie.kind, f_ie.file_id, fk))
 
795
 
 
796
                # make a last minute entry
 
797
                if f_ie:
 
798
                    yield fp[1:], c, fk, f_ie.file_id, f_ie
 
799
                else:
 
800
                    try:
 
801
                        yield fp[1:], c, fk, None, fk_entries[fk]()
 
802
                    except KeyError:
 
803
                        yield fp[1:], c, fk, None, TreeEntry()
 
804
                    continue
 
805
                
 
806
                if fk != 'directory':
 
807
                    continue
 
808
 
 
809
                # But do this child first
 
810
                new_children = os.listdir(fap)
 
811
                new_children.sort()
 
812
                new_children = collections.deque(new_children)
 
813
                stack.append((f_ie.file_id, fp, fap, new_children))
 
814
                # Break out of inner loop, so that we start outer loop with child
 
815
                break
 
816
            else:
 
817
                # if we finished all children, pop it off the stack
 
818
                stack.pop()
 
819
 
 
820
 
 
821
    @needs_write_lock
 
822
    def move(self, from_paths, to_name):
 
823
        """Rename files.
 
824
 
 
825
        to_name must exist in the inventory.
 
826
 
 
827
        If to_name exists and is a directory, the files are moved into
 
828
        it, keeping their old names.  
 
829
 
 
830
        Note that to_name is only the last component of the new name;
 
831
        this doesn't change the directory.
 
832
 
 
833
        This returns a list of (from_path, to_path) pairs for each
 
834
        entry that is moved.
 
835
        """
 
836
        result = []
 
837
        ## TODO: Option to move IDs only
 
838
        assert not isinstance(from_paths, basestring)
 
839
        inv = self.inventory
 
840
        to_abs = self.abspath(to_name)
 
841
        if not isdir(to_abs):
 
842
            raise BzrError("destination %r is not a directory" % to_abs)
 
843
        if not self.has_filename(to_name):
 
844
            raise BzrError("destination %r not in working directory" % to_abs)
 
845
        to_dir_id = inv.path2id(to_name)
 
846
        if to_dir_id == None and to_name != '':
 
847
            raise BzrError("destination %r is not a versioned directory" % to_name)
 
848
        to_dir_ie = inv[to_dir_id]
 
849
        if to_dir_ie.kind not in ('directory', 'root_directory'):
 
850
            raise BzrError("destination %r is not a directory" % to_abs)
 
851
 
 
852
        to_idpath = inv.get_idpath(to_dir_id)
 
853
 
 
854
        for f in from_paths:
 
855
            if not self.has_filename(f):
 
856
                raise BzrError("%r does not exist in working tree" % f)
 
857
            f_id = inv.path2id(f)
 
858
            if f_id == None:
 
859
                raise BzrError("%r is not versioned" % f)
 
860
            name_tail = splitpath(f)[-1]
 
861
            dest_path = pathjoin(to_name, name_tail)
 
862
            if self.has_filename(dest_path):
 
863
                raise BzrError("destination %r already exists" % dest_path)
 
864
            if f_id in to_idpath:
 
865
                raise BzrError("can't move %r to a subdirectory of itself" % f)
 
866
 
 
867
        # OK, so there's a race here, it's possible that someone will
 
868
        # create a file in this interval and then the rename might be
 
869
        # left half-done.  But we should have caught most problems.
 
870
        orig_inv = deepcopy(self.inventory)
 
871
        try:
 
872
            for f in from_paths:
 
873
                name_tail = splitpath(f)[-1]
 
874
                dest_path = pathjoin(to_name, name_tail)
 
875
                result.append((f, dest_path))
 
876
                inv.rename(inv.path2id(f), to_dir_id, name_tail)
 
877
                try:
 
878
                    rename(self.abspath(f), self.abspath(dest_path))
 
879
                except OSError, e:
 
880
                    raise BzrError("failed to rename %r to %r: %s" %
 
881
                                   (f, dest_path, e[1]),
 
882
                            ["rename rolled back"])
 
883
        except:
 
884
            # restore the inventory on error
 
885
            self._set_inventory(orig_inv)
 
886
            raise
 
887
        self._write_inventory(inv)
 
888
        return result
 
889
 
 
890
    @needs_write_lock
 
891
    def rename_one(self, from_rel, to_rel):
 
892
        """Rename one file.
 
893
 
 
894
        This can change the directory or the filename or both.
 
895
        """
 
896
        inv = self.inventory
 
897
        if not self.has_filename(from_rel):
 
898
            raise BzrError("can't rename: old working file %r does not exist" % from_rel)
 
899
        if self.has_filename(to_rel):
 
900
            raise BzrError("can't rename: new working file %r already exists" % to_rel)
 
901
 
 
902
        file_id = inv.path2id(from_rel)
 
903
        if file_id == None:
 
904
            raise BzrError("can't rename: old name %r is not versioned" % from_rel)
 
905
 
 
906
        entry = inv[file_id]
 
907
        from_parent = entry.parent_id
 
908
        from_name = entry.name
 
909
        
 
910
        if inv.path2id(to_rel):
 
911
            raise BzrError("can't rename: new name %r is already versioned" % to_rel)
 
912
 
 
913
        to_dir, to_tail = os.path.split(to_rel)
 
914
        to_dir_id = inv.path2id(to_dir)
 
915
        if to_dir_id == None and to_dir != '':
 
916
            raise BzrError("can't determine destination directory id for %r" % to_dir)
 
917
 
 
918
        mutter("rename_one:")
 
919
        mutter("  file_id    {%s}" % file_id)
 
920
        mutter("  from_rel   %r" % from_rel)
 
921
        mutter("  to_rel     %r" % to_rel)
 
922
        mutter("  to_dir     %r" % to_dir)
 
923
        mutter("  to_dir_id  {%s}" % to_dir_id)
 
924
 
 
925
        inv.rename(file_id, to_dir_id, to_tail)
 
926
 
 
927
        from_abs = self.abspath(from_rel)
 
928
        to_abs = self.abspath(to_rel)
 
929
        try:
 
930
            rename(from_abs, to_abs)
 
931
        except OSError, e:
 
932
            inv.rename(file_id, from_parent, from_name)
 
933
            raise BzrError("failed to rename %r to %r: %s"
 
934
                    % (from_abs, to_abs, e[1]),
 
935
                    ["rename rolled back"])
 
936
        self._write_inventory(inv)
 
937
 
 
938
    @needs_read_lock
 
939
    def unknowns(self):
 
940
        """Return all unknown files.
 
941
 
 
942
        These are files in the working directory that are not versioned or
 
943
        control files or ignored.
 
944
        """
 
945
        for subp in self.extras():
 
946
            if not self.is_ignored(subp):
 
947
                yield subp
 
948
 
 
949
    @deprecated_method(zero_eight)
 
950
    def iter_conflicts(self):
 
951
        """List all files in the tree that have text or content conflicts.
 
952
        DEPRECATED.  Use conflicts instead."""
 
953
        return self._iter_conflicts()
 
954
 
 
955
    def _iter_conflicts(self):
 
956
        conflicted = set()
 
957
        for info in self.list_files():
 
958
            path = info[0]
 
959
            stem = get_conflicted_stem(path)
 
960
            if stem is None:
 
961
                continue
 
962
            if stem not in conflicted:
 
963
                conflicted.add(stem)
 
964
                yield stem
 
965
 
 
966
    @needs_write_lock
 
967
    def pull(self, source, overwrite=False, stop_revision=None):
 
968
        top_pb = bzrlib.ui.ui_factory.nested_progress_bar()
 
969
        source.lock_read()
 
970
        try:
 
971
            pp = ProgressPhase("Pull phase", 2, top_pb)
 
972
            pp.next_phase()
 
973
            old_revision_history = self.branch.revision_history()
 
974
            basis_tree = self.basis_tree()
 
975
            count = self.branch.pull(source, overwrite, stop_revision)
 
976
            new_revision_history = self.branch.revision_history()
 
977
            if new_revision_history != old_revision_history:
 
978
                pp.next_phase()
 
979
                if len(old_revision_history):
 
980
                    other_revision = old_revision_history[-1]
 
981
                else:
 
982
                    other_revision = None
 
983
                repository = self.branch.repository
 
984
                pb = bzrlib.ui.ui_factory.nested_progress_bar()
 
985
                try:
 
986
                    merge_inner(self.branch,
 
987
                                self.branch.basis_tree(),
 
988
                                basis_tree, 
 
989
                                this_tree=self, 
 
990
                                pb=pb)
 
991
                finally:
 
992
                    pb.finished()
 
993
                self.set_last_revision(self.branch.last_revision())
 
994
            return count
 
995
        finally:
 
996
            source.unlock()
 
997
            top_pb.finished()
 
998
 
 
999
    def extras(self):
 
1000
        """Yield all unknown files in this WorkingTree.
 
1001
 
 
1002
        If there are any unknown directories then only the directory is
 
1003
        returned, not all its children.  But if there are unknown files
 
1004
        under a versioned subdirectory, they are returned.
 
1005
 
 
1006
        Currently returned depth-first, sorted by name within directories.
 
1007
        """
 
1008
        ## TODO: Work from given directory downwards
 
1009
        for path, dir_entry in self.inventory.directories():
 
1010
            mutter("search for unknowns in %r", path)
 
1011
            dirabs = self.abspath(path)
 
1012
            if not isdir(dirabs):
 
1013
                # e.g. directory deleted
 
1014
                continue
 
1015
 
 
1016
            fl = []
 
1017
            for subf in os.listdir(dirabs):
 
1018
                if subf == '.bzr':
 
1019
                    continue
 
1020
                if subf not in dir_entry.children:
 
1021
                    subf_norm, can_access = osutils.normalized_filename(subf)
 
1022
                    if subf_norm != subf and can_access:
 
1023
                        if subf_norm not in dir_entry.children:
 
1024
                            fl.append(subf_norm)
 
1025
                    else:
 
1026
                        fl.append(subf)
 
1027
            
 
1028
            fl.sort()
 
1029
            for subf in fl:
 
1030
                subp = pathjoin(path, subf)
 
1031
                yield subp
 
1032
 
 
1033
    def _translate_ignore_rule(self, rule):
 
1034
        """Translate a single ignore rule to a regex.
 
1035
 
 
1036
        There are two types of ignore rules.  Those that do not contain a / are
 
1037
        matched against the tail of the filename (that is, they do not care
 
1038
        what directory the file is in.)  Rules which do contain a slash must
 
1039
        match the entire path.  As a special case, './' at the start of the
 
1040
        string counts as a slash in the string but is removed before matching
 
1041
        (e.g. ./foo.c, ./src/foo.c)
 
1042
 
 
1043
        :return: The translated regex.
 
1044
        """
 
1045
        if rule[:2] in ('./', '.\\'):
 
1046
            # rootdir rule
 
1047
            result = fnmatch.translate(rule[2:])
 
1048
        elif '/' in rule or '\\' in rule:
 
1049
            # path prefix 
 
1050
            result = fnmatch.translate(rule)
 
1051
        else:
 
1052
            # default rule style.
 
1053
            result = "(?:.*/)?(?!.*/)" + fnmatch.translate(rule)
 
1054
        assert result[-1] == '$', "fnmatch.translate did not add the expected $"
 
1055
        return "(" + result + ")"
 
1056
 
 
1057
    def _combine_ignore_rules(self, rules):
 
1058
        """Combine a list of ignore rules into a single regex object.
 
1059
 
 
1060
        Each individual rule is combined with | to form a big regex, which then
 
1061
        has $ added to it to form something like ()|()|()$. The group index for
 
1062
        each subregex's outermost group is placed in a dictionary mapping back 
 
1063
        to the rule. This allows quick identification of the matching rule that
 
1064
        triggered a match.
 
1065
        :return: a list of the compiled regex and the matching-group index 
 
1066
        dictionaries. We return a list because python complains if you try to 
 
1067
        combine more than 100 regexes.
 
1068
        """
 
1069
        result = []
 
1070
        groups = {}
 
1071
        next_group = 0
 
1072
        translated_rules = []
 
1073
        for rule in rules:
 
1074
            translated_rule = self._translate_ignore_rule(rule)
 
1075
            compiled_rule = re.compile(translated_rule)
 
1076
            groups[next_group] = rule
 
1077
            next_group += compiled_rule.groups
 
1078
            translated_rules.append(translated_rule)
 
1079
            if next_group == 99:
 
1080
                result.append((re.compile("|".join(translated_rules)), groups))
 
1081
                groups = {}
 
1082
                next_group = 0
 
1083
                translated_rules = []
 
1084
        if len(translated_rules):
 
1085
            result.append((re.compile("|".join(translated_rules)), groups))
 
1086
        return result
 
1087
 
 
1088
    def ignored_files(self):
 
1089
        """Yield list of PATH, IGNORE_PATTERN"""
 
1090
        for subp in self.extras():
 
1091
            pat = self.is_ignored(subp)
 
1092
            if pat != None:
 
1093
                yield subp, pat
 
1094
 
 
1095
    def get_ignore_list(self):
 
1096
        """Return list of ignore patterns.
 
1097
 
 
1098
        Cached in the Tree object after the first call.
 
1099
        """
 
1100
        if hasattr(self, '_ignorelist'):
 
1101
            return self._ignorelist
 
1102
 
 
1103
        l = []
 
1104
        if self.has_filename(bzrlib.IGNORE_FILENAME):
 
1105
            f = self.get_file_byname(bzrlib.IGNORE_FILENAME)
 
1106
            l.extend([line.rstrip("\n\r").decode('utf-8') 
 
1107
                      for line in f.readlines()])
 
1108
        self._ignorelist = l
 
1109
        self._ignore_regex = self._combine_ignore_rules(l)
 
1110
        return l
 
1111
 
 
1112
    def _get_ignore_rules_as_regex(self):
 
1113
        """Return a regex of the ignore rules and a mapping dict.
 
1114
 
 
1115
        :return: (ignore rules compiled regex, dictionary mapping rule group 
 
1116
        indices to original rule.)
 
1117
        """
 
1118
        if getattr(self, '_ignorelist', None) is None:
 
1119
            self.get_ignore_list()
 
1120
        return self._ignore_regex
 
1121
 
 
1122
    def is_ignored(self, filename):
 
1123
        r"""Check whether the filename matches an ignore pattern.
 
1124
 
 
1125
        Patterns containing '/' or '\' need to match the whole path;
 
1126
        others match against only the last component.
 
1127
 
 
1128
        If the file is ignored, returns the pattern which caused it to
 
1129
        be ignored, otherwise None.  So this can simply be used as a
 
1130
        boolean if desired."""
 
1131
 
 
1132
        # TODO: Use '**' to match directories, and other extended
 
1133
        # globbing stuff from cvs/rsync.
 
1134
 
 
1135
        # XXX: fnmatch is actually not quite what we want: it's only
 
1136
        # approximately the same as real Unix fnmatch, and doesn't
 
1137
        # treat dotfiles correctly and allows * to match /.
 
1138
        # Eventually it should be replaced with something more
 
1139
        # accurate.
 
1140
    
 
1141
        rules = self._get_ignore_rules_as_regex()
 
1142
        for regex, mapping in rules:
 
1143
            match = regex.match(filename)
 
1144
            if match is not None:
 
1145
                # one or more of the groups in mapping will have a non-None group 
 
1146
                # match.
 
1147
                groups = match.groups()
 
1148
                rules = [mapping[group] for group in 
 
1149
                    mapping if groups[group] is not None]
 
1150
                return rules[0]
 
1151
        return None
 
1152
 
 
1153
    def kind(self, file_id):
 
1154
        return file_kind(self.id2abspath(file_id))
 
1155
 
 
1156
    @needs_read_lock
 
1157
    def last_revision(self):
 
1158
        """Return the last revision id of this working tree.
 
1159
 
 
1160
        In early branch formats this was == the branch last_revision,
 
1161
        but that cannot be relied upon - for working tree operations,
 
1162
        always use tree.last_revision().
 
1163
        """
 
1164
        return self.branch.last_revision()
 
1165
 
 
1166
    def is_locked(self):
 
1167
        return self._control_files.is_locked()
 
1168
 
 
1169
    def lock_read(self):
 
1170
        """See Branch.lock_read, and WorkingTree.unlock."""
 
1171
        self.branch.lock_read()
 
1172
        try:
 
1173
            return self._control_files.lock_read()
 
1174
        except:
 
1175
            self.branch.unlock()
 
1176
            raise
 
1177
 
 
1178
    def lock_write(self):
 
1179
        """See Branch.lock_write, and WorkingTree.unlock."""
 
1180
        self.branch.lock_write()
 
1181
        try:
 
1182
            return self._control_files.lock_write()
 
1183
        except:
 
1184
            self.branch.unlock()
 
1185
            raise
 
1186
 
 
1187
    def get_physical_lock_status(self):
 
1188
        return self._control_files.get_physical_lock_status()
 
1189
 
 
1190
    def _basis_inventory_name(self):
 
1191
        return 'basis-inventory'
 
1192
 
 
1193
    @needs_write_lock
 
1194
    def set_last_revision(self, new_revision):
 
1195
        """Change the last revision in the working tree."""
 
1196
        if self._change_last_revision(new_revision):
 
1197
            self._cache_basis_inventory(new_revision)
 
1198
 
 
1199
    def _change_last_revision(self, new_revision):
 
1200
        """Template method part of set_last_revision to perform the change.
 
1201
        
 
1202
        This is used to allow WorkingTree3 instances to not affect branch
 
1203
        when their last revision is set.
 
1204
        """
 
1205
        if new_revision is None:
 
1206
            self.branch.set_revision_history([])
 
1207
            return False
 
1208
        # current format is locked in with the branch
 
1209
        revision_history = self.branch.revision_history()
 
1210
        try:
 
1211
            position = revision_history.index(new_revision)
 
1212
        except ValueError:
 
1213
            raise errors.NoSuchRevision(self.branch, new_revision)
 
1214
        self.branch.set_revision_history(revision_history[:position + 1])
 
1215
        return True
 
1216
 
 
1217
    def _cache_basis_inventory(self, new_revision):
 
1218
        """Cache new_revision as the basis inventory."""
 
1219
        # TODO: this should allow the ready-to-use inventory to be passed in,
 
1220
        # as commit already has that ready-to-use [while the format is the
 
1221
        # same, that is].
 
1222
        try:
 
1223
            # this double handles the inventory - unpack and repack - 
 
1224
            # but is easier to understand. We can/should put a conditional
 
1225
            # in here based on whether the inventory is in the latest format
 
1226
            # - perhaps we should repack all inventories on a repository
 
1227
            # upgrade ?
 
1228
            # the fast path is to copy the raw xml from the repository. If the
 
1229
            # xml contains 'revision_id="', then we assume the right 
 
1230
            # revision_id is set. We must check for this full string, because a
 
1231
            # root node id can legitimately look like 'revision_id' but cannot
 
1232
            # contain a '"'.
 
1233
            xml = self.branch.repository.get_inventory_xml(new_revision)
 
1234
            if not 'revision_id="' in xml.split('\n', 1)[0]:
 
1235
                inv = self.branch.repository.deserialise_inventory(
 
1236
                    new_revision, xml)
 
1237
                inv.revision_id = new_revision
 
1238
                xml = bzrlib.xml5.serializer_v5.write_inventory_to_string(inv)
 
1239
            assert isinstance(xml, str), 'serialised xml must be bytestring.'
 
1240
            path = self._basis_inventory_name()
 
1241
            sio = StringIO(xml)
 
1242
            self._control_files.put(path, sio)
 
1243
        except WeaveRevisionNotPresent:
 
1244
            pass
 
1245
 
 
1246
    def read_basis_inventory(self):
 
1247
        """Read the cached basis inventory."""
 
1248
        path = self._basis_inventory_name()
 
1249
        return self._control_files.get(path).read()
 
1250
        
 
1251
    @needs_read_lock
 
1252
    def read_working_inventory(self):
 
1253
        """Read the working inventory."""
 
1254
        # ElementTree does its own conversion from UTF-8, so open in
 
1255
        # binary.
 
1256
        result = bzrlib.xml5.serializer_v5.read_inventory(
 
1257
            self._control_files.get('inventory'))
 
1258
        self._set_inventory(result)
 
1259
        return result
 
1260
 
 
1261
    @needs_write_lock
 
1262
    def remove(self, files, verbose=False, to_file=None):
 
1263
        """Remove nominated files from the working inventory..
 
1264
 
 
1265
        This does not remove their text.  This does not run on XXX on what? RBC
 
1266
 
 
1267
        TODO: Refuse to remove modified files unless --force is given?
 
1268
 
 
1269
        TODO: Do something useful with directories.
 
1270
 
 
1271
        TODO: Should this remove the text or not?  Tough call; not
 
1272
        removing may be useful and the user can just use use rm, and
 
1273
        is the opposite of add.  Removing it is consistent with most
 
1274
        other tools.  Maybe an option.
 
1275
        """
 
1276
        ## TODO: Normalize names
 
1277
        ## TODO: Remove nested loops; better scalability
 
1278
        if isinstance(files, basestring):
 
1279
            files = [files]
 
1280
 
 
1281
        inv = self.inventory
 
1282
 
 
1283
        # do this before any modifications
 
1284
        for f in files:
 
1285
            fid = inv.path2id(f)
 
1286
            if not fid:
 
1287
                # TODO: Perhaps make this just a warning, and continue?
 
1288
                # This tends to happen when 
 
1289
                raise NotVersionedError(path=f)
 
1290
            if verbose:
 
1291
                # having remove it, it must be either ignored or unknown
 
1292
                if self.is_ignored(f):
 
1293
                    new_status = 'I'
 
1294
                else:
 
1295
                    new_status = '?'
 
1296
                show_status(new_status, inv[fid].kind, f, to_file=to_file)
 
1297
            del inv[fid]
 
1298
 
 
1299
        self._write_inventory(inv)
 
1300
 
 
1301
    @needs_write_lock
 
1302
    def revert(self, filenames, old_tree=None, backups=True, 
 
1303
               pb=DummyProgress()):
 
1304
        from transform import revert
 
1305
        from conflicts import resolve
 
1306
        if old_tree is None:
 
1307
            old_tree = self.basis_tree()
 
1308
        conflicts = revert(self, old_tree, filenames, backups, pb)
 
1309
        if not len(filenames):
 
1310
            self.set_pending_merges([])
 
1311
            resolve(self)
 
1312
        else:
 
1313
            resolve(self, filenames, ignore_misses=True)
 
1314
        return conflicts
 
1315
 
 
1316
    # XXX: This method should be deprecated in favour of taking in a proper
 
1317
    # new Inventory object.
 
1318
    @needs_write_lock
 
1319
    def set_inventory(self, new_inventory_list):
 
1320
        from bzrlib.inventory import (Inventory,
 
1321
                                      InventoryDirectory,
 
1322
                                      InventoryEntry,
 
1323
                                      InventoryFile,
 
1324
                                      InventoryLink)
 
1325
        inv = Inventory(self.get_root_id())
 
1326
        for path, file_id, parent, kind in new_inventory_list:
 
1327
            name = os.path.basename(path)
 
1328
            if name == "":
 
1329
                continue
 
1330
            # fixme, there should be a factory function inv,add_?? 
 
1331
            if kind == 'directory':
 
1332
                inv.add(InventoryDirectory(file_id, name, parent))
 
1333
            elif kind == 'file':
 
1334
                inv.add(InventoryFile(file_id, name, parent))
 
1335
            elif kind == 'symlink':
 
1336
                inv.add(InventoryLink(file_id, name, parent))
 
1337
            else:
 
1338
                raise BzrError("unknown kind %r" % kind)
 
1339
        self._write_inventory(inv)
 
1340
 
 
1341
    @needs_write_lock
 
1342
    def set_root_id(self, file_id):
 
1343
        """Set the root id for this tree."""
 
1344
        inv = self.read_working_inventory()
 
1345
        orig_root_id = inv.root.file_id
 
1346
        del inv._byid[inv.root.file_id]
 
1347
        inv.root.file_id = file_id
 
1348
        inv._byid[inv.root.file_id] = inv.root
 
1349
        for fid in inv:
 
1350
            entry = inv[fid]
 
1351
            if entry.parent_id == orig_root_id:
 
1352
                entry.parent_id = inv.root.file_id
 
1353
        self._write_inventory(inv)
 
1354
 
 
1355
    def unlock(self):
 
1356
        """See Branch.unlock.
 
1357
        
 
1358
        WorkingTree locking just uses the Branch locking facilities.
 
1359
        This is current because all working trees have an embedded branch
 
1360
        within them. IF in the future, we were to make branch data shareable
 
1361
        between multiple working trees, i.e. via shared storage, then we 
 
1362
        would probably want to lock both the local tree, and the branch.
 
1363
        """
 
1364
        raise NotImplementedError(self.unlock)
 
1365
 
 
1366
    @needs_write_lock
 
1367
    def update(self):
 
1368
        """Update a working tree along its branch.
 
1369
 
 
1370
        This will update the branch if its bound too, which means we have multiple trees involved:
 
1371
        The new basis tree of the master.
 
1372
        The old basis tree of the branch.
 
1373
        The old basis tree of the working tree.
 
1374
        The current working tree state.
 
1375
        pathologically all three may be different, and non ancestors of each other.
 
1376
        Conceptually we want to:
 
1377
        Preserve the wt.basis->wt.state changes
 
1378
        Transform the wt.basis to the new master basis.
 
1379
        Apply a merge of the old branch basis to get any 'local' changes from it into the tree.
 
1380
        Restore the wt.basis->wt.state changes.
 
1381
 
 
1382
        There isn't a single operation at the moment to do that, so we:
 
1383
        Merge current state -> basis tree of the master w.r.t. the old tree basis.
 
1384
        Do a 'normal' merge of the old branch basis if it is relevant.
 
1385
        """
 
1386
        old_tip = self.branch.update()
 
1387
        if old_tip is not None:
 
1388
            self.add_pending_merge(old_tip)
 
1389
        self.branch.lock_read()
 
1390
        try:
 
1391
            result = 0
 
1392
            if self.last_revision() != self.branch.last_revision():
 
1393
                # merge tree state up to new branch tip.
 
1394
                basis = self.basis_tree()
 
1395
                to_tree = self.branch.basis_tree()
 
1396
                result += merge_inner(self.branch,
 
1397
                                      to_tree,
 
1398
                                      basis,
 
1399
                                      this_tree=self)
 
1400
                self.set_last_revision(self.branch.last_revision())
 
1401
            if old_tip and old_tip != self.last_revision():
 
1402
                # our last revision was not the prior branch last revision
 
1403
                # and we have converted that last revision to a pending merge.
 
1404
                # base is somewhere between the branch tip now
 
1405
                # and the now pending merge
 
1406
                from bzrlib.revision import common_ancestor
 
1407
                try:
 
1408
                    base_rev_id = common_ancestor(self.branch.last_revision(),
 
1409
                                                  old_tip,
 
1410
                                                  self.branch.repository)
 
1411
                except errors.NoCommonAncestor:
 
1412
                    base_rev_id = None
 
1413
                base_tree = self.branch.repository.revision_tree(base_rev_id)
 
1414
                other_tree = self.branch.repository.revision_tree(old_tip)
 
1415
                result += merge_inner(self.branch,
 
1416
                                      other_tree,
 
1417
                                      base_tree,
 
1418
                                      this_tree=self)
 
1419
            return result
 
1420
        finally:
 
1421
            self.branch.unlock()
 
1422
 
 
1423
    @needs_write_lock
 
1424
    def _write_inventory(self, inv):
 
1425
        """Write inventory as the current inventory."""
 
1426
        sio = StringIO()
 
1427
        bzrlib.xml5.serializer_v5.write_inventory(inv, sio)
 
1428
        sio.seek(0)
 
1429
        self._control_files.put('inventory', sio)
 
1430
        self._set_inventory(inv)
 
1431
        mutter('wrote working inventory')
 
1432
 
 
1433
    def set_conflicts(self, arg):
 
1434
        raise UnsupportedOperation(self.set_conflicts, self)
 
1435
 
 
1436
    def add_conflicts(self, arg):
 
1437
        raise UnsupportedOperation(self.add_conflicts, self)
 
1438
 
 
1439
    @needs_read_lock
 
1440
    def conflicts(self):
 
1441
        conflicts = ConflictList()
 
1442
        for conflicted in self._iter_conflicts():
 
1443
            text = True
 
1444
            try:
 
1445
                if file_kind(self.abspath(conflicted)) != "file":
 
1446
                    text = False
 
1447
            except errors.NoSuchFile:
 
1448
                text = False
 
1449
            if text is True:
 
1450
                for suffix in ('.THIS', '.OTHER'):
 
1451
                    try:
 
1452
                        kind = file_kind(self.abspath(conflicted+suffix))
 
1453
                        if kind != "file":
 
1454
                            text = False
 
1455
                    except errors.NoSuchFile:
 
1456
                        text = False
 
1457
                    if text == False:
 
1458
                        break
 
1459
            ctype = {True: 'text conflict', False: 'contents conflict'}[text]
 
1460
            conflicts.append(Conflict.factory(ctype, path=conflicted,
 
1461
                             file_id=self.path2id(conflicted)))
 
1462
        return conflicts
 
1463
 
 
1464
 
 
1465
class WorkingTree2(WorkingTree):
 
1466
    """This is the Format 2 working tree.
 
1467
 
 
1468
    This was the first weave based working tree. 
 
1469
     - uses os locks for locking.
 
1470
     - uses the branch last-revision.
 
1471
    """
 
1472
 
 
1473
    def unlock(self):
 
1474
        # we share control files:
 
1475
        if self._hashcache.needs_write and self._control_files._lock_count==3:
 
1476
            self._hashcache.write()
 
1477
        # reverse order of locking.
 
1478
        try:
 
1479
            return self._control_files.unlock()
 
1480
        finally:
 
1481
            self.branch.unlock()
 
1482
 
 
1483
 
 
1484
class WorkingTree3(WorkingTree):
 
1485
    """This is the Format 3 working tree.
 
1486
 
 
1487
    This differs from the base WorkingTree by:
 
1488
     - having its own file lock
 
1489
     - having its own last-revision property.
 
1490
 
 
1491
    This is new in bzr 0.8
 
1492
    """
 
1493
 
 
1494
    @needs_read_lock
 
1495
    def last_revision(self):
 
1496
        """See WorkingTree.last_revision."""
 
1497
        try:
 
1498
            return self._control_files.get_utf8('last-revision').read()
 
1499
        except NoSuchFile:
 
1500
            return None
 
1501
 
 
1502
    def _change_last_revision(self, revision_id):
 
1503
        """See WorkingTree._change_last_revision."""
 
1504
        if revision_id is None or revision_id == NULL_REVISION:
 
1505
            try:
 
1506
                self._control_files._transport.delete('last-revision')
 
1507
            except errors.NoSuchFile:
 
1508
                pass
 
1509
            return False
 
1510
        else:
 
1511
            try:
 
1512
                self.branch.revision_history().index(revision_id)
 
1513
            except ValueError:
 
1514
                raise errors.NoSuchRevision(self.branch, revision_id)
 
1515
            self._control_files.put_utf8('last-revision', revision_id)
 
1516
            return True
 
1517
 
 
1518
    @needs_write_lock
 
1519
    def set_conflicts(self, conflicts):
 
1520
        self._put_rio('conflicts', conflicts.to_stanzas(), 
 
1521
                      CONFLICT_HEADER_1)
 
1522
 
 
1523
    @needs_write_lock
 
1524
    def add_conflicts(self, new_conflicts):
 
1525
        conflict_set = set(self.conflicts())
 
1526
        conflict_set.update(set(list(new_conflicts)))
 
1527
        self.set_conflicts(ConflictList(sorted(conflict_set,
 
1528
                                               key=Conflict.sort_key)))
 
1529
 
 
1530
    @needs_read_lock
 
1531
    def conflicts(self):
 
1532
        try:
 
1533
            confile = self._control_files.get('conflicts')
 
1534
        except NoSuchFile:
 
1535
            return ConflictList()
 
1536
        try:
 
1537
            if confile.next() != CONFLICT_HEADER_1 + '\n':
 
1538
                raise ConflictFormatError()
 
1539
        except StopIteration:
 
1540
            raise ConflictFormatError()
 
1541
        return ConflictList.from_stanzas(RioReader(confile))
 
1542
 
 
1543
    def unlock(self):
 
1544
        if self._hashcache.needs_write and self._control_files._lock_count==1:
 
1545
            self._hashcache.write()
 
1546
        # reverse order of locking.
 
1547
        try:
 
1548
            return self._control_files.unlock()
 
1549
        finally:
 
1550
            self.branch.unlock()
 
1551
 
 
1552
 
 
1553
def get_conflicted_stem(path):
 
1554
    for suffix in CONFLICT_SUFFIXES:
 
1555
        if path.endswith(suffix):
 
1556
            return path[:-len(suffix)]
 
1557
 
 
1558
@deprecated_function(zero_eight)
 
1559
def is_control_file(filename):
 
1560
    """See WorkingTree.is_control_filename(filename)."""
 
1561
    ## FIXME: better check
 
1562
    filename = normpath(filename)
 
1563
    while filename != '':
 
1564
        head, tail = os.path.split(filename)
 
1565
        ## mutter('check %r for control file' % ((head, tail),))
 
1566
        if tail == '.bzr':
 
1567
            return True
 
1568
        if filename == head:
 
1569
            break
 
1570
        filename = head
 
1571
    return False
 
1572
 
 
1573
 
 
1574
class WorkingTreeFormat(object):
 
1575
    """An encapsulation of the initialization and open routines for a format.
 
1576
 
 
1577
    Formats provide three things:
 
1578
     * An initialization routine,
 
1579
     * a format string,
 
1580
     * an open routine.
 
1581
 
 
1582
    Formats are placed in an dict by their format string for reference 
 
1583
    during workingtree opening. Its not required that these be instances, they
 
1584
    can be classes themselves with class methods - it simply depends on 
 
1585
    whether state is needed for a given format or not.
 
1586
 
 
1587
    Once a format is deprecated, just deprecate the initialize and open
 
1588
    methods on the format class. Do not deprecate the object, as the 
 
1589
    object will be created every time regardless.
 
1590
    """
 
1591
 
 
1592
    _default_format = None
 
1593
    """The default format used for new trees."""
 
1594
 
 
1595
    _formats = {}
 
1596
    """The known formats."""
 
1597
 
 
1598
    @classmethod
 
1599
    def find_format(klass, a_bzrdir):
 
1600
        """Return the format for the working tree object in a_bzrdir."""
 
1601
        try:
 
1602
            transport = a_bzrdir.get_workingtree_transport(None)
 
1603
            format_string = transport.get("format").read()
 
1604
            return klass._formats[format_string]
 
1605
        except NoSuchFile:
 
1606
            raise errors.NoWorkingTree(base=transport.base)
 
1607
        except KeyError:
 
1608
            raise errors.UnknownFormatError(format=format_string)
 
1609
 
 
1610
    @classmethod
 
1611
    def get_default_format(klass):
 
1612
        """Return the current default format."""
 
1613
        return klass._default_format
 
1614
 
 
1615
    def get_format_string(self):
 
1616
        """Return the ASCII format string that identifies this format."""
 
1617
        raise NotImplementedError(self.get_format_string)
 
1618
 
 
1619
    def get_format_description(self):
 
1620
        """Return the short description for this format."""
 
1621
        raise NotImplementedError(self.get_format_description)
 
1622
 
 
1623
    def is_supported(self):
 
1624
        """Is this format supported?
 
1625
 
 
1626
        Supported formats can be initialized and opened.
 
1627
        Unsupported formats may not support initialization or committing or 
 
1628
        some other features depending on the reason for not being supported.
 
1629
        """
 
1630
        return True
 
1631
 
 
1632
    @classmethod
 
1633
    def register_format(klass, format):
 
1634
        klass._formats[format.get_format_string()] = format
 
1635
 
 
1636
    @classmethod
 
1637
    def set_default_format(klass, format):
 
1638
        klass._default_format = format
 
1639
 
 
1640
    @classmethod
 
1641
    def unregister_format(klass, format):
 
1642
        assert klass._formats[format.get_format_string()] is format
 
1643
        del klass._formats[format.get_format_string()]
 
1644
 
 
1645
 
 
1646
 
 
1647
class WorkingTreeFormat2(WorkingTreeFormat):
 
1648
    """The second working tree format. 
 
1649
 
 
1650
    This format modified the hash cache from the format 1 hash cache.
 
1651
    """
 
1652
 
 
1653
    def get_format_description(self):
 
1654
        """See WorkingTreeFormat.get_format_description()."""
 
1655
        return "Working tree format 2"
 
1656
 
 
1657
    def stub_initialize_remote(self, control_files):
 
1658
        """As a special workaround create critical control files for a remote working tree
 
1659
        
 
1660
        This ensures that it can later be updated and dealt with locally,
 
1661
        since BzrDirFormat6 and BzrDirFormat5 cannot represent dirs with 
 
1662
        no working tree.  (See bug #43064).
 
1663
        """
 
1664
        sio = StringIO()
 
1665
        inv = Inventory()
 
1666
        bzrlib.xml5.serializer_v5.write_inventory(inv, sio)
 
1667
        sio.seek(0)
 
1668
        control_files.put('inventory', sio)
 
1669
 
 
1670
        control_files.put_utf8('pending-merges', '')
 
1671
        
 
1672
 
 
1673
    def initialize(self, a_bzrdir, revision_id=None):
 
1674
        """See WorkingTreeFormat.initialize()."""
 
1675
        if not isinstance(a_bzrdir.transport, LocalTransport):
 
1676
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
 
1677
        branch = a_bzrdir.open_branch()
 
1678
        if revision_id is not None:
 
1679
            branch.lock_write()
 
1680
            try:
 
1681
                revision_history = branch.revision_history()
 
1682
                try:
 
1683
                    position = revision_history.index(revision_id)
 
1684
                except ValueError:
 
1685
                    raise errors.NoSuchRevision(branch, revision_id)
 
1686
                branch.set_revision_history(revision_history[:position + 1])
 
1687
            finally:
 
1688
                branch.unlock()
 
1689
        revision = branch.last_revision()
 
1690
        inv = Inventory() 
 
1691
        wt = WorkingTree2(a_bzrdir.root_transport.local_abspath('.'),
 
1692
                         branch,
 
1693
                         inv,
 
1694
                         _internal=True,
 
1695
                         _format=self,
 
1696
                         _bzrdir=a_bzrdir)
 
1697
        wt._write_inventory(inv)
 
1698
        wt.set_root_id(inv.root.file_id)
 
1699
        wt.set_last_revision(revision)
 
1700
        wt.set_pending_merges([])
 
1701
        build_tree(wt.basis_tree(), wt)
 
1702
        return wt
 
1703
 
 
1704
    def __init__(self):
 
1705
        super(WorkingTreeFormat2, self).__init__()
 
1706
        self._matchingbzrdir = bzrdir.BzrDirFormat6()
 
1707
 
 
1708
    def open(self, a_bzrdir, _found=False):
 
1709
        """Return the WorkingTree object for a_bzrdir
 
1710
 
 
1711
        _found is a private parameter, do not use it. It is used to indicate
 
1712
               if format probing has already been done.
 
1713
        """
 
1714
        if not _found:
 
1715
            # we are being called directly and must probe.
 
1716
            raise NotImplementedError
 
1717
        if not isinstance(a_bzrdir.transport, LocalTransport):
 
1718
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
 
1719
        return WorkingTree2(a_bzrdir.root_transport.local_abspath('.'),
 
1720
                           _internal=True,
 
1721
                           _format=self,
 
1722
                           _bzrdir=a_bzrdir)
 
1723
 
 
1724
 
 
1725
class WorkingTreeFormat3(WorkingTreeFormat):
 
1726
    """The second working tree format updated to record a format marker.
 
1727
 
 
1728
    This format:
 
1729
        - exists within a metadir controlling .bzr
 
1730
        - includes an explicit version marker for the workingtree control
 
1731
          files, separate from the BzrDir format
 
1732
        - modifies the hash cache format
 
1733
        - is new in bzr 0.8
 
1734
        - uses a LockDir to guard access for writes.
 
1735
    """
 
1736
 
 
1737
    def get_format_string(self):
 
1738
        """See WorkingTreeFormat.get_format_string()."""
 
1739
        return "Bazaar-NG Working Tree format 3"
 
1740
 
 
1741
    def get_format_description(self):
 
1742
        """See WorkingTreeFormat.get_format_description()."""
 
1743
        return "Working tree format 3"
 
1744
 
 
1745
    _lock_file_name = 'lock'
 
1746
    _lock_class = LockDir
 
1747
 
 
1748
    def _open_control_files(self, a_bzrdir):
 
1749
        transport = a_bzrdir.get_workingtree_transport(None)
 
1750
        return LockableFiles(transport, self._lock_file_name, 
 
1751
                             self._lock_class)
 
1752
 
 
1753
    def initialize(self, a_bzrdir, revision_id=None):
 
1754
        """See WorkingTreeFormat.initialize().
 
1755
        
 
1756
        revision_id allows creating a working tree at a different
 
1757
        revision than the branch is at.
 
1758
        """
 
1759
        if not isinstance(a_bzrdir.transport, LocalTransport):
 
1760
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
 
1761
        transport = a_bzrdir.get_workingtree_transport(self)
 
1762
        control_files = self._open_control_files(a_bzrdir)
 
1763
        control_files.create_lock()
 
1764
        control_files.lock_write()
 
1765
        control_files.put_utf8('format', self.get_format_string())
 
1766
        branch = a_bzrdir.open_branch()
 
1767
        if revision_id is None:
 
1768
            revision_id = branch.last_revision()
 
1769
        inv = Inventory() 
 
1770
        wt = WorkingTree3(a_bzrdir.root_transport.local_abspath('.'),
 
1771
                         branch,
 
1772
                         inv,
 
1773
                         _internal=True,
 
1774
                         _format=self,
 
1775
                         _bzrdir=a_bzrdir,
 
1776
                         _control_files=control_files)
 
1777
        wt.lock_write()
 
1778
        try:
 
1779
            wt._write_inventory(inv)
 
1780
            wt.set_root_id(inv.root.file_id)
 
1781
            wt.set_last_revision(revision_id)
 
1782
            wt.set_pending_merges([])
 
1783
            build_tree(wt.basis_tree(), wt)
 
1784
        finally:
 
1785
            wt.unlock()
 
1786
            control_files.unlock()
 
1787
        return wt
 
1788
 
 
1789
    def __init__(self):
 
1790
        super(WorkingTreeFormat3, self).__init__()
 
1791
        self._matchingbzrdir = bzrdir.BzrDirMetaFormat1()
 
1792
 
 
1793
    def open(self, a_bzrdir, _found=False):
 
1794
        """Return the WorkingTree object for a_bzrdir
 
1795
 
 
1796
        _found is a private parameter, do not use it. It is used to indicate
 
1797
               if format probing has already been done.
 
1798
        """
 
1799
        if not _found:
 
1800
            # we are being called directly and must probe.
 
1801
            raise NotImplementedError
 
1802
        if not isinstance(a_bzrdir.transport, LocalTransport):
 
1803
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
 
1804
        return self._open(a_bzrdir, self._open_control_files(a_bzrdir))
 
1805
 
 
1806
    def _open(self, a_bzrdir, control_files):
 
1807
        """Open the tree itself.
 
1808
        
 
1809
        :param a_bzrdir: the dir for the tree.
 
1810
        :param control_files: the control files for the tree.
 
1811
        """
 
1812
        return WorkingTree3(a_bzrdir.root_transport.local_abspath('.'),
 
1813
                           _internal=True,
 
1814
                           _format=self,
 
1815
                           _bzrdir=a_bzrdir,
 
1816
                           _control_files=control_files)
 
1817
 
 
1818
    def __str__(self):
 
1819
        return self.get_format_string()
 
1820
 
 
1821
 
 
1822
# formats which have no format string are not discoverable
 
1823
# and not independently creatable, so are not registered.
 
1824
__default_format = WorkingTreeFormat3()
 
1825
WorkingTreeFormat.register_format(__default_format)
 
1826
WorkingTreeFormat.set_default_format(__default_format)
 
1827
_legacy_formats = [WorkingTreeFormat2(),
 
1828
                   ]
 
1829
 
 
1830
 
 
1831
class WorkingTreeTestProviderAdapter(object):
 
1832
    """A tool to generate a suite testing multiple workingtree formats at once.
 
1833
 
 
1834
    This is done by copying the test once for each transport and injecting
 
1835
    the transport_server, transport_readonly_server, and workingtree_format
 
1836
    classes into each copy. Each copy is also given a new id() to make it
 
1837
    easy to identify.
 
1838
    """
 
1839
 
 
1840
    def __init__(self, transport_server, transport_readonly_server, formats):
 
1841
        self._transport_server = transport_server
 
1842
        self._transport_readonly_server = transport_readonly_server
 
1843
        self._formats = formats
 
1844
    
 
1845
    def _clone_test(self, test, bzrdir_format, workingtree_format, variation):
 
1846
        """Clone test for adaption."""
 
1847
        new_test = deepcopy(test)
 
1848
        new_test.transport_server = self._transport_server
 
1849
        new_test.transport_readonly_server = self._transport_readonly_server
 
1850
        new_test.bzrdir_format = bzrdir_format
 
1851
        new_test.workingtree_format = workingtree_format
 
1852
        def make_new_test_id():
 
1853
            new_id = "%s(%s)" % (test.id(), variation)
 
1854
            return lambda: new_id
 
1855
        new_test.id = make_new_test_id()
 
1856
        return new_test
 
1857
    
 
1858
    def adapt(self, test):
 
1859
        from bzrlib.tests import TestSuite
 
1860
        result = TestSuite()
 
1861
        for workingtree_format, bzrdir_format in self._formats:
 
1862
            new_test = self._clone_test(
 
1863
                test,
 
1864
                bzrdir_format,
 
1865
                workingtree_format, workingtree_format.__class__.__name__)
 
1866
            result.addTest(new_test)
 
1867
        return result