/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/workingtree.py

  • Committer: Canonical.com Patch Queue Manager
  • Date: 2006-07-20 14:21:15 UTC
  • mfrom: (1624.4.10 bzr.jaq)
  • Revision ID: pqm@pqm.ubuntu.com-20060720142115-2c94a67bd5a5205c
(jaq) add a test that revision entries can be idempotently created

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005, 2006 Canonical Ltd
 
2
 
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
 
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
 
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
"""WorkingTree object and friends.
 
18
 
 
19
A WorkingTree represents the editable working copy of a branch.
 
20
Operations which represent the WorkingTree are also done here, 
 
21
such as renaming or adding files.  The WorkingTree has an inventory 
 
22
which is updated by these operations.  A commit produces a 
 
23
new revision based on the workingtree and its inventory.
 
24
 
 
25
At the moment every WorkingTree has its own branch.  Remote
 
26
WorkingTrees aren't supported.
 
27
 
 
28
To get a WorkingTree, call bzrdir.open_workingtree() or
 
29
WorkingTree.open(dir).
 
30
"""
 
31
 
 
32
MERGE_MODIFIED_HEADER_1 = "BZR merge-modified list format 1"
 
33
CONFLICT_HEADER_1 = "BZR conflict list format 1"
 
34
 
 
35
# TODO: Give the workingtree sole responsibility for the working inventory;
 
36
# remove the variable and references to it from the branch.  This may require
 
37
# updating the commit code so as to update the inventory within the working
 
38
# copy, and making sure there's only one WorkingTree for any directory on disk.
 
39
# At the moment they may alias the inventory and have old copies of it in
 
40
# memory.  (Now done? -- mbp 20060309)
 
41
 
 
42
from binascii import hexlify
 
43
import collections
 
44
from copy import deepcopy
 
45
from cStringIO import StringIO
 
46
import errno
 
47
import fnmatch
 
48
import os
 
49
import re
 
50
import stat
 
51
from time import time
 
52
import warnings
 
53
 
 
54
import bzrlib
 
55
from bzrlib import bzrdir, errors, ignores, osutils, urlutils
 
56
from bzrlib.atomicfile import AtomicFile
 
57
import bzrlib.branch
 
58
from bzrlib.conflicts import Conflict, ConflictList, CONFLICT_SUFFIXES
 
59
from bzrlib.decorators import needs_read_lock, needs_write_lock
 
60
from bzrlib.errors import (BzrCheckError,
 
61
                           BzrError,
 
62
                           ConflictFormatError,
 
63
                           WeaveRevisionNotPresent,
 
64
                           NotBranchError,
 
65
                           NoSuchFile,
 
66
                           NotVersionedError,
 
67
                           MergeModifiedFormatError,
 
68
                           UnsupportedOperation,
 
69
                           )
 
70
from bzrlib.inventory import InventoryEntry, Inventory
 
71
from bzrlib.lockable_files import LockableFiles, TransportLock
 
72
from bzrlib.lockdir import LockDir
 
73
from bzrlib.merge import merge_inner, transform_tree
 
74
from bzrlib.osutils import (
 
75
                            abspath,
 
76
                            compact_date,
 
77
                            file_kind,
 
78
                            isdir,
 
79
                            getcwd,
 
80
                            pathjoin,
 
81
                            pumpfile,
 
82
                            safe_unicode,
 
83
                            splitpath,
 
84
                            rand_chars,
 
85
                            normpath,
 
86
                            realpath,
 
87
                            relpath,
 
88
                            rename,
 
89
                            supports_executable,
 
90
                            )
 
91
from bzrlib.progress import DummyProgress, ProgressPhase
 
92
from bzrlib.revision import NULL_REVISION
 
93
from bzrlib.rio import RioReader, rio_file, Stanza
 
94
from bzrlib.symbol_versioning import (deprecated_passed,
 
95
        deprecated_method,
 
96
        deprecated_function,
 
97
        DEPRECATED_PARAMETER,
 
98
        zero_eight,
 
99
        )
 
100
from bzrlib.trace import mutter, note
 
101
from bzrlib.transform import build_tree
 
102
from bzrlib.transport import get_transport
 
103
from bzrlib.transport.local import LocalTransport
 
104
from bzrlib.textui import show_status
 
105
import bzrlib.tree
 
106
import bzrlib.ui
 
107
import bzrlib.xml5
 
108
 
 
109
 
 
110
# the regex here does the following:
 
111
# 1) remove any weird characters; we don't escape them but rather
 
112
# just pull them out
 
113
 # 2) match leading '.'s to make it not hidden
 
114
_gen_file_id_re = re.compile(r'[^\w.]|(^\.*)')
 
115
_gen_id_suffix = None
 
116
_gen_id_serial = 0
 
117
 
 
118
 
 
119
def _next_id_suffix():
 
120
    """Create a new file id suffix that is reasonably unique.
 
121
    
 
122
    On the first call we combine the current time with 64 bits of randomness
 
123
    to give a highly probably globally unique number. Then each call in the same
 
124
    process adds 1 to a serial number we append to that unique value.
 
125
    """
 
126
    # XXX TODO: change bzrlib.add.smart_add to call workingtree.add() rather 
 
127
    # than having to move the id randomness out of the inner loop like this.
 
128
    # XXX TODO: for the global randomness this uses we should add the thread-id
 
129
    # before the serial #.
 
130
    global _gen_id_suffix, _gen_id_serial
 
131
    if _gen_id_suffix is None:
 
132
        _gen_id_suffix = "-%s-%s-" % (compact_date(time()), rand_chars(16))
 
133
    _gen_id_serial += 1
 
134
    return _gen_id_suffix + str(_gen_id_serial)
 
135
 
 
136
 
 
137
def gen_file_id(name):
 
138
    """Return new file id for the basename 'name'.
 
139
 
 
140
    The uniqueness is supplied from _next_id_suffix.
 
141
    """
 
142
    # XXX TODO: squash the filename to lowercase.
 
143
    # XXX TODO: truncate the filename to something like 20 or 30 chars.
 
144
    # XXX TODO: consider what to do with ids that look like illegal filepaths
 
145
    # on platforms we support.
 
146
    return _gen_file_id_re.sub('', name) + _next_id_suffix()
 
147
 
 
148
 
 
149
def gen_root_id():
 
150
    """Return a new tree-root file id."""
 
151
    return gen_file_id('TREE_ROOT')
 
152
 
 
153
 
 
154
class TreeEntry(object):
 
155
    """An entry that implements the minimum interface used by commands.
 
156
 
 
157
    This needs further inspection, it may be better to have 
 
158
    InventoryEntries without ids - though that seems wrong. For now,
 
159
    this is a parallel hierarchy to InventoryEntry, and needs to become
 
160
    one of several things: decorates to that hierarchy, children of, or
 
161
    parents of it.
 
162
    Another note is that these objects are currently only used when there is
 
163
    no InventoryEntry available - i.e. for unversioned objects.
 
164
    Perhaps they should be UnversionedEntry et al. ? - RBC 20051003
 
165
    """
 
166
 
 
167
    def __eq__(self, other):
 
168
        # yes, this us ugly, TODO: best practice __eq__ style.
 
169
        return (isinstance(other, TreeEntry)
 
170
                and other.__class__ == self.__class__)
 
171
 
 
172
    def kind_character(self):
 
173
        return "???"
 
174
 
 
175
 
 
176
class TreeDirectory(TreeEntry):
 
177
    """See TreeEntry. This is a directory in a working tree."""
 
178
 
 
179
    def __eq__(self, other):
 
180
        return (isinstance(other, TreeDirectory)
 
181
                and other.__class__ == self.__class__)
 
182
 
 
183
    def kind_character(self):
 
184
        return "/"
 
185
 
 
186
 
 
187
class TreeFile(TreeEntry):
 
188
    """See TreeEntry. This is a regular file in a working tree."""
 
189
 
 
190
    def __eq__(self, other):
 
191
        return (isinstance(other, TreeFile)
 
192
                and other.__class__ == self.__class__)
 
193
 
 
194
    def kind_character(self):
 
195
        return ''
 
196
 
 
197
 
 
198
class TreeLink(TreeEntry):
 
199
    """See TreeEntry. This is a symlink in a working tree."""
 
200
 
 
201
    def __eq__(self, other):
 
202
        return (isinstance(other, TreeLink)
 
203
                and other.__class__ == self.__class__)
 
204
 
 
205
    def kind_character(self):
 
206
        return ''
 
207
 
 
208
 
 
209
class WorkingTree(bzrlib.tree.Tree):
 
210
    """Working copy tree.
 
211
 
 
212
    The inventory is held in the `Branch` working-inventory, and the
 
213
    files are in a directory on disk.
 
214
 
 
215
    It is possible for a `WorkingTree` to have a filename which is
 
216
    not listed in the Inventory and vice versa.
 
217
    """
 
218
 
 
219
    def __init__(self, basedir='.',
 
220
                 branch=DEPRECATED_PARAMETER,
 
221
                 _inventory=None,
 
222
                 _control_files=None,
 
223
                 _internal=False,
 
224
                 _format=None,
 
225
                 _bzrdir=None):
 
226
        """Construct a WorkingTree for basedir.
 
227
 
 
228
        If the branch is not supplied, it is opened automatically.
 
229
        If the branch is supplied, it must be the branch for this basedir.
 
230
        (branch.base is not cross checked, because for remote branches that
 
231
        would be meaningless).
 
232
        """
 
233
        self._format = _format
 
234
        self.bzrdir = _bzrdir
 
235
        if not _internal:
 
236
            # not created via open etc.
 
237
            warnings.warn("WorkingTree() is deprecated as of bzr version 0.8. "
 
238
                 "Please use bzrdir.open_workingtree or WorkingTree.open().",
 
239
                 DeprecationWarning,
 
240
                 stacklevel=2)
 
241
            wt = WorkingTree.open(basedir)
 
242
            self._branch = wt.branch
 
243
            self.basedir = wt.basedir
 
244
            self._control_files = wt._control_files
 
245
            self._hashcache = wt._hashcache
 
246
            self._set_inventory(wt._inventory)
 
247
            self._format = wt._format
 
248
            self.bzrdir = wt.bzrdir
 
249
        from bzrlib.hashcache import HashCache
 
250
        from bzrlib.trace import note, mutter
 
251
        assert isinstance(basedir, basestring), \
 
252
            "base directory %r is not a string" % basedir
 
253
        basedir = safe_unicode(basedir)
 
254
        mutter("opening working tree %r", basedir)
 
255
        if deprecated_passed(branch):
 
256
            if not _internal:
 
257
                warnings.warn("WorkingTree(..., branch=XXX) is deprecated as of bzr 0.8."
 
258
                     " Please use bzrdir.open_workingtree() or"
 
259
                     " WorkingTree.open().",
 
260
                     DeprecationWarning,
 
261
                     stacklevel=2
 
262
                     )
 
263
            self._branch = branch
 
264
        else:
 
265
            self._branch = self.bzrdir.open_branch()
 
266
        self.basedir = realpath(basedir)
 
267
        # if branch is at our basedir and is a format 6 or less
 
268
        if isinstance(self._format, WorkingTreeFormat2):
 
269
            # share control object
 
270
            self._control_files = self.branch.control_files
 
271
        else:
 
272
            # assume all other formats have their own control files.
 
273
            assert isinstance(_control_files, LockableFiles), \
 
274
                    "_control_files must be a LockableFiles, not %r" \
 
275
                    % _control_files
 
276
            self._control_files = _control_files
 
277
        # update the whole cache up front and write to disk if anything changed;
 
278
        # in the future we might want to do this more selectively
 
279
        # two possible ways offer themselves : in self._unlock, write the cache
 
280
        # if needed, or, when the cache sees a change, append it to the hash
 
281
        # cache file, and have the parser take the most recent entry for a
 
282
        # given path only.
 
283
        cache_filename = self.bzrdir.get_workingtree_transport(None).local_abspath('stat-cache')
 
284
        hc = self._hashcache = HashCache(basedir, cache_filename, self._control_files._file_mode)
 
285
        hc.read()
 
286
        # is this scan needed ? it makes things kinda slow.
 
287
        #hc.scan()
 
288
 
 
289
        if hc.needs_write:
 
290
            mutter("write hc")
 
291
            hc.write()
 
292
 
 
293
        if _inventory is None:
 
294
            self._set_inventory(self.read_working_inventory())
 
295
        else:
 
296
            self._set_inventory(_inventory)
 
297
 
 
298
    branch = property(
 
299
        fget=lambda self: self._branch,
 
300
        doc="""The branch this WorkingTree is connected to.
 
301
 
 
302
            This cannot be set - it is reflective of the actual disk structure
 
303
            the working tree has been constructed from.
 
304
            """)
 
305
 
 
306
    def break_lock(self):
 
307
        """Break a lock if one is present from another instance.
 
308
 
 
309
        Uses the ui factory to ask for confirmation if the lock may be from
 
310
        an active process.
 
311
 
 
312
        This will probe the repository for its lock as well.
 
313
        """
 
314
        self._control_files.break_lock()
 
315
        self.branch.break_lock()
 
316
 
 
317
    def _set_inventory(self, inv):
 
318
        self._inventory = inv
 
319
        self.path2id = self._inventory.path2id
 
320
 
 
321
    def is_control_filename(self, filename):
 
322
        """True if filename is the name of a control file in this tree.
 
323
        
 
324
        :param filename: A filename within the tree. This is a relative path
 
325
        from the root of this tree.
 
326
 
 
327
        This is true IF and ONLY IF the filename is part of the meta data
 
328
        that bzr controls in this tree. I.E. a random .bzr directory placed
 
329
        on disk will not be a control file for this tree.
 
330
        """
 
331
        return self.bzrdir.is_control_filename(filename)
 
332
 
 
333
    @staticmethod
 
334
    def open(path=None, _unsupported=False):
 
335
        """Open an existing working tree at path.
 
336
 
 
337
        """
 
338
        if path is None:
 
339
            path = os.path.getcwdu()
 
340
        control = bzrdir.BzrDir.open(path, _unsupported)
 
341
        return control.open_workingtree(_unsupported)
 
342
        
 
343
    @staticmethod
 
344
    def open_containing(path=None):
 
345
        """Open an existing working tree which has its root about path.
 
346
        
 
347
        This probes for a working tree at path and searches upwards from there.
 
348
 
 
349
        Basically we keep looking up until we find the control directory or
 
350
        run into /.  If there isn't one, raises NotBranchError.
 
351
        TODO: give this a new exception.
 
352
        If there is one, it is returned, along with the unused portion of path.
 
353
 
 
354
        :return: The WorkingTree that contains 'path', and the rest of path
 
355
        """
 
356
        if path is None:
 
357
            path = osutils.getcwd()
 
358
        control, relpath = bzrdir.BzrDir.open_containing(path)
 
359
 
 
360
        return control.open_workingtree(), relpath
 
361
 
 
362
    @staticmethod
 
363
    def open_downlevel(path=None):
 
364
        """Open an unsupported working tree.
 
365
 
 
366
        Only intended for advanced situations like upgrading part of a bzrdir.
 
367
        """
 
368
        return WorkingTree.open(path, _unsupported=True)
 
369
 
 
370
    def __iter__(self):
 
371
        """Iterate through file_ids for this tree.
 
372
 
 
373
        file_ids are in a WorkingTree if they are in the working inventory
 
374
        and the working file exists.
 
375
        """
 
376
        inv = self._inventory
 
377
        for path, ie in inv.iter_entries():
 
378
            if osutils.lexists(self.abspath(path)):
 
379
                yield ie.file_id
 
380
 
 
381
    def __repr__(self):
 
382
        return "<%s of %s>" % (self.__class__.__name__,
 
383
                               getattr(self, 'basedir', None))
 
384
 
 
385
    def abspath(self, filename):
 
386
        return pathjoin(self.basedir, filename)
 
387
    
 
388
    def basis_tree(self):
 
389
        """Return RevisionTree for the current last revision."""
 
390
        revision_id = self.last_revision()
 
391
        if revision_id is not None:
 
392
            try:
 
393
                xml = self.read_basis_inventory()
 
394
                inv = bzrlib.xml5.serializer_v5.read_inventory_from_string(xml)
 
395
            except NoSuchFile:
 
396
                inv = None
 
397
            if inv is not None and inv.revision_id == revision_id:
 
398
                return bzrlib.tree.RevisionTree(self.branch.repository, inv,
 
399
                                                revision_id)
 
400
        # FIXME? RBC 20060403 should we cache the inventory here ?
 
401
        return self.branch.repository.revision_tree(revision_id)
 
402
 
 
403
    @staticmethod
 
404
    @deprecated_method(zero_eight)
 
405
    def create(branch, directory):
 
406
        """Create a workingtree for branch at directory.
 
407
 
 
408
        If existing_directory already exists it must have a .bzr directory.
 
409
        If it does not exist, it will be created.
 
410
 
 
411
        This returns a new WorkingTree object for the new checkout.
 
412
 
 
413
        TODO FIXME RBC 20060124 when we have checkout formats in place this
 
414
        should accept an optional revisionid to checkout [and reject this if
 
415
        checking out into the same dir as a pre-checkout-aware branch format.]
 
416
 
 
417
        XXX: When BzrDir is present, these should be created through that 
 
418
        interface instead.
 
419
        """
 
420
        warnings.warn('delete WorkingTree.create', stacklevel=3)
 
421
        transport = get_transport(directory)
 
422
        if branch.bzrdir.root_transport.base == transport.base:
 
423
            # same dir 
 
424
            return branch.bzrdir.create_workingtree()
 
425
        # different directory, 
 
426
        # create a branch reference
 
427
        # and now a working tree.
 
428
        raise NotImplementedError
 
429
 
 
430
    @staticmethod
 
431
    @deprecated_method(zero_eight)
 
432
    def create_standalone(directory):
 
433
        """Create a checkout and a branch and a repo at directory.
 
434
 
 
435
        Directory must exist and be empty.
 
436
 
 
437
        please use BzrDir.create_standalone_workingtree
 
438
        """
 
439
        return bzrdir.BzrDir.create_standalone_workingtree(directory)
 
440
 
 
441
    def relpath(self, path):
 
442
        """Return the local path portion from a given path.
 
443
        
 
444
        The path may be absolute or relative. If its a relative path it is 
 
445
        interpreted relative to the python current working directory.
 
446
        """
 
447
        return relpath(self.basedir, path)
 
448
 
 
449
    def has_filename(self, filename):
 
450
        return osutils.lexists(self.abspath(filename))
 
451
 
 
452
    def get_file(self, file_id):
 
453
        return self.get_file_byname(self.id2path(file_id))
 
454
 
 
455
    def get_file_byname(self, filename):
 
456
        return file(self.abspath(filename), 'rb')
 
457
 
 
458
    def get_parent_ids(self):
 
459
        """See Tree.get_parent_ids.
 
460
        
 
461
        This implementation reads the pending merges list and last_revision
 
462
        value and uses that to decide what the parents list should be.
 
463
        """
 
464
        last_rev = self.last_revision()
 
465
        if last_rev is None:
 
466
            parents = []
 
467
        else:
 
468
            parents = [last_rev]
 
469
        other_parents = self.pending_merges()
 
470
        return parents + other_parents
 
471
 
 
472
    def get_root_id(self):
 
473
        """Return the id of this trees root"""
 
474
        inv = self.read_working_inventory()
 
475
        return inv.root.file_id
 
476
        
 
477
    def _get_store_filename(self, file_id):
 
478
        ## XXX: badly named; this is not in the store at all
 
479
        return self.abspath(self.id2path(file_id))
 
480
 
 
481
    @needs_read_lock
 
482
    def clone(self, to_bzrdir, revision_id=None, basis=None):
 
483
        """Duplicate this working tree into to_bzr, including all state.
 
484
        
 
485
        Specifically modified files are kept as modified, but
 
486
        ignored and unknown files are discarded.
 
487
 
 
488
        If you want to make a new line of development, see bzrdir.sprout()
 
489
 
 
490
        revision
 
491
            If not None, the cloned tree will have its last revision set to 
 
492
            revision, and and difference between the source trees last revision
 
493
            and this one merged in.
 
494
 
 
495
        basis
 
496
            If not None, a closer copy of a tree which may have some files in
 
497
            common, and which file content should be preferentially copied from.
 
498
        """
 
499
        # assumes the target bzr dir format is compatible.
 
500
        result = self._format.initialize(to_bzrdir)
 
501
        self.copy_content_into(result, revision_id)
 
502
        return result
 
503
 
 
504
    @needs_read_lock
 
505
    def copy_content_into(self, tree, revision_id=None):
 
506
        """Copy the current content and user files of this tree into tree."""
 
507
        if revision_id is None:
 
508
            transform_tree(tree, self)
 
509
        else:
 
510
            # TODO now merge from tree.last_revision to revision
 
511
            transform_tree(tree, self)
 
512
            tree.set_last_revision(revision_id)
 
513
 
 
514
    @needs_write_lock
 
515
    def commit(self, message=None, revprops=None, *args, **kwargs):
 
516
        # avoid circular imports
 
517
        from bzrlib.commit import Commit
 
518
        if revprops is None:
 
519
            revprops = {}
 
520
        if not 'branch-nick' in revprops:
 
521
            revprops['branch-nick'] = self.branch.nick
 
522
        # args for wt.commit start at message from the Commit.commit method,
 
523
        # but with branch a kwarg now, passing in args as is results in the
 
524
        #message being used for the branch
 
525
        args = (DEPRECATED_PARAMETER, message, ) + args
 
526
        committed_id = Commit().commit( working_tree=self, revprops=revprops,
 
527
            *args, **kwargs)
 
528
        self._set_inventory(self.read_working_inventory())
 
529
        return committed_id
 
530
 
 
531
    def id2abspath(self, file_id):
 
532
        return self.abspath(self.id2path(file_id))
 
533
 
 
534
    def has_id(self, file_id):
 
535
        # files that have been deleted are excluded
 
536
        inv = self._inventory
 
537
        if not inv.has_id(file_id):
 
538
            return False
 
539
        path = inv.id2path(file_id)
 
540
        return osutils.lexists(self.abspath(path))
 
541
 
 
542
    def has_or_had_id(self, file_id):
 
543
        if file_id == self.inventory.root.file_id:
 
544
            return True
 
545
        return self.inventory.has_id(file_id)
 
546
 
 
547
    __contains__ = has_id
 
548
 
 
549
    def get_file_size(self, file_id):
 
550
        return os.path.getsize(self.id2abspath(file_id))
 
551
 
 
552
    @needs_read_lock
 
553
    def get_file_sha1(self, file_id, path=None):
 
554
        if not path:
 
555
            path = self._inventory.id2path(file_id)
 
556
        return self._hashcache.get_sha1(path)
 
557
 
 
558
    def get_file_mtime(self, file_id, path=None):
 
559
        if not path:
 
560
            path = self._inventory.id2path(file_id)
 
561
        return os.lstat(self.abspath(path)).st_mtime
 
562
 
 
563
    if not supports_executable():
 
564
        def is_executable(self, file_id, path=None):
 
565
            return self._inventory[file_id].executable
 
566
    else:
 
567
        def is_executable(self, file_id, path=None):
 
568
            if not path:
 
569
                path = self._inventory.id2path(file_id)
 
570
            mode = os.lstat(self.abspath(path)).st_mode
 
571
            return bool(stat.S_ISREG(mode) and stat.S_IEXEC & mode)
 
572
 
 
573
    @needs_write_lock
 
574
    def add(self, files, ids=None):
 
575
        """Make files versioned.
 
576
 
 
577
        Note that the command line normally calls smart_add instead,
 
578
        which can automatically recurse.
 
579
 
 
580
        This adds the files to the inventory, so that they will be
 
581
        recorded by the next commit.
 
582
 
 
583
        files
 
584
            List of paths to add, relative to the base of the tree.
 
585
 
 
586
        ids
 
587
            If set, use these instead of automatically generated ids.
 
588
            Must be the same length as the list of files, but may
 
589
            contain None for ids that are to be autogenerated.
 
590
 
 
591
        TODO: Perhaps have an option to add the ids even if the files do
 
592
              not (yet) exist.
 
593
 
 
594
        TODO: Perhaps callback with the ids and paths as they're added.
 
595
        """
 
596
        # TODO: Re-adding a file that is removed in the working copy
 
597
        # should probably put it back with the previous ID.
 
598
        if isinstance(files, basestring):
 
599
            assert(ids is None or isinstance(ids, basestring))
 
600
            files = [files]
 
601
            if ids is not None:
 
602
                ids = [ids]
 
603
 
 
604
        if ids is None:
 
605
            ids = [None] * len(files)
 
606
        else:
 
607
            assert(len(ids) == len(files))
 
608
 
 
609
        inv = self.read_working_inventory()
 
610
        for f,file_id in zip(files, ids):
 
611
            if self.is_control_filename(f):
 
612
                raise errors.ForbiddenControlFileError(filename=f)
 
613
 
 
614
            fp = splitpath(f)
 
615
 
 
616
            if len(fp) == 0:
 
617
                raise BzrError("cannot add top-level %r" % f)
 
618
 
 
619
            fullpath = normpath(self.abspath(f))
 
620
            try:
 
621
                kind = file_kind(fullpath)
 
622
            except OSError, e:
 
623
                if e.errno == errno.ENOENT:
 
624
                    raise NoSuchFile(fullpath)
 
625
            if not InventoryEntry.versionable_kind(kind):
 
626
                raise errors.BadFileKindError(filename=f, kind=kind)
 
627
            if file_id is None:
 
628
                inv.add_path(f, kind=kind)
 
629
            else:
 
630
                inv.add_path(f, kind=kind, file_id=file_id)
 
631
 
 
632
        self._write_inventory(inv)
 
633
 
 
634
    @needs_write_lock
 
635
    def add_pending_merge(self, *revision_ids):
 
636
        # TODO: Perhaps should check at this point that the
 
637
        # history of the revision is actually present?
 
638
        p = self.pending_merges()
 
639
        updated = False
 
640
        for rev_id in revision_ids:
 
641
            if rev_id in p:
 
642
                continue
 
643
            p.append(rev_id)
 
644
            updated = True
 
645
        if updated:
 
646
            self.set_pending_merges(p)
 
647
 
 
648
    @needs_read_lock
 
649
    def pending_merges(self):
 
650
        """Return a list of pending merges.
 
651
 
 
652
        These are revisions that have been merged into the working
 
653
        directory but not yet committed.
 
654
        """
 
655
        try:
 
656
            merges_file = self._control_files.get_utf8('pending-merges')
 
657
        except NoSuchFile:
 
658
            return []
 
659
        p = []
 
660
        for l in merges_file.readlines():
 
661
            p.append(l.rstrip('\n'))
 
662
        return p
 
663
 
 
664
    @needs_write_lock
 
665
    def set_pending_merges(self, rev_list):
 
666
        self._control_files.put_utf8('pending-merges', '\n'.join(rev_list))
 
667
 
 
668
    @needs_write_lock
 
669
    def set_merge_modified(self, modified_hashes):
 
670
        def iter_stanzas():
 
671
            for file_id, hash in modified_hashes.iteritems():
 
672
                yield Stanza(file_id=file_id, hash=hash)
 
673
        self._put_rio('merge-hashes', iter_stanzas(), MERGE_MODIFIED_HEADER_1)
 
674
 
 
675
    @needs_write_lock
 
676
    def _put_rio(self, filename, stanzas, header):
 
677
        my_file = rio_file(stanzas, header)
 
678
        self._control_files.put(filename, my_file)
 
679
 
 
680
    @needs_read_lock
 
681
    def merge_modified(self):
 
682
        try:
 
683
            hashfile = self._control_files.get('merge-hashes')
 
684
        except NoSuchFile:
 
685
            return {}
 
686
        merge_hashes = {}
 
687
        try:
 
688
            if hashfile.next() != MERGE_MODIFIED_HEADER_1 + '\n':
 
689
                raise MergeModifiedFormatError()
 
690
        except StopIteration:
 
691
            raise MergeModifiedFormatError()
 
692
        for s in RioReader(hashfile):
 
693
            file_id = s.get("file_id")
 
694
            if file_id not in self.inventory:
 
695
                continue
 
696
            hash = s.get("hash")
 
697
            if hash == self.get_file_sha1(file_id):
 
698
                merge_hashes[file_id] = hash
 
699
        return merge_hashes
 
700
 
 
701
    def get_symlink_target(self, file_id):
 
702
        return os.readlink(self.id2abspath(file_id))
 
703
 
 
704
    def file_class(self, filename):
 
705
        if self.path2id(filename):
 
706
            return 'V'
 
707
        elif self.is_ignored(filename):
 
708
            return 'I'
 
709
        else:
 
710
            return '?'
 
711
 
 
712
    def list_files(self):
 
713
        """Recursively list all files as (path, class, kind, id, entry).
 
714
 
 
715
        Lists, but does not descend into unversioned directories.
 
716
 
 
717
        This does not include files that have been deleted in this
 
718
        tree.
 
719
 
 
720
        Skips the control directory.
 
721
        """
 
722
        inv = self._inventory
 
723
        # Convert these into local objects to save lookup times
 
724
        pathjoin = osutils.pathjoin
 
725
        file_kind = osutils.file_kind
 
726
 
 
727
        # transport.base ends in a slash, we want the piece
 
728
        # between the last two slashes
 
729
        transport_base_dir = self.bzrdir.transport.base.rsplit('/', 2)[1]
 
730
 
 
731
        fk_entries = {'directory':TreeDirectory, 'file':TreeFile, 'symlink':TreeLink}
 
732
 
 
733
        # directory file_id, relative path, absolute path, reverse sorted children
 
734
        children = os.listdir(self.basedir)
 
735
        children.sort()
 
736
        # jam 20060527 The kernel sized tree seems equivalent whether we 
 
737
        # use a deque and popleft to keep them sorted, or if we use a plain
 
738
        # list and just reverse() them.
 
739
        children = collections.deque(children)
 
740
        stack = [(inv.root.file_id, u'', self.basedir, children)]
 
741
        while stack:
 
742
            from_dir_id, from_dir_relpath, from_dir_abspath, children = stack[-1]
 
743
 
 
744
            while children:
 
745
                f = children.popleft()
 
746
                ## TODO: If we find a subdirectory with its own .bzr
 
747
                ## directory, then that is a separate tree and we
 
748
                ## should exclude it.
 
749
 
 
750
                # the bzrdir for this tree
 
751
                if transport_base_dir == f:
 
752
                    continue
 
753
 
 
754
                # we know that from_dir_relpath and from_dir_abspath never end in a slash
 
755
                # and 'f' doesn't begin with one, we can do a string op, rather
 
756
                # than the checks of pathjoin(), all relative paths will have an extra slash
 
757
                # at the beginning
 
758
                fp = from_dir_relpath + '/' + f
 
759
 
 
760
                # absolute path
 
761
                fap = from_dir_abspath + '/' + f
 
762
                
 
763
                f_ie = inv.get_child(from_dir_id, f)
 
764
                if f_ie:
 
765
                    c = 'V'
 
766
                elif self.is_ignored(fp[1:]):
 
767
                    c = 'I'
 
768
                else:
 
769
                    # we may not have found this file, because of a unicode issue
 
770
                    f_norm, can_access = osutils.normalized_filename(f)
 
771
                    if f == f_norm or not can_access:
 
772
                        # No change, so treat this file normally
 
773
                        c = '?'
 
774
                    else:
 
775
                        # this file can be accessed by a normalized path
 
776
                        # check again if it is versioned
 
777
                        # these lines are repeated here for performance
 
778
                        f = f_norm
 
779
                        fp = from_dir_relpath + '/' + f
 
780
                        fap = from_dir_abspath + '/' + f
 
781
                        f_ie = inv.get_child(from_dir_id, f)
 
782
                        if f_ie:
 
783
                            c = 'V'
 
784
                        elif self.is_ignored(fp[1:]):
 
785
                            c = 'I'
 
786
                        else:
 
787
                            c = '?'
 
788
 
 
789
                fk = file_kind(fap)
 
790
 
 
791
                if f_ie:
 
792
                    if f_ie.kind != fk:
 
793
                        raise BzrCheckError("file %r entered as kind %r id %r, "
 
794
                                            "now of kind %r"
 
795
                                            % (fap, f_ie.kind, f_ie.file_id, fk))
 
796
 
 
797
                # make a last minute entry
 
798
                if f_ie:
 
799
                    yield fp[1:], c, fk, f_ie.file_id, f_ie
 
800
                else:
 
801
                    try:
 
802
                        yield fp[1:], c, fk, None, fk_entries[fk]()
 
803
                    except KeyError:
 
804
                        yield fp[1:], c, fk, None, TreeEntry()
 
805
                    continue
 
806
                
 
807
                if fk != 'directory':
 
808
                    continue
 
809
 
 
810
                # But do this child first
 
811
                new_children = os.listdir(fap)
 
812
                new_children.sort()
 
813
                new_children = collections.deque(new_children)
 
814
                stack.append((f_ie.file_id, fp, fap, new_children))
 
815
                # Break out of inner loop, so that we start outer loop with child
 
816
                break
 
817
            else:
 
818
                # if we finished all children, pop it off the stack
 
819
                stack.pop()
 
820
 
 
821
 
 
822
    @needs_write_lock
 
823
    def move(self, from_paths, to_name):
 
824
        """Rename files.
 
825
 
 
826
        to_name must exist in the inventory.
 
827
 
 
828
        If to_name exists and is a directory, the files are moved into
 
829
        it, keeping their old names.  
 
830
 
 
831
        Note that to_name is only the last component of the new name;
 
832
        this doesn't change the directory.
 
833
 
 
834
        This returns a list of (from_path, to_path) pairs for each
 
835
        entry that is moved.
 
836
        """
 
837
        result = []
 
838
        ## TODO: Option to move IDs only
 
839
        assert not isinstance(from_paths, basestring)
 
840
        inv = self.inventory
 
841
        to_abs = self.abspath(to_name)
 
842
        if not isdir(to_abs):
 
843
            raise BzrError("destination %r is not a directory" % to_abs)
 
844
        if not self.has_filename(to_name):
 
845
            raise BzrError("destination %r not in working directory" % to_abs)
 
846
        to_dir_id = inv.path2id(to_name)
 
847
        if to_dir_id == None and to_name != '':
 
848
            raise BzrError("destination %r is not a versioned directory" % to_name)
 
849
        to_dir_ie = inv[to_dir_id]
 
850
        if to_dir_ie.kind not in ('directory', 'root_directory'):
 
851
            raise BzrError("destination %r is not a directory" % to_abs)
 
852
 
 
853
        to_idpath = inv.get_idpath(to_dir_id)
 
854
 
 
855
        for f in from_paths:
 
856
            if not self.has_filename(f):
 
857
                raise BzrError("%r does not exist in working tree" % f)
 
858
            f_id = inv.path2id(f)
 
859
            if f_id == None:
 
860
                raise BzrError("%r is not versioned" % f)
 
861
            name_tail = splitpath(f)[-1]
 
862
            dest_path = pathjoin(to_name, name_tail)
 
863
            if self.has_filename(dest_path):
 
864
                raise BzrError("destination %r already exists" % dest_path)
 
865
            if f_id in to_idpath:
 
866
                raise BzrError("can't move %r to a subdirectory of itself" % f)
 
867
 
 
868
        # OK, so there's a race here, it's possible that someone will
 
869
        # create a file in this interval and then the rename might be
 
870
        # left half-done.  But we should have caught most problems.
 
871
        orig_inv = deepcopy(self.inventory)
 
872
        try:
 
873
            for f in from_paths:
 
874
                name_tail = splitpath(f)[-1]
 
875
                dest_path = pathjoin(to_name, name_tail)
 
876
                result.append((f, dest_path))
 
877
                inv.rename(inv.path2id(f), to_dir_id, name_tail)
 
878
                try:
 
879
                    rename(self.abspath(f), self.abspath(dest_path))
 
880
                except OSError, e:
 
881
                    raise BzrError("failed to rename %r to %r: %s" %
 
882
                                   (f, dest_path, e[1]),
 
883
                            ["rename rolled back"])
 
884
        except:
 
885
            # restore the inventory on error
 
886
            self._set_inventory(orig_inv)
 
887
            raise
 
888
        self._write_inventory(inv)
 
889
        return result
 
890
 
 
891
    @needs_write_lock
 
892
    def rename_one(self, from_rel, to_rel):
 
893
        """Rename one file.
 
894
 
 
895
        This can change the directory or the filename or both.
 
896
        """
 
897
        inv = self.inventory
 
898
        if not self.has_filename(from_rel):
 
899
            raise BzrError("can't rename: old working file %r does not exist" % from_rel)
 
900
        if self.has_filename(to_rel):
 
901
            raise BzrError("can't rename: new working file %r already exists" % to_rel)
 
902
 
 
903
        file_id = inv.path2id(from_rel)
 
904
        if file_id == None:
 
905
            raise BzrError("can't rename: old name %r is not versioned" % from_rel)
 
906
 
 
907
        entry = inv[file_id]
 
908
        from_parent = entry.parent_id
 
909
        from_name = entry.name
 
910
        
 
911
        if inv.path2id(to_rel):
 
912
            raise BzrError("can't rename: new name %r is already versioned" % to_rel)
 
913
 
 
914
        to_dir, to_tail = os.path.split(to_rel)
 
915
        to_dir_id = inv.path2id(to_dir)
 
916
        if to_dir_id == None and to_dir != '':
 
917
            raise BzrError("can't determine destination directory id for %r" % to_dir)
 
918
 
 
919
        mutter("rename_one:")
 
920
        mutter("  file_id    {%s}" % file_id)
 
921
        mutter("  from_rel   %r" % from_rel)
 
922
        mutter("  to_rel     %r" % to_rel)
 
923
        mutter("  to_dir     %r" % to_dir)
 
924
        mutter("  to_dir_id  {%s}" % to_dir_id)
 
925
 
 
926
        inv.rename(file_id, to_dir_id, to_tail)
 
927
 
 
928
        from_abs = self.abspath(from_rel)
 
929
        to_abs = self.abspath(to_rel)
 
930
        try:
 
931
            rename(from_abs, to_abs)
 
932
        except OSError, e:
 
933
            inv.rename(file_id, from_parent, from_name)
 
934
            raise BzrError("failed to rename %r to %r: %s"
 
935
                    % (from_abs, to_abs, e[1]),
 
936
                    ["rename rolled back"])
 
937
        self._write_inventory(inv)
 
938
 
 
939
    @needs_read_lock
 
940
    def unknowns(self):
 
941
        """Return all unknown files.
 
942
 
 
943
        These are files in the working directory that are not versioned or
 
944
        control files or ignored.
 
945
        """
 
946
        for subp in self.extras():
 
947
            if not self.is_ignored(subp):
 
948
                yield subp
 
949
 
 
950
    @deprecated_method(zero_eight)
 
951
    def iter_conflicts(self):
 
952
        """List all files in the tree that have text or content conflicts.
 
953
        DEPRECATED.  Use conflicts instead."""
 
954
        return self._iter_conflicts()
 
955
 
 
956
    def _iter_conflicts(self):
 
957
        conflicted = set()
 
958
        for info in self.list_files():
 
959
            path = info[0]
 
960
            stem = get_conflicted_stem(path)
 
961
            if stem is None:
 
962
                continue
 
963
            if stem not in conflicted:
 
964
                conflicted.add(stem)
 
965
                yield stem
 
966
 
 
967
    @needs_write_lock
 
968
    def pull(self, source, overwrite=False, stop_revision=None):
 
969
        top_pb = bzrlib.ui.ui_factory.nested_progress_bar()
 
970
        source.lock_read()
 
971
        try:
 
972
            pp = ProgressPhase("Pull phase", 2, top_pb)
 
973
            pp.next_phase()
 
974
            old_revision_history = self.branch.revision_history()
 
975
            basis_tree = self.basis_tree()
 
976
            count = self.branch.pull(source, overwrite, stop_revision)
 
977
            new_revision_history = self.branch.revision_history()
 
978
            if new_revision_history != old_revision_history:
 
979
                pp.next_phase()
 
980
                if len(old_revision_history):
 
981
                    other_revision = old_revision_history[-1]
 
982
                else:
 
983
                    other_revision = None
 
984
                repository = self.branch.repository
 
985
                pb = bzrlib.ui.ui_factory.nested_progress_bar()
 
986
                try:
 
987
                    merge_inner(self.branch,
 
988
                                self.branch.basis_tree(),
 
989
                                basis_tree, 
 
990
                                this_tree=self, 
 
991
                                pb=pb)
 
992
                finally:
 
993
                    pb.finished()
 
994
                self.set_last_revision(self.branch.last_revision())
 
995
            return count
 
996
        finally:
 
997
            source.unlock()
 
998
            top_pb.finished()
 
999
 
 
1000
    def extras(self):
 
1001
        """Yield all unknown files in this WorkingTree.
 
1002
 
 
1003
        If there are any unknown directories then only the directory is
 
1004
        returned, not all its children.  But if there are unknown files
 
1005
        under a versioned subdirectory, they are returned.
 
1006
 
 
1007
        Currently returned depth-first, sorted by name within directories.
 
1008
        """
 
1009
        ## TODO: Work from given directory downwards
 
1010
        for path, dir_entry in self.inventory.directories():
 
1011
            mutter("search for unknowns in %r", path)
 
1012
            dirabs = self.abspath(path)
 
1013
            if not isdir(dirabs):
 
1014
                # e.g. directory deleted
 
1015
                continue
 
1016
 
 
1017
            fl = []
 
1018
            for subf in os.listdir(dirabs):
 
1019
                if subf == '.bzr':
 
1020
                    continue
 
1021
                if subf not in dir_entry.children:
 
1022
                    subf_norm, can_access = osutils.normalized_filename(subf)
 
1023
                    if subf_norm != subf and can_access:
 
1024
                        if subf_norm not in dir_entry.children:
 
1025
                            fl.append(subf_norm)
 
1026
                    else:
 
1027
                        fl.append(subf)
 
1028
            
 
1029
            fl.sort()
 
1030
            for subf in fl:
 
1031
                subp = pathjoin(path, subf)
 
1032
                yield subp
 
1033
 
 
1034
    def _translate_ignore_rule(self, rule):
 
1035
        """Translate a single ignore rule to a regex.
 
1036
 
 
1037
        There are two types of ignore rules.  Those that do not contain a / are
 
1038
        matched against the tail of the filename (that is, they do not care
 
1039
        what directory the file is in.)  Rules which do contain a slash must
 
1040
        match the entire path.  As a special case, './' at the start of the
 
1041
        string counts as a slash in the string but is removed before matching
 
1042
        (e.g. ./foo.c, ./src/foo.c)
 
1043
 
 
1044
        :return: The translated regex.
 
1045
        """
 
1046
        if rule[:2] in ('./', '.\\'):
 
1047
            # rootdir rule
 
1048
            result = fnmatch.translate(rule[2:])
 
1049
        elif '/' in rule or '\\' in rule:
 
1050
            # path prefix 
 
1051
            result = fnmatch.translate(rule)
 
1052
        else:
 
1053
            # default rule style.
 
1054
            result = "(?:.*/)?(?!.*/)" + fnmatch.translate(rule)
 
1055
        assert result[-1] == '$', "fnmatch.translate did not add the expected $"
 
1056
        return "(" + result + ")"
 
1057
 
 
1058
    def _combine_ignore_rules(self, rules):
 
1059
        """Combine a list of ignore rules into a single regex object.
 
1060
 
 
1061
        Each individual rule is combined with | to form a big regex, which then
 
1062
        has $ added to it to form something like ()|()|()$. The group index for
 
1063
        each subregex's outermost group is placed in a dictionary mapping back 
 
1064
        to the rule. This allows quick identification of the matching rule that
 
1065
        triggered a match.
 
1066
        :return: a list of the compiled regex and the matching-group index 
 
1067
        dictionaries. We return a list because python complains if you try to 
 
1068
        combine more than 100 regexes.
 
1069
        """
 
1070
        result = []
 
1071
        groups = {}
 
1072
        next_group = 0
 
1073
        translated_rules = []
 
1074
        for rule in rules:
 
1075
            translated_rule = self._translate_ignore_rule(rule)
 
1076
            compiled_rule = re.compile(translated_rule)
 
1077
            groups[next_group] = rule
 
1078
            next_group += compiled_rule.groups
 
1079
            translated_rules.append(translated_rule)
 
1080
            if next_group == 99:
 
1081
                result.append((re.compile("|".join(translated_rules)), groups))
 
1082
                groups = {}
 
1083
                next_group = 0
 
1084
                translated_rules = []
 
1085
        if len(translated_rules):
 
1086
            result.append((re.compile("|".join(translated_rules)), groups))
 
1087
        return result
 
1088
 
 
1089
    def ignored_files(self):
 
1090
        """Yield list of PATH, IGNORE_PATTERN"""
 
1091
        for subp in self.extras():
 
1092
            pat = self.is_ignored(subp)
 
1093
            if pat != None:
 
1094
                yield subp, pat
 
1095
 
 
1096
    def get_ignore_list(self):
 
1097
        """Return list of ignore patterns.
 
1098
 
 
1099
        Cached in the Tree object after the first call.
 
1100
        """
 
1101
        ignorelist = getattr(self, '_ignorelist', None)
 
1102
        if ignorelist is not None:
 
1103
            return ignorelist
 
1104
 
 
1105
        ignore_globs = bzrlib.DEFAULT_IGNORE[:]
 
1106
 
 
1107
        ignore_globs.extend(ignores.get_user_ignores())
 
1108
 
 
1109
        if self.has_filename(bzrlib.IGNORE_FILENAME):
 
1110
            f = self.get_file_byname(bzrlib.IGNORE_FILENAME)
 
1111
            try:
 
1112
                ignore_globs.extend(ignores.parse_ignore_file(f))
 
1113
            finally:
 
1114
                f.close()
 
1115
 
 
1116
        self._ignorelist = ignore_globs
 
1117
        self._ignore_regex = self._combine_ignore_rules(ignore_globs)
 
1118
        return ignore_globs
 
1119
 
 
1120
    def _get_ignore_rules_as_regex(self):
 
1121
        """Return a regex of the ignore rules and a mapping dict.
 
1122
 
 
1123
        :return: (ignore rules compiled regex, dictionary mapping rule group 
 
1124
        indices to original rule.)
 
1125
        """
 
1126
        if getattr(self, '_ignorelist', None) is None:
 
1127
            self.get_ignore_list()
 
1128
        return self._ignore_regex
 
1129
 
 
1130
    def is_ignored(self, filename):
 
1131
        r"""Check whether the filename matches an ignore pattern.
 
1132
 
 
1133
        Patterns containing '/' or '\' need to match the whole path;
 
1134
        others match against only the last component.
 
1135
 
 
1136
        If the file is ignored, returns the pattern which caused it to
 
1137
        be ignored, otherwise None.  So this can simply be used as a
 
1138
        boolean if desired."""
 
1139
 
 
1140
        # TODO: Use '**' to match directories, and other extended
 
1141
        # globbing stuff from cvs/rsync.
 
1142
 
 
1143
        # XXX: fnmatch is actually not quite what we want: it's only
 
1144
        # approximately the same as real Unix fnmatch, and doesn't
 
1145
        # treat dotfiles correctly and allows * to match /.
 
1146
        # Eventually it should be replaced with something more
 
1147
        # accurate.
 
1148
    
 
1149
        rules = self._get_ignore_rules_as_regex()
 
1150
        for regex, mapping in rules:
 
1151
            match = regex.match(filename)
 
1152
            if match is not None:
 
1153
                # one or more of the groups in mapping will have a non-None group 
 
1154
                # match.
 
1155
                groups = match.groups()
 
1156
                rules = [mapping[group] for group in 
 
1157
                    mapping if groups[group] is not None]
 
1158
                return rules[0]
 
1159
        return None
 
1160
 
 
1161
    def kind(self, file_id):
 
1162
        return file_kind(self.id2abspath(file_id))
 
1163
 
 
1164
    @needs_read_lock
 
1165
    def last_revision(self):
 
1166
        """Return the last revision id of this working tree.
 
1167
 
 
1168
        In early branch formats this was == the branch last_revision,
 
1169
        but that cannot be relied upon - for working tree operations,
 
1170
        always use tree.last_revision().
 
1171
        """
 
1172
        return self.branch.last_revision()
 
1173
 
 
1174
    def is_locked(self):
 
1175
        return self._control_files.is_locked()
 
1176
 
 
1177
    def lock_read(self):
 
1178
        """See Branch.lock_read, and WorkingTree.unlock."""
 
1179
        self.branch.lock_read()
 
1180
        try:
 
1181
            return self._control_files.lock_read()
 
1182
        except:
 
1183
            self.branch.unlock()
 
1184
            raise
 
1185
 
 
1186
    def lock_write(self):
 
1187
        """See Branch.lock_write, and WorkingTree.unlock."""
 
1188
        self.branch.lock_write()
 
1189
        try:
 
1190
            return self._control_files.lock_write()
 
1191
        except:
 
1192
            self.branch.unlock()
 
1193
            raise
 
1194
 
 
1195
    def get_physical_lock_status(self):
 
1196
        return self._control_files.get_physical_lock_status()
 
1197
 
 
1198
    def _basis_inventory_name(self):
 
1199
        return 'basis-inventory'
 
1200
 
 
1201
    @needs_write_lock
 
1202
    def set_last_revision(self, new_revision):
 
1203
        """Change the last revision in the working tree."""
 
1204
        if self._change_last_revision(new_revision):
 
1205
            self._cache_basis_inventory(new_revision)
 
1206
 
 
1207
    def _change_last_revision(self, new_revision):
 
1208
        """Template method part of set_last_revision to perform the change.
 
1209
        
 
1210
        This is used to allow WorkingTree3 instances to not affect branch
 
1211
        when their last revision is set.
 
1212
        """
 
1213
        if new_revision is None:
 
1214
            self.branch.set_revision_history([])
 
1215
            return False
 
1216
        # current format is locked in with the branch
 
1217
        revision_history = self.branch.revision_history()
 
1218
        try:
 
1219
            position = revision_history.index(new_revision)
 
1220
        except ValueError:
 
1221
            raise errors.NoSuchRevision(self.branch, new_revision)
 
1222
        self.branch.set_revision_history(revision_history[:position + 1])
 
1223
        return True
 
1224
 
 
1225
    def _cache_basis_inventory(self, new_revision):
 
1226
        """Cache new_revision as the basis inventory."""
 
1227
        # TODO: this should allow the ready-to-use inventory to be passed in,
 
1228
        # as commit already has that ready-to-use [while the format is the
 
1229
        # same, that is].
 
1230
        try:
 
1231
            # this double handles the inventory - unpack and repack - 
 
1232
            # but is easier to understand. We can/should put a conditional
 
1233
            # in here based on whether the inventory is in the latest format
 
1234
            # - perhaps we should repack all inventories on a repository
 
1235
            # upgrade ?
 
1236
            # the fast path is to copy the raw xml from the repository. If the
 
1237
            # xml contains 'revision_id="', then we assume the right 
 
1238
            # revision_id is set. We must check for this full string, because a
 
1239
            # root node id can legitimately look like 'revision_id' but cannot
 
1240
            # contain a '"'.
 
1241
            xml = self.branch.repository.get_inventory_xml(new_revision)
 
1242
            if not 'revision_id="' in xml.split('\n', 1)[0]:
 
1243
                inv = self.branch.repository.deserialise_inventory(
 
1244
                    new_revision, xml)
 
1245
                inv.revision_id = new_revision
 
1246
                xml = bzrlib.xml5.serializer_v5.write_inventory_to_string(inv)
 
1247
            assert isinstance(xml, str), 'serialised xml must be bytestring.'
 
1248
            path = self._basis_inventory_name()
 
1249
            sio = StringIO(xml)
 
1250
            self._control_files.put(path, sio)
 
1251
        except WeaveRevisionNotPresent:
 
1252
            pass
 
1253
 
 
1254
    def read_basis_inventory(self):
 
1255
        """Read the cached basis inventory."""
 
1256
        path = self._basis_inventory_name()
 
1257
        return self._control_files.get(path).read()
 
1258
        
 
1259
    @needs_read_lock
 
1260
    def read_working_inventory(self):
 
1261
        """Read the working inventory."""
 
1262
        # ElementTree does its own conversion from UTF-8, so open in
 
1263
        # binary.
 
1264
        result = bzrlib.xml5.serializer_v5.read_inventory(
 
1265
            self._control_files.get('inventory'))
 
1266
        self._set_inventory(result)
 
1267
        return result
 
1268
 
 
1269
    @needs_write_lock
 
1270
    def remove(self, files, verbose=False, to_file=None):
 
1271
        """Remove nominated files from the working inventory..
 
1272
 
 
1273
        This does not remove their text.  This does not run on XXX on what? RBC
 
1274
 
 
1275
        TODO: Refuse to remove modified files unless --force is given?
 
1276
 
 
1277
        TODO: Do something useful with directories.
 
1278
 
 
1279
        TODO: Should this remove the text or not?  Tough call; not
 
1280
        removing may be useful and the user can just use use rm, and
 
1281
        is the opposite of add.  Removing it is consistent with most
 
1282
        other tools.  Maybe an option.
 
1283
        """
 
1284
        ## TODO: Normalize names
 
1285
        ## TODO: Remove nested loops; better scalability
 
1286
        if isinstance(files, basestring):
 
1287
            files = [files]
 
1288
 
 
1289
        inv = self.inventory
 
1290
 
 
1291
        # do this before any modifications
 
1292
        for f in files:
 
1293
            fid = inv.path2id(f)
 
1294
            if not fid:
 
1295
                # TODO: Perhaps make this just a warning, and continue?
 
1296
                # This tends to happen when 
 
1297
                raise NotVersionedError(path=f)
 
1298
            if verbose:
 
1299
                # having remove it, it must be either ignored or unknown
 
1300
                if self.is_ignored(f):
 
1301
                    new_status = 'I'
 
1302
                else:
 
1303
                    new_status = '?'
 
1304
                show_status(new_status, inv[fid].kind, f, to_file=to_file)
 
1305
            del inv[fid]
 
1306
 
 
1307
        self._write_inventory(inv)
 
1308
 
 
1309
    @needs_write_lock
 
1310
    def revert(self, filenames, old_tree=None, backups=True, 
 
1311
               pb=DummyProgress()):
 
1312
        from transform import revert
 
1313
        from conflicts import resolve
 
1314
        if old_tree is None:
 
1315
            old_tree = self.basis_tree()
 
1316
        conflicts = revert(self, old_tree, filenames, backups, pb)
 
1317
        if not len(filenames):
 
1318
            self.set_pending_merges([])
 
1319
            resolve(self)
 
1320
        else:
 
1321
            resolve(self, filenames, ignore_misses=True)
 
1322
        return conflicts
 
1323
 
 
1324
    # XXX: This method should be deprecated in favour of taking in a proper
 
1325
    # new Inventory object.
 
1326
    @needs_write_lock
 
1327
    def set_inventory(self, new_inventory_list):
 
1328
        from bzrlib.inventory import (Inventory,
 
1329
                                      InventoryDirectory,
 
1330
                                      InventoryEntry,
 
1331
                                      InventoryFile,
 
1332
                                      InventoryLink)
 
1333
        inv = Inventory(self.get_root_id())
 
1334
        for path, file_id, parent, kind in new_inventory_list:
 
1335
            name = os.path.basename(path)
 
1336
            if name == "":
 
1337
                continue
 
1338
            # fixme, there should be a factory function inv,add_?? 
 
1339
            if kind == 'directory':
 
1340
                inv.add(InventoryDirectory(file_id, name, parent))
 
1341
            elif kind == 'file':
 
1342
                inv.add(InventoryFile(file_id, name, parent))
 
1343
            elif kind == 'symlink':
 
1344
                inv.add(InventoryLink(file_id, name, parent))
 
1345
            else:
 
1346
                raise BzrError("unknown kind %r" % kind)
 
1347
        self._write_inventory(inv)
 
1348
 
 
1349
    @needs_write_lock
 
1350
    def set_root_id(self, file_id):
 
1351
        """Set the root id for this tree."""
 
1352
        inv = self.read_working_inventory()
 
1353
        orig_root_id = inv.root.file_id
 
1354
        del inv._byid[inv.root.file_id]
 
1355
        inv.root.file_id = file_id
 
1356
        inv._byid[inv.root.file_id] = inv.root
 
1357
        for fid in inv:
 
1358
            entry = inv[fid]
 
1359
            if entry.parent_id == orig_root_id:
 
1360
                entry.parent_id = inv.root.file_id
 
1361
        self._write_inventory(inv)
 
1362
 
 
1363
    def unlock(self):
 
1364
        """See Branch.unlock.
 
1365
        
 
1366
        WorkingTree locking just uses the Branch locking facilities.
 
1367
        This is current because all working trees have an embedded branch
 
1368
        within them. IF in the future, we were to make branch data shareable
 
1369
        between multiple working trees, i.e. via shared storage, then we 
 
1370
        would probably want to lock both the local tree, and the branch.
 
1371
        """
 
1372
        # FIXME: We want to write out the hashcache only when the last lock on
 
1373
        # this working copy is released.  Peeking at the lock count is a bit
 
1374
        # of a nasty hack; probably it's better to have a transaction object,
 
1375
        # which can do some finalization when it's either successfully or
 
1376
        # unsuccessfully completed.  (Denys's original patch did that.)
 
1377
        # RBC 20060206 hooking into transaction will couple lock and transaction
 
1378
        # wrongly. Hooking into unlock on the control files object is fine though.
 
1379
        
 
1380
        # TODO: split this per format so there is no ugly if block
 
1381
        if self._hashcache.needs_write and (
 
1382
            # dedicated lock files
 
1383
            self._control_files._lock_count==1 or 
 
1384
            # shared lock files
 
1385
            (self._control_files is self.branch.control_files and 
 
1386
             self._control_files._lock_count==3)):
 
1387
            self._hashcache.write()
 
1388
        # reverse order of locking.
 
1389
        try:
 
1390
            return self._control_files.unlock()
 
1391
        finally:
 
1392
            self.branch.unlock()
 
1393
 
 
1394
    @needs_write_lock
 
1395
    def update(self):
 
1396
        """Update a working tree along its branch.
 
1397
 
 
1398
        This will update the branch if its bound too, which means we have multiple trees involved:
 
1399
        The new basis tree of the master.
 
1400
        The old basis tree of the branch.
 
1401
        The old basis tree of the working tree.
 
1402
        The current working tree state.
 
1403
        pathologically all three may be different, and non ancestors of each other.
 
1404
        Conceptually we want to:
 
1405
        Preserve the wt.basis->wt.state changes
 
1406
        Transform the wt.basis to the new master basis.
 
1407
        Apply a merge of the old branch basis to get any 'local' changes from it into the tree.
 
1408
        Restore the wt.basis->wt.state changes.
 
1409
 
 
1410
        There isn't a single operation at the moment to do that, so we:
 
1411
        Merge current state -> basis tree of the master w.r.t. the old tree basis.
 
1412
        Do a 'normal' merge of the old branch basis if it is relevant.
 
1413
        """
 
1414
        old_tip = self.branch.update()
 
1415
        if old_tip is not None:
 
1416
            self.add_pending_merge(old_tip)
 
1417
        self.branch.lock_read()
 
1418
        try:
 
1419
            result = 0
 
1420
            if self.last_revision() != self.branch.last_revision():
 
1421
                # merge tree state up to new branch tip.
 
1422
                basis = self.basis_tree()
 
1423
                to_tree = self.branch.basis_tree()
 
1424
                result += merge_inner(self.branch,
 
1425
                                      to_tree,
 
1426
                                      basis,
 
1427
                                      this_tree=self)
 
1428
                self.set_last_revision(self.branch.last_revision())
 
1429
            if old_tip and old_tip != self.last_revision():
 
1430
                # our last revision was not the prior branch last revision
 
1431
                # and we have converted that last revision to a pending merge.
 
1432
                # base is somewhere between the branch tip now
 
1433
                # and the now pending merge
 
1434
                from bzrlib.revision import common_ancestor
 
1435
                try:
 
1436
                    base_rev_id = common_ancestor(self.branch.last_revision(),
 
1437
                                                  old_tip,
 
1438
                                                  self.branch.repository)
 
1439
                except errors.NoCommonAncestor:
 
1440
                    base_rev_id = None
 
1441
                base_tree = self.branch.repository.revision_tree(base_rev_id)
 
1442
                other_tree = self.branch.repository.revision_tree(old_tip)
 
1443
                result += merge_inner(self.branch,
 
1444
                                      other_tree,
 
1445
                                      base_tree,
 
1446
                                      this_tree=self)
 
1447
            return result
 
1448
        finally:
 
1449
            self.branch.unlock()
 
1450
 
 
1451
    @needs_write_lock
 
1452
    def _write_inventory(self, inv):
 
1453
        """Write inventory as the current inventory."""
 
1454
        sio = StringIO()
 
1455
        bzrlib.xml5.serializer_v5.write_inventory(inv, sio)
 
1456
        sio.seek(0)
 
1457
        self._control_files.put('inventory', sio)
 
1458
        self._set_inventory(inv)
 
1459
        mutter('wrote working inventory')
 
1460
 
 
1461
    def set_conflicts(self, arg):
 
1462
        raise UnsupportedOperation(self.set_conflicts, self)
 
1463
 
 
1464
    def add_conflicts(self, arg):
 
1465
        raise UnsupportedOperation(self.add_conflicts, self)
 
1466
 
 
1467
    @needs_read_lock
 
1468
    def conflicts(self):
 
1469
        conflicts = ConflictList()
 
1470
        for conflicted in self._iter_conflicts():
 
1471
            text = True
 
1472
            try:
 
1473
                if file_kind(self.abspath(conflicted)) != "file":
 
1474
                    text = False
 
1475
            except errors.NoSuchFile:
 
1476
                text = False
 
1477
            if text is True:
 
1478
                for suffix in ('.THIS', '.OTHER'):
 
1479
                    try:
 
1480
                        kind = file_kind(self.abspath(conflicted+suffix))
 
1481
                        if kind != "file":
 
1482
                            text = False
 
1483
                    except errors.NoSuchFile:
 
1484
                        text = False
 
1485
                    if text == False:
 
1486
                        break
 
1487
            ctype = {True: 'text conflict', False: 'contents conflict'}[text]
 
1488
            conflicts.append(Conflict.factory(ctype, path=conflicted,
 
1489
                             file_id=self.path2id(conflicted)))
 
1490
        return conflicts
 
1491
 
 
1492
 
 
1493
class WorkingTree3(WorkingTree):
 
1494
    """This is the Format 3 working tree.
 
1495
 
 
1496
    This differs from the base WorkingTree by:
 
1497
     - having its own file lock
 
1498
     - having its own last-revision property.
 
1499
 
 
1500
    This is new in bzr 0.8
 
1501
    """
 
1502
 
 
1503
    @needs_read_lock
 
1504
    def last_revision(self):
 
1505
        """See WorkingTree.last_revision."""
 
1506
        try:
 
1507
            return self._control_files.get_utf8('last-revision').read()
 
1508
        except NoSuchFile:
 
1509
            return None
 
1510
 
 
1511
    def _change_last_revision(self, revision_id):
 
1512
        """See WorkingTree._change_last_revision."""
 
1513
        if revision_id is None or revision_id == NULL_REVISION:
 
1514
            try:
 
1515
                self._control_files._transport.delete('last-revision')
 
1516
            except errors.NoSuchFile:
 
1517
                pass
 
1518
            return False
 
1519
        else:
 
1520
            try:
 
1521
                self.branch.revision_history().index(revision_id)
 
1522
            except ValueError:
 
1523
                raise errors.NoSuchRevision(self.branch, revision_id)
 
1524
            self._control_files.put_utf8('last-revision', revision_id)
 
1525
            return True
 
1526
 
 
1527
    @needs_write_lock
 
1528
    def set_conflicts(self, conflicts):
 
1529
        self._put_rio('conflicts', conflicts.to_stanzas(), 
 
1530
                      CONFLICT_HEADER_1)
 
1531
 
 
1532
    @needs_write_lock
 
1533
    def add_conflicts(self, new_conflicts):
 
1534
        conflict_set = set(self.conflicts())
 
1535
        conflict_set.update(set(list(new_conflicts)))
 
1536
        self.set_conflicts(ConflictList(sorted(conflict_set,
 
1537
                                               key=Conflict.sort_key)))
 
1538
 
 
1539
    @needs_read_lock
 
1540
    def conflicts(self):
 
1541
        try:
 
1542
            confile = self._control_files.get('conflicts')
 
1543
        except NoSuchFile:
 
1544
            return ConflictList()
 
1545
        try:
 
1546
            if confile.next() != CONFLICT_HEADER_1 + '\n':
 
1547
                raise ConflictFormatError()
 
1548
        except StopIteration:
 
1549
            raise ConflictFormatError()
 
1550
        return ConflictList.from_stanzas(RioReader(confile))
 
1551
 
 
1552
 
 
1553
def get_conflicted_stem(path):
 
1554
    for suffix in CONFLICT_SUFFIXES:
 
1555
        if path.endswith(suffix):
 
1556
            return path[:-len(suffix)]
 
1557
 
 
1558
@deprecated_function(zero_eight)
 
1559
def is_control_file(filename):
 
1560
    """See WorkingTree.is_control_filename(filename)."""
 
1561
    ## FIXME: better check
 
1562
    filename = normpath(filename)
 
1563
    while filename != '':
 
1564
        head, tail = os.path.split(filename)
 
1565
        ## mutter('check %r for control file' % ((head, tail),))
 
1566
        if tail == '.bzr':
 
1567
            return True
 
1568
        if filename == head:
 
1569
            break
 
1570
        filename = head
 
1571
    return False
 
1572
 
 
1573
 
 
1574
class WorkingTreeFormat(object):
 
1575
    """An encapsulation of the initialization and open routines for a format.
 
1576
 
 
1577
    Formats provide three things:
 
1578
     * An initialization routine,
 
1579
     * a format string,
 
1580
     * an open routine.
 
1581
 
 
1582
    Formats are placed in an dict by their format string for reference 
 
1583
    during workingtree opening. Its not required that these be instances, they
 
1584
    can be classes themselves with class methods - it simply depends on 
 
1585
    whether state is needed for a given format or not.
 
1586
 
 
1587
    Once a format is deprecated, just deprecate the initialize and open
 
1588
    methods on the format class. Do not deprecate the object, as the 
 
1589
    object will be created every time regardless.
 
1590
    """
 
1591
 
 
1592
    _default_format = None
 
1593
    """The default format used for new trees."""
 
1594
 
 
1595
    _formats = {}
 
1596
    """The known formats."""
 
1597
 
 
1598
    @classmethod
 
1599
    def find_format(klass, a_bzrdir):
 
1600
        """Return the format for the working tree object in a_bzrdir."""
 
1601
        try:
 
1602
            transport = a_bzrdir.get_workingtree_transport(None)
 
1603
            format_string = transport.get("format").read()
 
1604
            return klass._formats[format_string]
 
1605
        except NoSuchFile:
 
1606
            raise errors.NoWorkingTree(base=transport.base)
 
1607
        except KeyError:
 
1608
            raise errors.UnknownFormatError(format=format_string)
 
1609
 
 
1610
    @classmethod
 
1611
    def get_default_format(klass):
 
1612
        """Return the current default format."""
 
1613
        return klass._default_format
 
1614
 
 
1615
    def get_format_string(self):
 
1616
        """Return the ASCII format string that identifies this format."""
 
1617
        raise NotImplementedError(self.get_format_string)
 
1618
 
 
1619
    def get_format_description(self):
 
1620
        """Return the short description for this format."""
 
1621
        raise NotImplementedError(self.get_format_description)
 
1622
 
 
1623
    def is_supported(self):
 
1624
        """Is this format supported?
 
1625
 
 
1626
        Supported formats can be initialized and opened.
 
1627
        Unsupported formats may not support initialization or committing or 
 
1628
        some other features depending on the reason for not being supported.
 
1629
        """
 
1630
        return True
 
1631
 
 
1632
    @classmethod
 
1633
    def register_format(klass, format):
 
1634
        klass._formats[format.get_format_string()] = format
 
1635
 
 
1636
    @classmethod
 
1637
    def set_default_format(klass, format):
 
1638
        klass._default_format = format
 
1639
 
 
1640
    @classmethod
 
1641
    def unregister_format(klass, format):
 
1642
        assert klass._formats[format.get_format_string()] is format
 
1643
        del klass._formats[format.get_format_string()]
 
1644
 
 
1645
 
 
1646
 
 
1647
class WorkingTreeFormat2(WorkingTreeFormat):
 
1648
    """The second working tree format. 
 
1649
 
 
1650
    This format modified the hash cache from the format 1 hash cache.
 
1651
    """
 
1652
 
 
1653
    def get_format_description(self):
 
1654
        """See WorkingTreeFormat.get_format_description()."""
 
1655
        return "Working tree format 2"
 
1656
 
 
1657
    def stub_initialize_remote(self, control_files):
 
1658
        """As a special workaround create critical control files for a remote working tree
 
1659
        
 
1660
        This ensures that it can later be updated and dealt with locally,
 
1661
        since BzrDirFormat6 and BzrDirFormat5 cannot represent dirs with 
 
1662
        no working tree.  (See bug #43064).
 
1663
        """
 
1664
        sio = StringIO()
 
1665
        inv = Inventory()
 
1666
        bzrlib.xml5.serializer_v5.write_inventory(inv, sio)
 
1667
        sio.seek(0)
 
1668
        control_files.put('inventory', sio)
 
1669
 
 
1670
        control_files.put_utf8('pending-merges', '')
 
1671
        
 
1672
 
 
1673
    def initialize(self, a_bzrdir, revision_id=None):
 
1674
        """See WorkingTreeFormat.initialize()."""
 
1675
        if not isinstance(a_bzrdir.transport, LocalTransport):
 
1676
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
 
1677
        branch = a_bzrdir.open_branch()
 
1678
        if revision_id is not None:
 
1679
            branch.lock_write()
 
1680
            try:
 
1681
                revision_history = branch.revision_history()
 
1682
                try:
 
1683
                    position = revision_history.index(revision_id)
 
1684
                except ValueError:
 
1685
                    raise errors.NoSuchRevision(branch, revision_id)
 
1686
                branch.set_revision_history(revision_history[:position + 1])
 
1687
            finally:
 
1688
                branch.unlock()
 
1689
        revision = branch.last_revision()
 
1690
        inv = Inventory() 
 
1691
        wt = WorkingTree(a_bzrdir.root_transport.local_abspath('.'),
 
1692
                         branch,
 
1693
                         inv,
 
1694
                         _internal=True,
 
1695
                         _format=self,
 
1696
                         _bzrdir=a_bzrdir)
 
1697
        wt._write_inventory(inv)
 
1698
        wt.set_root_id(inv.root.file_id)
 
1699
        wt.set_last_revision(revision)
 
1700
        wt.set_pending_merges([])
 
1701
        build_tree(wt.basis_tree(), wt)
 
1702
        return wt
 
1703
 
 
1704
    def __init__(self):
 
1705
        super(WorkingTreeFormat2, self).__init__()
 
1706
        self._matchingbzrdir = bzrdir.BzrDirFormat6()
 
1707
 
 
1708
    def open(self, a_bzrdir, _found=False):
 
1709
        """Return the WorkingTree object for a_bzrdir
 
1710
 
 
1711
        _found is a private parameter, do not use it. It is used to indicate
 
1712
               if format probing has already been done.
 
1713
        """
 
1714
        if not _found:
 
1715
            # we are being called directly and must probe.
 
1716
            raise NotImplementedError
 
1717
        if not isinstance(a_bzrdir.transport, LocalTransport):
 
1718
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
 
1719
        return WorkingTree(a_bzrdir.root_transport.local_abspath('.'),
 
1720
                           _internal=True,
 
1721
                           _format=self,
 
1722
                           _bzrdir=a_bzrdir)
 
1723
 
 
1724
 
 
1725
class WorkingTreeFormat3(WorkingTreeFormat):
 
1726
    """The second working tree format updated to record a format marker.
 
1727
 
 
1728
    This format:
 
1729
        - exists within a metadir controlling .bzr
 
1730
        - includes an explicit version marker for the workingtree control
 
1731
          files, separate from the BzrDir format
 
1732
        - modifies the hash cache format
 
1733
        - is new in bzr 0.8
 
1734
        - uses a LockDir to guard access for writes.
 
1735
    """
 
1736
 
 
1737
    def get_format_string(self):
 
1738
        """See WorkingTreeFormat.get_format_string()."""
 
1739
        return "Bazaar-NG Working Tree format 3"
 
1740
 
 
1741
    def get_format_description(self):
 
1742
        """See WorkingTreeFormat.get_format_description()."""
 
1743
        return "Working tree format 3"
 
1744
 
 
1745
    _lock_file_name = 'lock'
 
1746
    _lock_class = LockDir
 
1747
 
 
1748
    def _open_control_files(self, a_bzrdir):
 
1749
        transport = a_bzrdir.get_workingtree_transport(None)
 
1750
        return LockableFiles(transport, self._lock_file_name, 
 
1751
                             self._lock_class)
 
1752
 
 
1753
    def initialize(self, a_bzrdir, revision_id=None):
 
1754
        """See WorkingTreeFormat.initialize().
 
1755
        
 
1756
        revision_id allows creating a working tree at a different
 
1757
        revision than the branch is at.
 
1758
        """
 
1759
        if not isinstance(a_bzrdir.transport, LocalTransport):
 
1760
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
 
1761
        transport = a_bzrdir.get_workingtree_transport(self)
 
1762
        control_files = self._open_control_files(a_bzrdir)
 
1763
        control_files.create_lock()
 
1764
        control_files.lock_write()
 
1765
        control_files.put_utf8('format', self.get_format_string())
 
1766
        branch = a_bzrdir.open_branch()
 
1767
        if revision_id is None:
 
1768
            revision_id = branch.last_revision()
 
1769
        inv = Inventory() 
 
1770
        wt = WorkingTree3(a_bzrdir.root_transport.local_abspath('.'),
 
1771
                         branch,
 
1772
                         inv,
 
1773
                         _internal=True,
 
1774
                         _format=self,
 
1775
                         _bzrdir=a_bzrdir,
 
1776
                         _control_files=control_files)
 
1777
        wt.lock_write()
 
1778
        try:
 
1779
            wt._write_inventory(inv)
 
1780
            wt.set_root_id(inv.root.file_id)
 
1781
            wt.set_last_revision(revision_id)
 
1782
            wt.set_pending_merges([])
 
1783
            build_tree(wt.basis_tree(), wt)
 
1784
        finally:
 
1785
            wt.unlock()
 
1786
            control_files.unlock()
 
1787
        return wt
 
1788
 
 
1789
    def __init__(self):
 
1790
        super(WorkingTreeFormat3, self).__init__()
 
1791
        self._matchingbzrdir = bzrdir.BzrDirMetaFormat1()
 
1792
 
 
1793
    def open(self, a_bzrdir, _found=False):
 
1794
        """Return the WorkingTree object for a_bzrdir
 
1795
 
 
1796
        _found is a private parameter, do not use it. It is used to indicate
 
1797
               if format probing has already been done.
 
1798
        """
 
1799
        if not _found:
 
1800
            # we are being called directly and must probe.
 
1801
            raise NotImplementedError
 
1802
        if not isinstance(a_bzrdir.transport, LocalTransport):
 
1803
            raise errors.NotLocalUrl(a_bzrdir.transport.base)
 
1804
        return self._open(a_bzrdir, self._open_control_files(a_bzrdir))
 
1805
 
 
1806
    def _open(self, a_bzrdir, control_files):
 
1807
        """Open the tree itself.
 
1808
        
 
1809
        :param a_bzrdir: the dir for the tree.
 
1810
        :param control_files: the control files for the tree.
 
1811
        """
 
1812
        return WorkingTree3(a_bzrdir.root_transport.local_abspath('.'),
 
1813
                           _internal=True,
 
1814
                           _format=self,
 
1815
                           _bzrdir=a_bzrdir,
 
1816
                           _control_files=control_files)
 
1817
 
 
1818
    def __str__(self):
 
1819
        return self.get_format_string()
 
1820
 
 
1821
 
 
1822
# formats which have no format string are not discoverable
 
1823
# and not independently creatable, so are not registered.
 
1824
__default_format = WorkingTreeFormat3()
 
1825
WorkingTreeFormat.register_format(__default_format)
 
1826
WorkingTreeFormat.set_default_format(__default_format)
 
1827
_legacy_formats = [WorkingTreeFormat2(),
 
1828
                   ]
 
1829
 
 
1830
 
 
1831
class WorkingTreeTestProviderAdapter(object):
 
1832
    """A tool to generate a suite testing multiple workingtree formats at once.
 
1833
 
 
1834
    This is done by copying the test once for each transport and injecting
 
1835
    the transport_server, transport_readonly_server, and workingtree_format
 
1836
    classes into each copy. Each copy is also given a new id() to make it
 
1837
    easy to identify.
 
1838
    """
 
1839
 
 
1840
    def __init__(self, transport_server, transport_readonly_server, formats):
 
1841
        self._transport_server = transport_server
 
1842
        self._transport_readonly_server = transport_readonly_server
 
1843
        self._formats = formats
 
1844
    
 
1845
    def adapt(self, test):
 
1846
        from bzrlib.tests import TestSuite
 
1847
        result = TestSuite()
 
1848
        for workingtree_format, bzrdir_format in self._formats:
 
1849
            new_test = deepcopy(test)
 
1850
            new_test.transport_server = self._transport_server
 
1851
            new_test.transport_readonly_server = self._transport_readonly_server
 
1852
            new_test.bzrdir_format = bzrdir_format
 
1853
            new_test.workingtree_format = workingtree_format
 
1854
            def make_new_test_id():
 
1855
                new_id = "%s(%s)" % (new_test.id(), workingtree_format.__class__.__name__)
 
1856
                return lambda: new_id
 
1857
            new_test.id = make_new_test_id()
 
1858
            result.addTest(new_test)
 
1859
        return result