/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/tests/__init__.py

  • Committer: Martin Pool
  • Date: 2007-08-21 03:40:50 UTC
  • mfrom: (2736 +trunk)
  • mto: This revision was merged to the branch mainline in revision 2737.
  • Revision ID: mbp@sourcefrog.net-20070821034050-gcppw53kbcm2gwgd
merge trunk

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005, 2006, 2007 Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
 
 
18
# TODO: Perhaps there should be an API to find out if bzr running under the
 
19
# test suite -- some plugins might want to avoid making intrusive changes if
 
20
# this is the case.  However, we want behaviour under to test to diverge as
 
21
# little as possible, so this should be used rarely if it's added at all.
 
22
# (Suggestion from j-a-meinel, 2005-11-24)
 
23
 
 
24
# NOTE: Some classes in here use camelCaseNaming() rather than
 
25
# underscore_naming().  That's for consistency with unittest; it's not the
 
26
# general style of bzrlib.  Please continue that consistency when adding e.g.
 
27
# new assertFoo() methods.
 
28
 
 
29
import atexit
 
30
import codecs
 
31
from cStringIO import StringIO
 
32
import difflib
 
33
import doctest
 
34
import errno
 
35
import logging
 
36
import os
 
37
from pprint import pformat
 
38
import random
 
39
import re
 
40
import shlex
 
41
import stat
 
42
from subprocess import Popen, PIPE
 
43
import sys
 
44
import tempfile
 
45
import unittest
 
46
import time
 
47
import warnings
 
48
 
 
49
 
 
50
from bzrlib import (
 
51
    bzrdir,
 
52
    debug,
 
53
    errors,
 
54
    memorytree,
 
55
    osutils,
 
56
    progress,
 
57
    ui,
 
58
    urlutils,
 
59
    workingtree,
 
60
    )
 
61
import bzrlib.branch
 
62
import bzrlib.commands
 
63
import bzrlib.timestamp
 
64
import bzrlib.export
 
65
import bzrlib.inventory
 
66
import bzrlib.iterablefile
 
67
import bzrlib.lockdir
 
68
try:
 
69
    import bzrlib.lsprof
 
70
except ImportError:
 
71
    # lsprof not available
 
72
    pass
 
73
from bzrlib.merge import merge_inner
 
74
import bzrlib.merge3
 
75
import bzrlib.osutils
 
76
import bzrlib.plugin
 
77
from bzrlib.revision import common_ancestor
 
78
import bzrlib.store
 
79
from bzrlib import symbol_versioning
 
80
from bzrlib.symbol_versioning import (
 
81
    deprecated_method,
 
82
    zero_eighteen,
 
83
    zero_ninetyone,
 
84
    )
 
85
import bzrlib.trace
 
86
from bzrlib.transport import get_transport
 
87
import bzrlib.transport
 
88
from bzrlib.transport.local import LocalURLServer
 
89
from bzrlib.transport.memory import MemoryServer
 
90
from bzrlib.transport.readonly import ReadonlyServer
 
91
from bzrlib.trace import mutter, note
 
92
from bzrlib.tests import TestUtil
 
93
from bzrlib.tests.HttpServer import HttpServer
 
94
from bzrlib.tests.TestUtil import (
 
95
                          TestSuite,
 
96
                          TestLoader,
 
97
                          )
 
98
from bzrlib.tests.treeshape import build_tree_contents
 
99
from bzrlib.workingtree import WorkingTree, WorkingTreeFormat2
 
100
 
 
101
# Mark this python module as being part of the implementation
 
102
# of unittest: this gives us better tracebacks where the last
 
103
# shown frame is the test code, not our assertXYZ.
 
104
__unittest = 1
 
105
 
 
106
default_transport = LocalURLServer
 
107
 
 
108
MODULES_TO_TEST = []
 
109
MODULES_TO_DOCTEST = [
 
110
                      bzrlib.timestamp,
 
111
                      bzrlib.errors,
 
112
                      bzrlib.export,
 
113
                      bzrlib.inventory,
 
114
                      bzrlib.iterablefile,
 
115
                      bzrlib.lockdir,
 
116
                      bzrlib.merge3,
 
117
                      bzrlib.option,
 
118
                      bzrlib.store,
 
119
                      ]
 
120
 
 
121
 
 
122
def packages_to_test():
 
123
    """Return a list of packages to test.
 
124
 
 
125
    The packages are not globally imported so that import failures are
 
126
    triggered when running selftest, not when importing the command.
 
127
    """
 
128
    import bzrlib.doc
 
129
    import bzrlib.tests.blackbox
 
130
    import bzrlib.tests.branch_implementations
 
131
    import bzrlib.tests.bzrdir_implementations
 
132
    import bzrlib.tests.commands
 
133
    import bzrlib.tests.interrepository_implementations
 
134
    import bzrlib.tests.interversionedfile_implementations
 
135
    import bzrlib.tests.intertree_implementations
 
136
    import bzrlib.tests.per_lock
 
137
    import bzrlib.tests.repository_implementations
 
138
    import bzrlib.tests.revisionstore_implementations
 
139
    import bzrlib.tests.tree_implementations
 
140
    import bzrlib.tests.workingtree_implementations
 
141
    return [
 
142
            bzrlib.doc,
 
143
            bzrlib.tests.blackbox,
 
144
            bzrlib.tests.branch_implementations,
 
145
            bzrlib.tests.bzrdir_implementations,
 
146
            bzrlib.tests.commands,
 
147
            bzrlib.tests.interrepository_implementations,
 
148
            bzrlib.tests.interversionedfile_implementations,
 
149
            bzrlib.tests.intertree_implementations,
 
150
            bzrlib.tests.per_lock,
 
151
            bzrlib.tests.repository_implementations,
 
152
            bzrlib.tests.revisionstore_implementations,
 
153
            bzrlib.tests.tree_implementations,
 
154
            bzrlib.tests.workingtree_implementations,
 
155
            ]
 
156
 
 
157
 
 
158
class ExtendedTestResult(unittest._TextTestResult):
 
159
    """Accepts, reports and accumulates the results of running tests.
 
160
 
 
161
    Compared to this unittest version this class adds support for profiling,
 
162
    benchmarking, stopping as soon as a test fails,  and skipping tests.
 
163
    There are further-specialized subclasses for different types of display.
 
164
    """
 
165
 
 
166
    stop_early = False
 
167
    
 
168
    def __init__(self, stream, descriptions, verbosity,
 
169
                 bench_history=None,
 
170
                 num_tests=None,
 
171
                 ):
 
172
        """Construct new TestResult.
 
173
 
 
174
        :param bench_history: Optionally, a writable file object to accumulate
 
175
            benchmark results.
 
176
        """
 
177
        unittest._TextTestResult.__init__(self, stream, descriptions, verbosity)
 
178
        if bench_history is not None:
 
179
            from bzrlib.version import _get_bzr_source_tree
 
180
            src_tree = _get_bzr_source_tree()
 
181
            if src_tree:
 
182
                try:
 
183
                    revision_id = src_tree.get_parent_ids()[0]
 
184
                except IndexError:
 
185
                    # XXX: if this is a brand new tree, do the same as if there
 
186
                    # is no branch.
 
187
                    revision_id = ''
 
188
            else:
 
189
                # XXX: If there's no branch, what should we do?
 
190
                revision_id = ''
 
191
            bench_history.write("--date %s %s\n" % (time.time(), revision_id))
 
192
        self._bench_history = bench_history
 
193
        self.ui = ui.ui_factory
 
194
        self.num_tests = num_tests
 
195
        self.error_count = 0
 
196
        self.failure_count = 0
 
197
        self.known_failure_count = 0
 
198
        self.skip_count = 0
 
199
        self.unsupported = {}
 
200
        self.count = 0
 
201
        self._overall_start_time = time.time()
 
202
    
 
203
    def extractBenchmarkTime(self, testCase):
 
204
        """Add a benchmark time for the current test case."""
 
205
        self._benchmarkTime = getattr(testCase, "_benchtime", None)
 
206
    
 
207
    def _elapsedTestTimeString(self):
 
208
        """Return a time string for the overall time the current test has taken."""
 
209
        return self._formatTime(time.time() - self._start_time)
 
210
 
 
211
    def _testTimeString(self):
 
212
        if self._benchmarkTime is not None:
 
213
            return "%s/%s" % (
 
214
                self._formatTime(self._benchmarkTime),
 
215
                self._elapsedTestTimeString())
 
216
        else:
 
217
            return "           %s" % self._elapsedTestTimeString()
 
218
 
 
219
    def _formatTime(self, seconds):
 
220
        """Format seconds as milliseconds with leading spaces."""
 
221
        # some benchmarks can take thousands of seconds to run, so we need 8
 
222
        # places
 
223
        return "%8dms" % (1000 * seconds)
 
224
 
 
225
    def _shortened_test_description(self, test):
 
226
        what = test.id()
 
227
        what = re.sub(r'^bzrlib\.(tests|benchmarks)\.', '', what)
 
228
        return what
 
229
 
 
230
    def startTest(self, test):
 
231
        unittest.TestResult.startTest(self, test)
 
232
        self.report_test_start(test)
 
233
        test.number = self.count
 
234
        self._recordTestStartTime()
 
235
 
 
236
    def _recordTestStartTime(self):
 
237
        """Record that a test has started."""
 
238
        self._start_time = time.time()
 
239
 
 
240
    def _cleanupLogFile(self, test):
 
241
        # We can only do this if we have one of our TestCases, not if
 
242
        # we have a doctest.
 
243
        setKeepLogfile = getattr(test, 'setKeepLogfile', None)
 
244
        if setKeepLogfile is not None:
 
245
            setKeepLogfile()
 
246
 
 
247
    def addError(self, test, err):
 
248
        self.extractBenchmarkTime(test)
 
249
        self._cleanupLogFile(test)
 
250
        if isinstance(err[1], TestSkipped):
 
251
            return self.addSkipped(test, err)
 
252
        elif isinstance(err[1], UnavailableFeature):
 
253
            return self.addNotSupported(test, err[1].args[0])
 
254
        unittest.TestResult.addError(self, test, err)
 
255
        self.error_count += 1
 
256
        self.report_error(test, err)
 
257
        if self.stop_early:
 
258
            self.stop()
 
259
 
 
260
    def addFailure(self, test, err):
 
261
        self._cleanupLogFile(test)
 
262
        self.extractBenchmarkTime(test)
 
263
        if isinstance(err[1], KnownFailure):
 
264
            return self.addKnownFailure(test, err)
 
265
        unittest.TestResult.addFailure(self, test, err)
 
266
        self.failure_count += 1
 
267
        self.report_failure(test, err)
 
268
        if self.stop_early:
 
269
            self.stop()
 
270
 
 
271
    def addKnownFailure(self, test, err):
 
272
        self.known_failure_count += 1
 
273
        self.report_known_failure(test, err)
 
274
 
 
275
    def addNotSupported(self, test, feature):
 
276
        self.unsupported.setdefault(str(feature), 0)
 
277
        self.unsupported[str(feature)] += 1
 
278
        self.report_unsupported(test, feature)
 
279
 
 
280
    def addSuccess(self, test):
 
281
        self.extractBenchmarkTime(test)
 
282
        if self._bench_history is not None:
 
283
            if self._benchmarkTime is not None:
 
284
                self._bench_history.write("%s %s\n" % (
 
285
                    self._formatTime(self._benchmarkTime),
 
286
                    test.id()))
 
287
        self.report_success(test)
 
288
        unittest.TestResult.addSuccess(self, test)
 
289
 
 
290
    def addSkipped(self, test, skip_excinfo):
 
291
        self.report_skip(test, skip_excinfo)
 
292
        # seems best to treat this as success from point-of-view of unittest
 
293
        # -- it actually does nothing so it barely matters :)
 
294
        try:
 
295
            test.tearDown()
 
296
        except KeyboardInterrupt:
 
297
            raise
 
298
        except:
 
299
            self.addError(test, test.__exc_info())
 
300
        else:
 
301
            unittest.TestResult.addSuccess(self, test)
 
302
 
 
303
    def printErrorList(self, flavour, errors):
 
304
        for test, err in errors:
 
305
            self.stream.writeln(self.separator1)
 
306
            self.stream.write("%s: " % flavour)
 
307
            self.stream.writeln(self.getDescription(test))
 
308
            if getattr(test, '_get_log', None) is not None:
 
309
                print >>self.stream
 
310
                print >>self.stream, \
 
311
                        ('vvvv[log from %s]' % test.id()).ljust(78,'-')
 
312
                print >>self.stream, test._get_log()
 
313
                print >>self.stream, \
 
314
                        ('^^^^[log from %s]' % test.id()).ljust(78,'-')
 
315
            self.stream.writeln(self.separator2)
 
316
            self.stream.writeln("%s" % err)
 
317
 
 
318
    def finished(self):
 
319
        pass
 
320
 
 
321
    def report_cleaning_up(self):
 
322
        pass
 
323
 
 
324
    def report_success(self, test):
 
325
        pass
 
326
 
 
327
    def wasStrictlySuccessful(self):
 
328
        if self.unsupported or self.known_failure_count:
 
329
            return False
 
330
 
 
331
        return self.wasSuccessful()
 
332
 
 
333
 
 
334
 
 
335
class TextTestResult(ExtendedTestResult):
 
336
    """Displays progress and results of tests in text form"""
 
337
 
 
338
    def __init__(self, stream, descriptions, verbosity,
 
339
                 bench_history=None,
 
340
                 num_tests=None,
 
341
                 pb=None,
 
342
                 ):
 
343
        ExtendedTestResult.__init__(self, stream, descriptions, verbosity,
 
344
            bench_history, num_tests)
 
345
        if pb is None:
 
346
            self.pb = self.ui.nested_progress_bar()
 
347
            self._supplied_pb = False
 
348
        else:
 
349
            self.pb = pb
 
350
            self._supplied_pb = True
 
351
        self.pb.show_pct = False
 
352
        self.pb.show_spinner = False
 
353
        self.pb.show_eta = False,
 
354
        self.pb.show_count = False
 
355
        self.pb.show_bar = False
 
356
 
 
357
    def report_starting(self):
 
358
        self.pb.update('[test 0/%d] starting...' % (self.num_tests))
 
359
 
 
360
    def _progress_prefix_text(self):
 
361
        a = '[%d' % self.count
 
362
        if self.num_tests is not None:
 
363
            a +='/%d' % self.num_tests
 
364
        a += ' in %ds' % (time.time() - self._overall_start_time)
 
365
        if self.error_count:
 
366
            a += ', %d errors' % self.error_count
 
367
        if self.failure_count:
 
368
            a += ', %d failed' % self.failure_count
 
369
        if self.known_failure_count:
 
370
            a += ', %d known failures' % self.known_failure_count
 
371
        if self.skip_count:
 
372
            a += ', %d skipped' % self.skip_count
 
373
        if self.unsupported:
 
374
            a += ', %d missing features' % len(self.unsupported)
 
375
        a += ']'
 
376
        return a
 
377
 
 
378
    def report_test_start(self, test):
 
379
        self.count += 1
 
380
        self.pb.update(
 
381
                self._progress_prefix_text()
 
382
                + ' ' 
 
383
                + self._shortened_test_description(test))
 
384
 
 
385
    def _test_description(self, test):
 
386
        return self._shortened_test_description(test)
 
387
 
 
388
    def report_error(self, test, err):
 
389
        self.pb.note('ERROR: %s\n    %s\n', 
 
390
            self._test_description(test),
 
391
            err[1],
 
392
            )
 
393
 
 
394
    def report_failure(self, test, err):
 
395
        self.pb.note('FAIL: %s\n    %s\n', 
 
396
            self._test_description(test),
 
397
            err[1],
 
398
            )
 
399
 
 
400
    def report_known_failure(self, test, err):
 
401
        self.pb.note('XFAIL: %s\n%s\n',
 
402
            self._test_description(test), err[1])
 
403
 
 
404
    def report_skip(self, test, skip_excinfo):
 
405
        self.skip_count += 1
 
406
        if False:
 
407
            # at the moment these are mostly not things we can fix
 
408
            # and so they just produce stipple; use the verbose reporter
 
409
            # to see them.
 
410
            if False:
 
411
                # show test and reason for skip
 
412
                self.pb.note('SKIP: %s\n    %s\n', 
 
413
                    self._shortened_test_description(test),
 
414
                    skip_excinfo[1])
 
415
            else:
 
416
                # since the class name was left behind in the still-visible
 
417
                # progress bar...
 
418
                self.pb.note('SKIP: %s', skip_excinfo[1])
 
419
 
 
420
    def report_unsupported(self, test, feature):
 
421
        """test cannot be run because feature is missing."""
 
422
                  
 
423
    def report_cleaning_up(self):
 
424
        self.pb.update('cleaning up...')
 
425
 
 
426
    def finished(self):
 
427
        if not self._supplied_pb:
 
428
            self.pb.finished()
 
429
 
 
430
 
 
431
class VerboseTestResult(ExtendedTestResult):
 
432
    """Produce long output, with one line per test run plus times"""
 
433
 
 
434
    def _ellipsize_to_right(self, a_string, final_width):
 
435
        """Truncate and pad a string, keeping the right hand side"""
 
436
        if len(a_string) > final_width:
 
437
            result = '...' + a_string[3-final_width:]
 
438
        else:
 
439
            result = a_string
 
440
        return result.ljust(final_width)
 
441
 
 
442
    def report_starting(self):
 
443
        self.stream.write('running %d tests...\n' % self.num_tests)
 
444
 
 
445
    def report_test_start(self, test):
 
446
        self.count += 1
 
447
        name = self._shortened_test_description(test)
 
448
        # width needs space for 6 char status, plus 1 for slash, plus 2 10-char
 
449
        # numbers, plus a trailing blank
 
450
        # when NUMBERED_DIRS: plus 5 chars on test number, plus 1 char on space
 
451
        self.stream.write(self._ellipsize_to_right(name,
 
452
                          osutils.terminal_width()-30))
 
453
        self.stream.flush()
 
454
 
 
455
    def _error_summary(self, err):
 
456
        indent = ' ' * 4
 
457
        return '%s%s' % (indent, err[1])
 
458
 
 
459
    def report_error(self, test, err):
 
460
        self.stream.writeln('ERROR %s\n%s'
 
461
                % (self._testTimeString(),
 
462
                   self._error_summary(err)))
 
463
 
 
464
    def report_failure(self, test, err):
 
465
        self.stream.writeln(' FAIL %s\n%s'
 
466
                % (self._testTimeString(),
 
467
                   self._error_summary(err)))
 
468
 
 
469
    def report_known_failure(self, test, err):
 
470
        self.stream.writeln('XFAIL %s\n%s'
 
471
                % (self._testTimeString(),
 
472
                   self._error_summary(err)))
 
473
 
 
474
    def report_success(self, test):
 
475
        self.stream.writeln('   OK %s' % self._testTimeString())
 
476
        for bench_called, stats in getattr(test, '_benchcalls', []):
 
477
            self.stream.writeln('LSProf output for %s(%s, %s)' % bench_called)
 
478
            stats.pprint(file=self.stream)
 
479
        # flush the stream so that we get smooth output. This verbose mode is
 
480
        # used to show the output in PQM.
 
481
        self.stream.flush()
 
482
 
 
483
    def report_skip(self, test, skip_excinfo):
 
484
        self.skip_count += 1
 
485
        self.stream.writeln(' SKIP %s\n%s'
 
486
                % (self._testTimeString(),
 
487
                   self._error_summary(skip_excinfo)))
 
488
 
 
489
    def report_unsupported(self, test, feature):
 
490
        """test cannot be run because feature is missing."""
 
491
        self.stream.writeln("NODEP %s\n    The feature '%s' is not available."
 
492
                %(self._testTimeString(), feature))
 
493
                  
 
494
 
 
495
 
 
496
class TextTestRunner(object):
 
497
    stop_on_failure = False
 
498
 
 
499
    def __init__(self,
 
500
                 stream=sys.stderr,
 
501
                 descriptions=0,
 
502
                 verbosity=1,
 
503
                 bench_history=None,
 
504
                 list_only=False
 
505
                 ):
 
506
        self.stream = unittest._WritelnDecorator(stream)
 
507
        self.descriptions = descriptions
 
508
        self.verbosity = verbosity
 
509
        self._bench_history = bench_history
 
510
        self.list_only = list_only
 
511
 
 
512
    def run(self, test):
 
513
        "Run the given test case or test suite."
 
514
        startTime = time.time()
 
515
        if self.verbosity == 1:
 
516
            result_class = TextTestResult
 
517
        elif self.verbosity >= 2:
 
518
            result_class = VerboseTestResult
 
519
        result = result_class(self.stream,
 
520
                              self.descriptions,
 
521
                              self.verbosity,
 
522
                              bench_history=self._bench_history,
 
523
                              num_tests=test.countTestCases(),
 
524
                              )
 
525
        result.stop_early = self.stop_on_failure
 
526
        result.report_starting()
 
527
        if self.list_only:
 
528
            if self.verbosity >= 2:
 
529
                self.stream.writeln("Listing tests only ...\n")
 
530
            run = 0
 
531
            for t in iter_suite_tests(test):
 
532
                self.stream.writeln("%s" % (t.id()))
 
533
                run += 1
 
534
            actionTaken = "Listed"
 
535
        else: 
 
536
            test.run(result)
 
537
            run = result.testsRun
 
538
            actionTaken = "Ran"
 
539
        stopTime = time.time()
 
540
        timeTaken = stopTime - startTime
 
541
        result.printErrors()
 
542
        self.stream.writeln(result.separator2)
 
543
        self.stream.writeln("%s %d test%s in %.3fs" % (actionTaken,
 
544
                            run, run != 1 and "s" or "", timeTaken))
 
545
        self.stream.writeln()
 
546
        if not result.wasSuccessful():
 
547
            self.stream.write("FAILED (")
 
548
            failed, errored = map(len, (result.failures, result.errors))
 
549
            if failed:
 
550
                self.stream.write("failures=%d" % failed)
 
551
            if errored:
 
552
                if failed: self.stream.write(", ")
 
553
                self.stream.write("errors=%d" % errored)
 
554
            if result.known_failure_count:
 
555
                if failed or errored: self.stream.write(", ")
 
556
                self.stream.write("known_failure_count=%d" %
 
557
                    result.known_failure_count)
 
558
            self.stream.writeln(")")
 
559
        else:
 
560
            if result.known_failure_count:
 
561
                self.stream.writeln("OK (known_failures=%d)" %
 
562
                    result.known_failure_count)
 
563
            else:
 
564
                self.stream.writeln("OK")
 
565
        if result.skip_count > 0:
 
566
            skipped = result.skip_count
 
567
            self.stream.writeln('%d test%s skipped' %
 
568
                                (skipped, skipped != 1 and "s" or ""))
 
569
        if result.unsupported:
 
570
            for feature, count in sorted(result.unsupported.items()):
 
571
                self.stream.writeln("Missing feature '%s' skipped %d tests." %
 
572
                    (feature, count))
 
573
        result.finished()
 
574
        return result
 
575
 
 
576
 
 
577
def iter_suite_tests(suite):
 
578
    """Return all tests in a suite, recursing through nested suites"""
 
579
    for item in suite._tests:
 
580
        if isinstance(item, unittest.TestCase):
 
581
            yield item
 
582
        elif isinstance(item, unittest.TestSuite):
 
583
            for r in iter_suite_tests(item):
 
584
                yield r
 
585
        else:
 
586
            raise Exception('unknown object %r inside test suite %r'
 
587
                            % (item, suite))
 
588
 
 
589
 
 
590
class TestSkipped(Exception):
 
591
    """Indicates that a test was intentionally skipped, rather than failing."""
 
592
 
 
593
 
 
594
class KnownFailure(AssertionError):
 
595
    """Indicates that a test failed in a precisely expected manner.
 
596
 
 
597
    Such failures dont block the whole test suite from passing because they are
 
598
    indicators of partially completed code or of future work. We have an
 
599
    explicit error for them so that we can ensure that they are always visible:
 
600
    KnownFailures are always shown in the output of bzr selftest.
 
601
    """
 
602
 
 
603
 
 
604
class UnavailableFeature(Exception):
 
605
    """A feature required for this test was not available.
 
606
 
 
607
    The feature should be used to construct the exception.
 
608
    """
 
609
 
 
610
 
 
611
class CommandFailed(Exception):
 
612
    pass
 
613
 
 
614
 
 
615
class StringIOWrapper(object):
 
616
    """A wrapper around cStringIO which just adds an encoding attribute.
 
617
    
 
618
    Internally we can check sys.stdout to see what the output encoding
 
619
    should be. However, cStringIO has no encoding attribute that we can
 
620
    set. So we wrap it instead.
 
621
    """
 
622
    encoding='ascii'
 
623
    _cstring = None
 
624
 
 
625
    def __init__(self, s=None):
 
626
        if s is not None:
 
627
            self.__dict__['_cstring'] = StringIO(s)
 
628
        else:
 
629
            self.__dict__['_cstring'] = StringIO()
 
630
 
 
631
    def __getattr__(self, name, getattr=getattr):
 
632
        return getattr(self.__dict__['_cstring'], name)
 
633
 
 
634
    def __setattr__(self, name, val):
 
635
        if name == 'encoding':
 
636
            self.__dict__['encoding'] = val
 
637
        else:
 
638
            return setattr(self._cstring, name, val)
 
639
 
 
640
 
 
641
class TestUIFactory(ui.CLIUIFactory):
 
642
    """A UI Factory for testing.
 
643
 
 
644
    Hide the progress bar but emit note()s.
 
645
    Redirect stdin.
 
646
    Allows get_password to be tested without real tty attached.
 
647
    """
 
648
 
 
649
    def __init__(self,
 
650
                 stdout=None,
 
651
                 stderr=None,
 
652
                 stdin=None):
 
653
        super(TestUIFactory, self).__init__()
 
654
        if stdin is not None:
 
655
            # We use a StringIOWrapper to be able to test various
 
656
            # encodings, but the user is still responsible to
 
657
            # encode the string and to set the encoding attribute
 
658
            # of StringIOWrapper.
 
659
            self.stdin = StringIOWrapper(stdin)
 
660
        if stdout is None:
 
661
            self.stdout = sys.stdout
 
662
        else:
 
663
            self.stdout = stdout
 
664
        if stderr is None:
 
665
            self.stderr = sys.stderr
 
666
        else:
 
667
            self.stderr = stderr
 
668
 
 
669
    def clear(self):
 
670
        """See progress.ProgressBar.clear()."""
 
671
 
 
672
    def clear_term(self):
 
673
        """See progress.ProgressBar.clear_term()."""
 
674
 
 
675
    def clear_term(self):
 
676
        """See progress.ProgressBar.clear_term()."""
 
677
 
 
678
    def finished(self):
 
679
        """See progress.ProgressBar.finished()."""
 
680
 
 
681
    def note(self, fmt_string, *args, **kwargs):
 
682
        """See progress.ProgressBar.note()."""
 
683
        self.stdout.write((fmt_string + "\n") % args)
 
684
 
 
685
    def progress_bar(self):
 
686
        return self
 
687
 
 
688
    def nested_progress_bar(self):
 
689
        return self
 
690
 
 
691
    def update(self, message, count=None, total=None):
 
692
        """See progress.ProgressBar.update()."""
 
693
 
 
694
    def get_non_echoed_password(self, prompt):
 
695
        """Get password from stdin without trying to handle the echo mode"""
 
696
        if prompt:
 
697
            self.stdout.write(prompt.encode(self.stdout.encoding, 'replace'))
 
698
        password = self.stdin.readline()
 
699
        if not password:
 
700
            raise EOFError
 
701
        if password[-1] == '\n':
 
702
            password = password[:-1]
 
703
        return password
 
704
 
 
705
 
 
706
class TestCase(unittest.TestCase):
 
707
    """Base class for bzr unit tests.
 
708
    
 
709
    Tests that need access to disk resources should subclass 
 
710
    TestCaseInTempDir not TestCase.
 
711
 
 
712
    Error and debug log messages are redirected from their usual
 
713
    location into a temporary file, the contents of which can be
 
714
    retrieved by _get_log().  We use a real OS file, not an in-memory object,
 
715
    so that it can also capture file IO.  When the test completes this file
 
716
    is read into memory and removed from disk.
 
717
       
 
718
    There are also convenience functions to invoke bzr's command-line
 
719
    routine, and to build and check bzr trees.
 
720
   
 
721
    In addition to the usual method of overriding tearDown(), this class also
 
722
    allows subclasses to register functions into the _cleanups list, which is
 
723
    run in order as the object is torn down.  It's less likely this will be
 
724
    accidentally overlooked.
 
725
    """
 
726
 
 
727
    _log_file_name = None
 
728
    _log_contents = ''
 
729
    _keep_log_file = False
 
730
    # record lsprof data when performing benchmark calls.
 
731
    _gather_lsprof_in_benchmarks = False
 
732
 
 
733
    def __init__(self, methodName='testMethod'):
 
734
        super(TestCase, self).__init__(methodName)
 
735
        self._cleanups = []
 
736
 
 
737
    def setUp(self):
 
738
        unittest.TestCase.setUp(self)
 
739
        self._cleanEnvironment()
 
740
        bzrlib.trace.disable_default_logging()
 
741
        self._silenceUI()
 
742
        self._startLogFile()
 
743
        self._benchcalls = []
 
744
        self._benchtime = None
 
745
        self._clear_hooks()
 
746
        self._clear_debug_flags()
 
747
 
 
748
    def _clear_debug_flags(self):
 
749
        """Prevent externally set debug flags affecting tests.
 
750
        
 
751
        Tests that want to use debug flags can just set them in the
 
752
        debug_flags set during setup/teardown.
 
753
        """
 
754
        self._preserved_debug_flags = set(debug.debug_flags)
 
755
        debug.debug_flags.clear()
 
756
        self.addCleanup(self._restore_debug_flags)
 
757
 
 
758
    def _clear_hooks(self):
 
759
        # prevent hooks affecting tests
 
760
        import bzrlib.branch
 
761
        import bzrlib.smart.server
 
762
        self._preserved_hooks = {
 
763
            bzrlib.branch.Branch: bzrlib.branch.Branch.hooks,
 
764
            bzrlib.smart.server.SmartTCPServer: bzrlib.smart.server.SmartTCPServer.hooks,
 
765
            }
 
766
        self.addCleanup(self._restoreHooks)
 
767
        # reset all hooks to an empty instance of the appropriate type
 
768
        bzrlib.branch.Branch.hooks = bzrlib.branch.BranchHooks()
 
769
        bzrlib.smart.server.SmartTCPServer.hooks = bzrlib.smart.server.SmartServerHooks()
 
770
 
 
771
    def _silenceUI(self):
 
772
        """Turn off UI for duration of test"""
 
773
        # by default the UI is off; tests can turn it on if they want it.
 
774
        saved = ui.ui_factory
 
775
        def _restore():
 
776
            ui.ui_factory = saved
 
777
        ui.ui_factory = ui.SilentUIFactory()
 
778
        self.addCleanup(_restore)
 
779
 
 
780
    def _ndiff_strings(self, a, b):
 
781
        """Return ndiff between two strings containing lines.
 
782
        
 
783
        A trailing newline is added if missing to make the strings
 
784
        print properly."""
 
785
        if b and b[-1] != '\n':
 
786
            b += '\n'
 
787
        if a and a[-1] != '\n':
 
788
            a += '\n'
 
789
        difflines = difflib.ndiff(a.splitlines(True),
 
790
                                  b.splitlines(True),
 
791
                                  linejunk=lambda x: False,
 
792
                                  charjunk=lambda x: False)
 
793
        return ''.join(difflines)
 
794
 
 
795
    def assertEqual(self, a, b, message=''):
 
796
        try:
 
797
            if a == b:
 
798
                return
 
799
        except UnicodeError, e:
 
800
            # If we can't compare without getting a UnicodeError, then
 
801
            # obviously they are different
 
802
            mutter('UnicodeError: %s', e)
 
803
        if message:
 
804
            message += '\n'
 
805
        raise AssertionError("%snot equal:\na = %s\nb = %s\n"
 
806
            % (message,
 
807
               pformat(a), pformat(b)))
 
808
 
 
809
    assertEquals = assertEqual
 
810
 
 
811
    def assertEqualDiff(self, a, b, message=None):
 
812
        """Assert two texts are equal, if not raise an exception.
 
813
        
 
814
        This is intended for use with multi-line strings where it can 
 
815
        be hard to find the differences by eye.
 
816
        """
 
817
        # TODO: perhaps override assertEquals to call this for strings?
 
818
        if a == b:
 
819
            return
 
820
        if message is None:
 
821
            message = "texts not equal:\n"
 
822
        raise AssertionError(message +
 
823
                             self._ndiff_strings(a, b))
 
824
        
 
825
    def assertEqualMode(self, mode, mode_test):
 
826
        self.assertEqual(mode, mode_test,
 
827
                         'mode mismatch %o != %o' % (mode, mode_test))
 
828
 
 
829
    def assertPositive(self, val):
 
830
        """Assert that val is greater than 0."""
 
831
        self.assertTrue(val > 0, 'expected a positive value, but got %s' % val)
 
832
 
 
833
    def assertNegative(self, val):
 
834
        """Assert that val is less than 0."""
 
835
        self.assertTrue(val < 0, 'expected a negative value, but got %s' % val)
 
836
 
 
837
    def assertStartsWith(self, s, prefix):
 
838
        if not s.startswith(prefix):
 
839
            raise AssertionError('string %r does not start with %r' % (s, prefix))
 
840
 
 
841
    def assertEndsWith(self, s, suffix):
 
842
        """Asserts that s ends with suffix."""
 
843
        if not s.endswith(suffix):
 
844
            raise AssertionError('string %r does not end with %r' % (s, suffix))
 
845
 
 
846
    def assertContainsRe(self, haystack, needle_re):
 
847
        """Assert that a contains something matching a regular expression."""
 
848
        if not re.search(needle_re, haystack):
 
849
            if '\n' in haystack or len(haystack) > 60:
 
850
                # a long string, format it in a more readable way
 
851
                raise AssertionError(
 
852
                        'pattern "%s" not found in\n"""\\\n%s"""\n'
 
853
                        % (needle_re, haystack))
 
854
            else:
 
855
                raise AssertionError('pattern "%s" not found in "%s"'
 
856
                        % (needle_re, haystack))
 
857
 
 
858
    def assertNotContainsRe(self, haystack, needle_re):
 
859
        """Assert that a does not match a regular expression"""
 
860
        if re.search(needle_re, haystack):
 
861
            raise AssertionError('pattern "%s" found in "%s"'
 
862
                    % (needle_re, haystack))
 
863
 
 
864
    def assertSubset(self, sublist, superlist):
 
865
        """Assert that every entry in sublist is present in superlist."""
 
866
        missing = set(sublist) - set(superlist)
 
867
        if len(missing) > 0:
 
868
            raise AssertionError("value(s) %r not present in container %r" % 
 
869
                                 (missing, superlist))
 
870
 
 
871
    def assertListRaises(self, excClass, func, *args, **kwargs):
 
872
        """Fail unless excClass is raised when the iterator from func is used.
 
873
        
 
874
        Many functions can return generators this makes sure
 
875
        to wrap them in a list() call to make sure the whole generator
 
876
        is run, and that the proper exception is raised.
 
877
        """
 
878
        try:
 
879
            list(func(*args, **kwargs))
 
880
        except excClass:
 
881
            return
 
882
        else:
 
883
            if getattr(excClass,'__name__', None) is not None:
 
884
                excName = excClass.__name__
 
885
            else:
 
886
                excName = str(excClass)
 
887
            raise self.failureException, "%s not raised" % excName
 
888
 
 
889
    def assertRaises(self, excClass, callableObj, *args, **kwargs):
 
890
        """Assert that a callable raises a particular exception.
 
891
 
 
892
        :param excClass: As for the except statement, this may be either an
 
893
            exception class, or a tuple of classes.
 
894
        :param callableObj: A callable, will be passed ``*args`` and
 
895
            ``**kwargs``.
 
896
 
 
897
        Returns the exception so that you can examine it.
 
898
        """
 
899
        try:
 
900
            callableObj(*args, **kwargs)
 
901
        except excClass, e:
 
902
            return e
 
903
        else:
 
904
            if getattr(excClass,'__name__', None) is not None:
 
905
                excName = excClass.__name__
 
906
            else:
 
907
                # probably a tuple
 
908
                excName = str(excClass)
 
909
            raise self.failureException, "%s not raised" % excName
 
910
 
 
911
    def assertIs(self, left, right, message=None):
 
912
        if not (left is right):
 
913
            if message is not None:
 
914
                raise AssertionError(message)
 
915
            else:
 
916
                raise AssertionError("%r is not %r." % (left, right))
 
917
 
 
918
    def assertIsNot(self, left, right, message=None):
 
919
        if (left is right):
 
920
            if message is not None:
 
921
                raise AssertionError(message)
 
922
            else:
 
923
                raise AssertionError("%r is %r." % (left, right))
 
924
 
 
925
    def assertTransportMode(self, transport, path, mode):
 
926
        """Fail if a path does not have mode mode.
 
927
        
 
928
        If modes are not supported on this transport, the assertion is ignored.
 
929
        """
 
930
        if not transport._can_roundtrip_unix_modebits():
 
931
            return
 
932
        path_stat = transport.stat(path)
 
933
        actual_mode = stat.S_IMODE(path_stat.st_mode)
 
934
        self.assertEqual(mode, actual_mode,
 
935
            'mode of %r incorrect (%o != %o)' % (path, mode, actual_mode))
 
936
 
 
937
    def assertIsInstance(self, obj, kls):
 
938
        """Fail if obj is not an instance of kls"""
 
939
        if not isinstance(obj, kls):
 
940
            self.fail("%r is an instance of %s rather than %s" % (
 
941
                obj, obj.__class__, kls))
 
942
 
 
943
    def expectFailure(self, reason, assertion, *args, **kwargs):
 
944
        """Invoke a test, expecting it to fail for the given reason.
 
945
 
 
946
        This is for assertions that ought to succeed, but currently fail.
 
947
        (The failure is *expected* but not *wanted*.)  Please be very precise
 
948
        about the failure you're expecting.  If a new bug is introduced,
 
949
        AssertionError should be raised, not KnownFailure.
 
950
 
 
951
        Frequently, expectFailure should be followed by an opposite assertion.
 
952
        See example below.
 
953
 
 
954
        Intended to be used with a callable that raises AssertionError as the
 
955
        'assertion' parameter.  args and kwargs are passed to the 'assertion'.
 
956
 
 
957
        Raises KnownFailure if the test fails.  Raises AssertionError if the
 
958
        test succeeds.
 
959
 
 
960
        example usage::
 
961
 
 
962
          self.expectFailure('Math is broken', self.assertNotEqual, 54,
 
963
                             dynamic_val)
 
964
          self.assertEqual(42, dynamic_val)
 
965
 
 
966
          This means that a dynamic_val of 54 will cause the test to raise
 
967
          a KnownFailure.  Once math is fixed and the expectFailure is removed,
 
968
          only a dynamic_val of 42 will allow the test to pass.  Anything other
 
969
          than 54 or 42 will cause an AssertionError.
 
970
        """
 
971
        try:
 
972
            assertion(*args, **kwargs)
 
973
        except AssertionError:
 
974
            raise KnownFailure(reason)
 
975
        else:
 
976
            self.fail('Unexpected success.  Should have failed: %s' % reason)
 
977
 
 
978
    def _capture_warnings(self, a_callable, *args, **kwargs):
 
979
        """A helper for callDeprecated and applyDeprecated.
 
980
 
 
981
        :param a_callable: A callable to call.
 
982
        :param args: The positional arguments for the callable
 
983
        :param kwargs: The keyword arguments for the callable
 
984
        :return: A tuple (warnings, result). result is the result of calling
 
985
            a_callable(``*args``, ``**kwargs``).
 
986
        """
 
987
        local_warnings = []
 
988
        def capture_warnings(msg, cls=None, stacklevel=None):
 
989
            # we've hooked into a deprecation specific callpath,
 
990
            # only deprecations should getting sent via it.
 
991
            self.assertEqual(cls, DeprecationWarning)
 
992
            local_warnings.append(msg)
 
993
        original_warning_method = symbol_versioning.warn
 
994
        symbol_versioning.set_warning_method(capture_warnings)
 
995
        try:
 
996
            result = a_callable(*args, **kwargs)
 
997
        finally:
 
998
            symbol_versioning.set_warning_method(original_warning_method)
 
999
        return (local_warnings, result)
 
1000
 
 
1001
    def applyDeprecated(self, deprecation_format, a_callable, *args, **kwargs):
 
1002
        """Call a deprecated callable without warning the user.
 
1003
 
 
1004
        Note that this only captures warnings raised by symbol_versioning.warn,
 
1005
        not other callers that go direct to the warning module.
 
1006
 
 
1007
        To test that a deprecated method raises an error, do something like
 
1008
        this::
 
1009
 
 
1010
        self.assertRaises(errors.ReservedId,
 
1011
            self.applyDeprecated, zero_ninetyone,
 
1012
                br.append_revision, 'current:')
 
1013
 
 
1014
        :param deprecation_format: The deprecation format that the callable
 
1015
            should have been deprecated with. This is the same type as the
 
1016
            parameter to deprecated_method/deprecated_function. If the
 
1017
            callable is not deprecated with this format, an assertion error
 
1018
            will be raised.
 
1019
        :param a_callable: A callable to call. This may be a bound method or
 
1020
            a regular function. It will be called with ``*args`` and
 
1021
            ``**kwargs``.
 
1022
        :param args: The positional arguments for the callable
 
1023
        :param kwargs: The keyword arguments for the callable
 
1024
        :return: The result of a_callable(``*args``, ``**kwargs``)
 
1025
        """
 
1026
        call_warnings, result = self._capture_warnings(a_callable,
 
1027
            *args, **kwargs)
 
1028
        expected_first_warning = symbol_versioning.deprecation_string(
 
1029
            a_callable, deprecation_format)
 
1030
        if len(call_warnings) == 0:
 
1031
            self.fail("No deprecation warning generated by call to %s" %
 
1032
                a_callable)
 
1033
        self.assertEqual(expected_first_warning, call_warnings[0])
 
1034
        return result
 
1035
 
 
1036
    def callDeprecated(self, expected, callable, *args, **kwargs):
 
1037
        """Assert that a callable is deprecated in a particular way.
 
1038
 
 
1039
        This is a very precise test for unusual requirements. The 
 
1040
        applyDeprecated helper function is probably more suited for most tests
 
1041
        as it allows you to simply specify the deprecation format being used
 
1042
        and will ensure that that is issued for the function being called.
 
1043
 
 
1044
        Note that this only captures warnings raised by symbol_versioning.warn,
 
1045
        not other callers that go direct to the warning module.
 
1046
 
 
1047
        :param expected: a list of the deprecation warnings expected, in order
 
1048
        :param callable: The callable to call
 
1049
        :param args: The positional arguments for the callable
 
1050
        :param kwargs: The keyword arguments for the callable
 
1051
        """
 
1052
        call_warnings, result = self._capture_warnings(callable,
 
1053
            *args, **kwargs)
 
1054
        self.assertEqual(expected, call_warnings)
 
1055
        return result
 
1056
 
 
1057
    def _startLogFile(self):
 
1058
        """Send bzr and test log messages to a temporary file.
 
1059
 
 
1060
        The file is removed as the test is torn down.
 
1061
        """
 
1062
        fileno, name = tempfile.mkstemp(suffix='.log', prefix='testbzr')
 
1063
        self._log_file = os.fdopen(fileno, 'w+')
 
1064
        self._log_nonce = bzrlib.trace.enable_test_log(self._log_file)
 
1065
        self._log_file_name = name
 
1066
        self.addCleanup(self._finishLogFile)
 
1067
 
 
1068
    def _finishLogFile(self):
 
1069
        """Finished with the log file.
 
1070
 
 
1071
        Close the file and delete it, unless setKeepLogfile was called.
 
1072
        """
 
1073
        if self._log_file is None:
 
1074
            return
 
1075
        bzrlib.trace.disable_test_log(self._log_nonce)
 
1076
        self._log_file.close()
 
1077
        self._log_file = None
 
1078
        if not self._keep_log_file:
 
1079
            os.remove(self._log_file_name)
 
1080
            self._log_file_name = None
 
1081
 
 
1082
    def setKeepLogfile(self):
 
1083
        """Make the logfile not be deleted when _finishLogFile is called."""
 
1084
        self._keep_log_file = True
 
1085
 
 
1086
    def addCleanup(self, callable):
 
1087
        """Arrange to run a callable when this case is torn down.
 
1088
 
 
1089
        Callables are run in the reverse of the order they are registered, 
 
1090
        ie last-in first-out.
 
1091
        """
 
1092
        if callable in self._cleanups:
 
1093
            raise ValueError("cleanup function %r already registered on %s" 
 
1094
                    % (callable, self))
 
1095
        self._cleanups.append(callable)
 
1096
 
 
1097
    def _cleanEnvironment(self):
 
1098
        new_env = {
 
1099
            'BZR_HOME': None, # Don't inherit BZR_HOME to all the tests.
 
1100
            'HOME': os.getcwd(),
 
1101
            'APPDATA': None,  # bzr now use Win32 API and don't rely on APPDATA
 
1102
            'BZR_EMAIL': None,
 
1103
            'BZREMAIL': None, # may still be present in the environment
 
1104
            'EMAIL': None,
 
1105
            'BZR_PROGRESS_BAR': None,
 
1106
            # SSH Agent
 
1107
            'SSH_AUTH_SOCK': None,
 
1108
            # Proxies
 
1109
            'http_proxy': None,
 
1110
            'HTTP_PROXY': None,
 
1111
            'https_proxy': None,
 
1112
            'HTTPS_PROXY': None,
 
1113
            'no_proxy': None,
 
1114
            'NO_PROXY': None,
 
1115
            'all_proxy': None,
 
1116
            'ALL_PROXY': None,
 
1117
            # Nobody cares about these ones AFAIK. So far at
 
1118
            # least. If you do (care), please update this comment
 
1119
            # -- vila 20061212
 
1120
            'ftp_proxy': None,
 
1121
            'FTP_PROXY': None,
 
1122
            'BZR_REMOTE_PATH': None,
 
1123
        }
 
1124
        self.__old_env = {}
 
1125
        self.addCleanup(self._restoreEnvironment)
 
1126
        for name, value in new_env.iteritems():
 
1127
            self._captureVar(name, value)
 
1128
 
 
1129
    def _captureVar(self, name, newvalue):
 
1130
        """Set an environment variable, and reset it when finished."""
 
1131
        self.__old_env[name] = osutils.set_or_unset_env(name, newvalue)
 
1132
 
 
1133
    def _restore_debug_flags(self):
 
1134
        debug.debug_flags.clear()
 
1135
        debug.debug_flags.update(self._preserved_debug_flags)
 
1136
 
 
1137
    def _restoreEnvironment(self):
 
1138
        for name, value in self.__old_env.iteritems():
 
1139
            osutils.set_or_unset_env(name, value)
 
1140
 
 
1141
    def _restoreHooks(self):
 
1142
        for klass, hooks in self._preserved_hooks.items():
 
1143
            setattr(klass, 'hooks', hooks)
 
1144
 
 
1145
    def knownFailure(self, reason):
 
1146
        """This test has failed for some known reason."""
 
1147
        raise KnownFailure(reason)
 
1148
 
 
1149
    def run(self, result=None):
 
1150
        if result is None: result = self.defaultTestResult()
 
1151
        for feature in getattr(self, '_test_needs_features', []):
 
1152
            if not feature.available():
 
1153
                result.startTest(self)
 
1154
                if getattr(result, 'addNotSupported', None):
 
1155
                    result.addNotSupported(self, feature)
 
1156
                else:
 
1157
                    result.addSuccess(self)
 
1158
                result.stopTest(self)
 
1159
                return
 
1160
        return unittest.TestCase.run(self, result)
 
1161
 
 
1162
    def tearDown(self):
 
1163
        self._runCleanups()
 
1164
        unittest.TestCase.tearDown(self)
 
1165
 
 
1166
    def time(self, callable, *args, **kwargs):
 
1167
        """Run callable and accrue the time it takes to the benchmark time.
 
1168
        
 
1169
        If lsprofiling is enabled (i.e. by --lsprof-time to bzr selftest) then
 
1170
        this will cause lsprofile statistics to be gathered and stored in
 
1171
        self._benchcalls.
 
1172
        """
 
1173
        if self._benchtime is None:
 
1174
            self._benchtime = 0
 
1175
        start = time.time()
 
1176
        try:
 
1177
            if not self._gather_lsprof_in_benchmarks:
 
1178
                return callable(*args, **kwargs)
 
1179
            else:
 
1180
                # record this benchmark
 
1181
                ret, stats = bzrlib.lsprof.profile(callable, *args, **kwargs)
 
1182
                stats.sort()
 
1183
                self._benchcalls.append(((callable, args, kwargs), stats))
 
1184
                return ret
 
1185
        finally:
 
1186
            self._benchtime += time.time() - start
 
1187
 
 
1188
    def _runCleanups(self):
 
1189
        """Run registered cleanup functions. 
 
1190
 
 
1191
        This should only be called from TestCase.tearDown.
 
1192
        """
 
1193
        # TODO: Perhaps this should keep running cleanups even if 
 
1194
        # one of them fails?
 
1195
 
 
1196
        # Actually pop the cleanups from the list so tearDown running
 
1197
        # twice is safe (this happens for skipped tests).
 
1198
        while self._cleanups:
 
1199
            self._cleanups.pop()()
 
1200
 
 
1201
    def log(self, *args):
 
1202
        mutter(*args)
 
1203
 
 
1204
    def _get_log(self, keep_log_file=False):
 
1205
        """Get the log from bzrlib.trace calls from this test.
 
1206
 
 
1207
        :param keep_log_file: When True, if the log is still a file on disk
 
1208
            leave it as a file on disk. When False, if the log is still a file
 
1209
            on disk, the log file is deleted and the log preserved as
 
1210
            self._log_contents.
 
1211
        :return: A string containing the log.
 
1212
        """
 
1213
        # flush the log file, to get all content
 
1214
        import bzrlib.trace
 
1215
        bzrlib.trace._trace_file.flush()
 
1216
        if self._log_contents:
 
1217
            return self._log_contents
 
1218
        if self._log_file_name is not None:
 
1219
            logfile = open(self._log_file_name)
 
1220
            try:
 
1221
                log_contents = logfile.read()
 
1222
            finally:
 
1223
                logfile.close()
 
1224
            if not keep_log_file:
 
1225
                self._log_contents = log_contents
 
1226
                try:
 
1227
                    os.remove(self._log_file_name)
 
1228
                except OSError, e:
 
1229
                    if sys.platform == 'win32' and e.errno == errno.EACCES:
 
1230
                        print >>sys.stderr, ('Unable to delete log file '
 
1231
                                             ' %r' % self._log_file_name)
 
1232
                    else:
 
1233
                        raise
 
1234
            return log_contents
 
1235
        else:
 
1236
            return "DELETED log file to reduce memory footprint"
 
1237
 
 
1238
    @deprecated_method(zero_eighteen)
 
1239
    def capture(self, cmd, retcode=0):
 
1240
        """Shortcut that splits cmd into words, runs, and returns stdout"""
 
1241
        return self.run_bzr_captured(cmd.split(), retcode=retcode)[0]
 
1242
 
 
1243
    def requireFeature(self, feature):
 
1244
        """This test requires a specific feature is available.
 
1245
 
 
1246
        :raises UnavailableFeature: When feature is not available.
 
1247
        """
 
1248
        if not feature.available():
 
1249
            raise UnavailableFeature(feature)
 
1250
 
 
1251
    @deprecated_method(zero_eighteen)
 
1252
    def run_bzr_captured(self, argv, retcode=0, encoding=None, stdin=None,
 
1253
                         working_dir=None):
 
1254
        """Invoke bzr and return (stdout, stderr).
 
1255
 
 
1256
        Don't call this method, just use run_bzr() which is equivalent.
 
1257
 
 
1258
        :param argv: Arguments to invoke bzr.  This may be either a 
 
1259
            single string, in which case it is split by shlex into words, 
 
1260
            or a list of arguments.
 
1261
        :param retcode: Expected return code, or None for don't-care.
 
1262
        :param encoding: Encoding for sys.stdout and sys.stderr
 
1263
        :param stdin: A string to be used as stdin for the command.
 
1264
        :param working_dir: Change to this directory before running
 
1265
        """
 
1266
        return self._run_bzr_autosplit(argv, retcode=retcode,
 
1267
                encoding=encoding, stdin=stdin, working_dir=working_dir,
 
1268
                )
 
1269
 
 
1270
    def _run_bzr_autosplit(self, args, retcode, encoding, stdin,
 
1271
            working_dir):
 
1272
        """Run bazaar command line, splitting up a string command line."""
 
1273
        if isinstance(args, basestring):
 
1274
            args = list(shlex.split(args))
 
1275
        return self._run_bzr_core(args, retcode=retcode,
 
1276
                encoding=encoding, stdin=stdin, working_dir=working_dir,
 
1277
                )
 
1278
 
 
1279
    def _run_bzr_core(self, args, retcode, encoding, stdin,
 
1280
            working_dir):
 
1281
        if encoding is None:
 
1282
            encoding = bzrlib.user_encoding
 
1283
        stdout = StringIOWrapper()
 
1284
        stderr = StringIOWrapper()
 
1285
        stdout.encoding = encoding
 
1286
        stderr.encoding = encoding
 
1287
 
 
1288
        self.log('run bzr: %r', args)
 
1289
        # FIXME: don't call into logging here
 
1290
        handler = logging.StreamHandler(stderr)
 
1291
        handler.setLevel(logging.INFO)
 
1292
        logger = logging.getLogger('')
 
1293
        logger.addHandler(handler)
 
1294
        old_ui_factory = ui.ui_factory
 
1295
        ui.ui_factory = TestUIFactory(stdin=stdin, stdout=stdout, stderr=stderr)
 
1296
 
 
1297
        cwd = None
 
1298
        if working_dir is not None:
 
1299
            cwd = osutils.getcwd()
 
1300
            os.chdir(working_dir)
 
1301
 
 
1302
        try:
 
1303
            result = self.apply_redirected(ui.ui_factory.stdin,
 
1304
                stdout, stderr,
 
1305
                bzrlib.commands.run_bzr_catch_errors,
 
1306
                args)
 
1307
        finally:
 
1308
            logger.removeHandler(handler)
 
1309
            ui.ui_factory = old_ui_factory
 
1310
            if cwd is not None:
 
1311
                os.chdir(cwd)
 
1312
 
 
1313
        out = stdout.getvalue()
 
1314
        err = stderr.getvalue()
 
1315
        if out:
 
1316
            self.log('output:\n%r', out)
 
1317
        if err:
 
1318
            self.log('errors:\n%r', err)
 
1319
        if retcode is not None:
 
1320
            self.assertEquals(retcode, result,
 
1321
                              message='Unexpected return code')
 
1322
        return out, err
 
1323
 
 
1324
    def run_bzr(self, *args, **kwargs):
 
1325
        """Invoke bzr, as if it were run from the command line.
 
1326
 
 
1327
        The argument list should not include the bzr program name - the
 
1328
        first argument is normally the bzr command.  Arguments may be
 
1329
        passed in three ways:
 
1330
 
 
1331
        1- A list of strings, eg ["commit", "a"].  This is recommended
 
1332
        when the command contains whitespace or metacharacters, or 
 
1333
        is built up at run time.
 
1334
 
 
1335
        2- A single string, eg "add a".  This is the most convenient 
 
1336
        for hardcoded commands.
 
1337
 
 
1338
        3- Several varargs parameters, eg run_bzr("add", "a").  
 
1339
        This is not recommended for new code.
 
1340
 
 
1341
        This runs bzr through the interface that catches and reports
 
1342
        errors, and with logging set to something approximating the
 
1343
        default, so that error reporting can be checked.
 
1344
 
 
1345
        This should be the main method for tests that want to exercise the
 
1346
        overall behavior of the bzr application (rather than a unit test
 
1347
        or a functional test of the library.)
 
1348
 
 
1349
        This sends the stdout/stderr results into the test's log,
 
1350
        where it may be useful for debugging.  See also run_captured.
 
1351
 
 
1352
        :keyword stdin: A string to be used as stdin for the command.
 
1353
        :keyword retcode: The status code the command should return;
 
1354
            default 0.
 
1355
        :keyword working_dir: The directory to run the command in
 
1356
        :keyword error_regexes: A list of expected error messages.  If
 
1357
            specified they must be seen in the error output of the command.
 
1358
        """
 
1359
        retcode = kwargs.pop('retcode', 0)
 
1360
        encoding = kwargs.pop('encoding', None)
 
1361
        stdin = kwargs.pop('stdin', None)
 
1362
        working_dir = kwargs.pop('working_dir', None)
 
1363
        error_regexes = kwargs.pop('error_regexes', [])
 
1364
 
 
1365
        if kwargs:
 
1366
            raise TypeError("run_bzr() got unexpected keyword arguments '%s'"
 
1367
                            % kwargs.keys())
 
1368
 
 
1369
        if len(args) == 1:
 
1370
            if isinstance(args[0], (list, basestring)):
 
1371
                args = args[0]
 
1372
        else:
 
1373
            symbol_versioning.warn(zero_eighteen % "passing varargs to run_bzr",
 
1374
                                   DeprecationWarning, stacklevel=3)
 
1375
 
 
1376
        out, err = self._run_bzr_autosplit(args=args,
 
1377
            retcode=retcode,
 
1378
            encoding=encoding, stdin=stdin, working_dir=working_dir,
 
1379
            )
 
1380
 
 
1381
        for regex in error_regexes:
 
1382
            self.assertContainsRe(err, regex)
 
1383
        return out, err
 
1384
 
 
1385
    def run_bzr_decode(self, *args, **kwargs):
 
1386
        if 'encoding' in kwargs:
 
1387
            encoding = kwargs['encoding']
 
1388
        else:
 
1389
            encoding = bzrlib.user_encoding
 
1390
        return self.run_bzr(*args, **kwargs)[0].decode(encoding)
 
1391
 
 
1392
    def run_bzr_error(self, error_regexes, *args, **kwargs):
 
1393
        """Run bzr, and check that stderr contains the supplied regexes
 
1394
 
 
1395
        :param error_regexes: Sequence of regular expressions which
 
1396
            must each be found in the error output. The relative ordering
 
1397
            is not enforced.
 
1398
        :param args: command-line arguments for bzr
 
1399
        :param kwargs: Keyword arguments which are interpreted by run_bzr
 
1400
            This function changes the default value of retcode to be 3,
 
1401
            since in most cases this is run when you expect bzr to fail.
 
1402
 
 
1403
        :return: (out, err) The actual output of running the command (in case
 
1404
            you want to do more inspection)
 
1405
 
 
1406
        Examples of use::
 
1407
 
 
1408
            # Make sure that commit is failing because there is nothing to do
 
1409
            self.run_bzr_error(['no changes to commit'],
 
1410
                               ['commit', '-m', 'my commit comment'])
 
1411
            # Make sure --strict is handling an unknown file, rather than
 
1412
            # giving us the 'nothing to do' error
 
1413
            self.build_tree(['unknown'])
 
1414
            self.run_bzr_error(['Commit refused because there are unknown files'],
 
1415
                               ['commit', --strict', '-m', 'my commit comment'])
 
1416
        """
 
1417
        kwargs.setdefault('retcode', 3)
 
1418
        kwargs['error_regexes'] = error_regexes
 
1419
        out, err = self.run_bzr(*args, **kwargs)
 
1420
        return out, err
 
1421
 
 
1422
    def run_bzr_subprocess(self, *args, **kwargs):
 
1423
        """Run bzr in a subprocess for testing.
 
1424
 
 
1425
        This starts a new Python interpreter and runs bzr in there. 
 
1426
        This should only be used for tests that have a justifiable need for
 
1427
        this isolation: e.g. they are testing startup time, or signal
 
1428
        handling, or early startup code, etc.  Subprocess code can't be 
 
1429
        profiled or debugged so easily.
 
1430
 
 
1431
        :keyword retcode: The status code that is expected.  Defaults to 0.  If
 
1432
            None is supplied, the status code is not checked.
 
1433
        :keyword env_changes: A dictionary which lists changes to environment
 
1434
            variables. A value of None will unset the env variable.
 
1435
            The values must be strings. The change will only occur in the
 
1436
            child, so you don't need to fix the environment after running.
 
1437
        :keyword universal_newlines: Convert CRLF => LF
 
1438
        :keyword allow_plugins: By default the subprocess is run with
 
1439
            --no-plugins to ensure test reproducibility. Also, it is possible
 
1440
            for system-wide plugins to create unexpected output on stderr,
 
1441
            which can cause unnecessary test failures.
 
1442
        """
 
1443
        env_changes = kwargs.get('env_changes', {})
 
1444
        working_dir = kwargs.get('working_dir', None)
 
1445
        allow_plugins = kwargs.get('allow_plugins', False)
 
1446
        if len(args) == 1:
 
1447
            if isinstance(args[0], list):
 
1448
                args = args[0]
 
1449
            elif isinstance(args[0], basestring):
 
1450
                args = list(shlex.split(args[0]))
 
1451
        else:
 
1452
            symbol_versioning.warn(zero_ninetyone %
 
1453
                                   "passing varargs to run_bzr_subprocess",
 
1454
                                   DeprecationWarning, stacklevel=3)
 
1455
        process = self.start_bzr_subprocess(args, env_changes=env_changes,
 
1456
                                            working_dir=working_dir,
 
1457
                                            allow_plugins=allow_plugins)
 
1458
        # We distinguish between retcode=None and retcode not passed.
 
1459
        supplied_retcode = kwargs.get('retcode', 0)
 
1460
        return self.finish_bzr_subprocess(process, retcode=supplied_retcode,
 
1461
            universal_newlines=kwargs.get('universal_newlines', False),
 
1462
            process_args=args)
 
1463
 
 
1464
    def start_bzr_subprocess(self, process_args, env_changes=None,
 
1465
                             skip_if_plan_to_signal=False,
 
1466
                             working_dir=None,
 
1467
                             allow_plugins=False):
 
1468
        """Start bzr in a subprocess for testing.
 
1469
 
 
1470
        This starts a new Python interpreter and runs bzr in there.
 
1471
        This should only be used for tests that have a justifiable need for
 
1472
        this isolation: e.g. they are testing startup time, or signal
 
1473
        handling, or early startup code, etc.  Subprocess code can't be
 
1474
        profiled or debugged so easily.
 
1475
 
 
1476
        :param process_args: a list of arguments to pass to the bzr executable,
 
1477
            for example ``['--version']``.
 
1478
        :param env_changes: A dictionary which lists changes to environment
 
1479
            variables. A value of None will unset the env variable.
 
1480
            The values must be strings. The change will only occur in the
 
1481
            child, so you don't need to fix the environment after running.
 
1482
        :param skip_if_plan_to_signal: raise TestSkipped when true and os.kill
 
1483
            is not available.
 
1484
        :param allow_plugins: If False (default) pass --no-plugins to bzr.
 
1485
 
 
1486
        :returns: Popen object for the started process.
 
1487
        """
 
1488
        if skip_if_plan_to_signal:
 
1489
            if not getattr(os, 'kill', None):
 
1490
                raise TestSkipped("os.kill not available.")
 
1491
 
 
1492
        if env_changes is None:
 
1493
            env_changes = {}
 
1494
        old_env = {}
 
1495
 
 
1496
        def cleanup_environment():
 
1497
            for env_var, value in env_changes.iteritems():
 
1498
                old_env[env_var] = osutils.set_or_unset_env(env_var, value)
 
1499
 
 
1500
        def restore_environment():
 
1501
            for env_var, value in old_env.iteritems():
 
1502
                osutils.set_or_unset_env(env_var, value)
 
1503
 
 
1504
        bzr_path = self.get_bzr_path()
 
1505
 
 
1506
        cwd = None
 
1507
        if working_dir is not None:
 
1508
            cwd = osutils.getcwd()
 
1509
            os.chdir(working_dir)
 
1510
 
 
1511
        try:
 
1512
            # win32 subprocess doesn't support preexec_fn
 
1513
            # so we will avoid using it on all platforms, just to
 
1514
            # make sure the code path is used, and we don't break on win32
 
1515
            cleanup_environment()
 
1516
            command = [sys.executable, bzr_path]
 
1517
            if not allow_plugins:
 
1518
                command.append('--no-plugins')
 
1519
            command.extend(process_args)
 
1520
            process = self._popen(command, stdin=PIPE, stdout=PIPE, stderr=PIPE)
 
1521
        finally:
 
1522
            restore_environment()
 
1523
            if cwd is not None:
 
1524
                os.chdir(cwd)
 
1525
 
 
1526
        return process
 
1527
 
 
1528
    def _popen(self, *args, **kwargs):
 
1529
        """Place a call to Popen.
 
1530
 
 
1531
        Allows tests to override this method to intercept the calls made to
 
1532
        Popen for introspection.
 
1533
        """
 
1534
        return Popen(*args, **kwargs)
 
1535
 
 
1536
    def get_bzr_path(self):
 
1537
        """Return the path of the 'bzr' executable for this test suite."""
 
1538
        bzr_path = os.path.dirname(os.path.dirname(bzrlib.__file__))+'/bzr'
 
1539
        if not os.path.isfile(bzr_path):
 
1540
            # We are probably installed. Assume sys.argv is the right file
 
1541
            bzr_path = sys.argv[0]
 
1542
        return bzr_path
 
1543
 
 
1544
    def finish_bzr_subprocess(self, process, retcode=0, send_signal=None,
 
1545
                              universal_newlines=False, process_args=None):
 
1546
        """Finish the execution of process.
 
1547
 
 
1548
        :param process: the Popen object returned from start_bzr_subprocess.
 
1549
        :param retcode: The status code that is expected.  Defaults to 0.  If
 
1550
            None is supplied, the status code is not checked.
 
1551
        :param send_signal: an optional signal to send to the process.
 
1552
        :param universal_newlines: Convert CRLF => LF
 
1553
        :returns: (stdout, stderr)
 
1554
        """
 
1555
        if send_signal is not None:
 
1556
            os.kill(process.pid, send_signal)
 
1557
        out, err = process.communicate()
 
1558
 
 
1559
        if universal_newlines:
 
1560
            out = out.replace('\r\n', '\n')
 
1561
            err = err.replace('\r\n', '\n')
 
1562
 
 
1563
        if retcode is not None and retcode != process.returncode:
 
1564
            if process_args is None:
 
1565
                process_args = "(unknown args)"
 
1566
            mutter('Output of bzr %s:\n%s', process_args, out)
 
1567
            mutter('Error for bzr %s:\n%s', process_args, err)
 
1568
            self.fail('Command bzr %s failed with retcode %s != %s'
 
1569
                      % (process_args, retcode, process.returncode))
 
1570
        return [out, err]
 
1571
 
 
1572
    def check_inventory_shape(self, inv, shape):
 
1573
        """Compare an inventory to a list of expected names.
 
1574
 
 
1575
        Fail if they are not precisely equal.
 
1576
        """
 
1577
        extras = []
 
1578
        shape = list(shape)             # copy
 
1579
        for path, ie in inv.entries():
 
1580
            name = path.replace('\\', '/')
 
1581
            if ie.kind == 'directory':
 
1582
                name = name + '/'
 
1583
            if name in shape:
 
1584
                shape.remove(name)
 
1585
            else:
 
1586
                extras.append(name)
 
1587
        if shape:
 
1588
            self.fail("expected paths not found in inventory: %r" % shape)
 
1589
        if extras:
 
1590
            self.fail("unexpected paths found in inventory: %r" % extras)
 
1591
 
 
1592
    def apply_redirected(self, stdin=None, stdout=None, stderr=None,
 
1593
                         a_callable=None, *args, **kwargs):
 
1594
        """Call callable with redirected std io pipes.
 
1595
 
 
1596
        Returns the return code."""
 
1597
        if not callable(a_callable):
 
1598
            raise ValueError("a_callable must be callable.")
 
1599
        if stdin is None:
 
1600
            stdin = StringIO("")
 
1601
        if stdout is None:
 
1602
            if getattr(self, "_log_file", None) is not None:
 
1603
                stdout = self._log_file
 
1604
            else:
 
1605
                stdout = StringIO()
 
1606
        if stderr is None:
 
1607
            if getattr(self, "_log_file", None is not None):
 
1608
                stderr = self._log_file
 
1609
            else:
 
1610
                stderr = StringIO()
 
1611
        real_stdin = sys.stdin
 
1612
        real_stdout = sys.stdout
 
1613
        real_stderr = sys.stderr
 
1614
        try:
 
1615
            sys.stdout = stdout
 
1616
            sys.stderr = stderr
 
1617
            sys.stdin = stdin
 
1618
            return a_callable(*args, **kwargs)
 
1619
        finally:
 
1620
            sys.stdout = real_stdout
 
1621
            sys.stderr = real_stderr
 
1622
            sys.stdin = real_stdin
 
1623
 
 
1624
    def reduceLockdirTimeout(self):
 
1625
        """Reduce the default lock timeout for the duration of the test, so that
 
1626
        if LockContention occurs during a test, it does so quickly.
 
1627
 
 
1628
        Tests that expect to provoke LockContention errors should call this.
 
1629
        """
 
1630
        orig_timeout = bzrlib.lockdir._DEFAULT_TIMEOUT_SECONDS
 
1631
        def resetTimeout():
 
1632
            bzrlib.lockdir._DEFAULT_TIMEOUT_SECONDS = orig_timeout
 
1633
        self.addCleanup(resetTimeout)
 
1634
        bzrlib.lockdir._DEFAULT_TIMEOUT_SECONDS = 0
 
1635
 
 
1636
 
 
1637
class TestCaseWithMemoryTransport(TestCase):
 
1638
    """Common test class for tests that do not need disk resources.
 
1639
 
 
1640
    Tests that need disk resources should derive from TestCaseWithTransport.
 
1641
 
 
1642
    TestCaseWithMemoryTransport sets the TEST_ROOT variable for all bzr tests.
 
1643
 
 
1644
    For TestCaseWithMemoryTransport the test_home_dir is set to the name of
 
1645
    a directory which does not exist. This serves to help ensure test isolation
 
1646
    is preserved. test_dir is set to the TEST_ROOT, as is cwd, because they
 
1647
    must exist. However, TestCaseWithMemoryTransport does not offer local
 
1648
    file defaults for the transport in tests, nor does it obey the command line
 
1649
    override, so tests that accidentally write to the common directory should
 
1650
    be rare.
 
1651
 
 
1652
    :cvar TEST_ROOT: Directory containing all temporary directories, plus
 
1653
    a .bzr directory that stops us ascending higher into the filesystem.
 
1654
    """
 
1655
 
 
1656
    TEST_ROOT = None
 
1657
    _TEST_NAME = 'test'
 
1658
 
 
1659
    def __init__(self, methodName='runTest'):
 
1660
        # allow test parameterisation after test construction and before test
 
1661
        # execution. Variables that the parameteriser sets need to be 
 
1662
        # ones that are not set by setUp, or setUp will trash them.
 
1663
        super(TestCaseWithMemoryTransport, self).__init__(methodName)
 
1664
        self.vfs_transport_factory = default_transport
 
1665
        self.transport_server = None
 
1666
        self.transport_readonly_server = None
 
1667
        self.__vfs_server = None
 
1668
 
 
1669
    def get_transport(self, relpath=None):
 
1670
        """Return a writeable transport.
 
1671
 
 
1672
        This transport is for the test scratch space relative to
 
1673
        "self._test_root"
 
1674
        
 
1675
        :param relpath: a path relative to the base url.
 
1676
        """
 
1677
        t = get_transport(self.get_url(relpath))
 
1678
        self.assertFalse(t.is_readonly())
 
1679
        return t
 
1680
 
 
1681
    def get_readonly_transport(self, relpath=None):
 
1682
        """Return a readonly transport for the test scratch space
 
1683
        
 
1684
        This can be used to test that operations which should only need
 
1685
        readonly access in fact do not try to write.
 
1686
 
 
1687
        :param relpath: a path relative to the base url.
 
1688
        """
 
1689
        t = get_transport(self.get_readonly_url(relpath))
 
1690
        self.assertTrue(t.is_readonly())
 
1691
        return t
 
1692
 
 
1693
    def create_transport_readonly_server(self):
 
1694
        """Create a transport server from class defined at init.
 
1695
 
 
1696
        This is mostly a hook for daughter classes.
 
1697
        """
 
1698
        return self.transport_readonly_server()
 
1699
 
 
1700
    def get_readonly_server(self):
 
1701
        """Get the server instance for the readonly transport
 
1702
 
 
1703
        This is useful for some tests with specific servers to do diagnostics.
 
1704
        """
 
1705
        if self.__readonly_server is None:
 
1706
            if self.transport_readonly_server is None:
 
1707
                # readonly decorator requested
 
1708
                # bring up the server
 
1709
                self.__readonly_server = ReadonlyServer()
 
1710
                self.__readonly_server.setUp(self.get_vfs_only_server())
 
1711
            else:
 
1712
                self.__readonly_server = self.create_transport_readonly_server()
 
1713
                self.__readonly_server.setUp(self.get_vfs_only_server())
 
1714
            self.addCleanup(self.__readonly_server.tearDown)
 
1715
        return self.__readonly_server
 
1716
 
 
1717
    def get_readonly_url(self, relpath=None):
 
1718
        """Get a URL for the readonly transport.
 
1719
 
 
1720
        This will either be backed by '.' or a decorator to the transport 
 
1721
        used by self.get_url()
 
1722
        relpath provides for clients to get a path relative to the base url.
 
1723
        These should only be downwards relative, not upwards.
 
1724
        """
 
1725
        base = self.get_readonly_server().get_url()
 
1726
        return self._adjust_url(base, relpath)
 
1727
 
 
1728
    def get_vfs_only_server(self):
 
1729
        """Get the vfs only read/write server instance.
 
1730
 
 
1731
        This is useful for some tests with specific servers that need
 
1732
        diagnostics.
 
1733
 
 
1734
        For TestCaseWithMemoryTransport this is always a MemoryServer, and there
 
1735
        is no means to override it.
 
1736
        """
 
1737
        if self.__vfs_server is None:
 
1738
            self.__vfs_server = MemoryServer()
 
1739
            self.__vfs_server.setUp()
 
1740
            self.addCleanup(self.__vfs_server.tearDown)
 
1741
        return self.__vfs_server
 
1742
 
 
1743
    def get_server(self):
 
1744
        """Get the read/write server instance.
 
1745
 
 
1746
        This is useful for some tests with specific servers that need
 
1747
        diagnostics.
 
1748
 
 
1749
        This is built from the self.transport_server factory. If that is None,
 
1750
        then the self.get_vfs_server is returned.
 
1751
        """
 
1752
        if self.__server is None:
 
1753
            if self.transport_server is None or self.transport_server is self.vfs_transport_factory:
 
1754
                return self.get_vfs_only_server()
 
1755
            else:
 
1756
                # bring up a decorated means of access to the vfs only server.
 
1757
                self.__server = self.transport_server()
 
1758
                try:
 
1759
                    self.__server.setUp(self.get_vfs_only_server())
 
1760
                except TypeError, e:
 
1761
                    # This should never happen; the try:Except here is to assist
 
1762
                    # developers having to update code rather than seeing an
 
1763
                    # uninformative TypeError.
 
1764
                    raise Exception, "Old server API in use: %s, %s" % (self.__server, e)
 
1765
            self.addCleanup(self.__server.tearDown)
 
1766
        return self.__server
 
1767
 
 
1768
    def _adjust_url(self, base, relpath):
 
1769
        """Get a URL (or maybe a path) for the readwrite transport.
 
1770
 
 
1771
        This will either be backed by '.' or to an equivalent non-file based
 
1772
        facility.
 
1773
        relpath provides for clients to get a path relative to the base url.
 
1774
        These should only be downwards relative, not upwards.
 
1775
        """
 
1776
        if relpath is not None and relpath != '.':
 
1777
            if not base.endswith('/'):
 
1778
                base = base + '/'
 
1779
            # XXX: Really base should be a url; we did after all call
 
1780
            # get_url()!  But sometimes it's just a path (from
 
1781
            # LocalAbspathServer), and it'd be wrong to append urlescaped data
 
1782
            # to a non-escaped local path.
 
1783
            if base.startswith('./') or base.startswith('/'):
 
1784
                base += relpath
 
1785
            else:
 
1786
                base += urlutils.escape(relpath)
 
1787
        return base
 
1788
 
 
1789
    def get_url(self, relpath=None):
 
1790
        """Get a URL (or maybe a path) for the readwrite transport.
 
1791
 
 
1792
        This will either be backed by '.' or to an equivalent non-file based
 
1793
        facility.
 
1794
        relpath provides for clients to get a path relative to the base url.
 
1795
        These should only be downwards relative, not upwards.
 
1796
        """
 
1797
        base = self.get_server().get_url()
 
1798
        return self._adjust_url(base, relpath)
 
1799
 
 
1800
    def get_vfs_only_url(self, relpath=None):
 
1801
        """Get a URL (or maybe a path for the plain old vfs transport.
 
1802
 
 
1803
        This will never be a smart protocol.  It always has all the
 
1804
        capabilities of the local filesystem, but it might actually be a
 
1805
        MemoryTransport or some other similar virtual filesystem.
 
1806
 
 
1807
        This is the backing transport (if any) of the server returned by
 
1808
        get_url and get_readonly_url.
 
1809
 
 
1810
        :param relpath: provides for clients to get a path relative to the base
 
1811
            url.  These should only be downwards relative, not upwards.
 
1812
        :return: A URL
 
1813
        """
 
1814
        base = self.get_vfs_only_server().get_url()
 
1815
        return self._adjust_url(base, relpath)
 
1816
 
 
1817
    def _make_test_root(self):
 
1818
        if TestCaseWithMemoryTransport.TEST_ROOT is not None:
 
1819
            return
 
1820
        root = tempfile.mkdtemp(prefix='testbzr-', suffix='.tmp')
 
1821
        TestCaseWithMemoryTransport.TEST_ROOT = root
 
1822
        
 
1823
        # make a fake bzr directory there to prevent any tests propagating
 
1824
        # up onto the source directory's real branch
 
1825
        bzrdir.BzrDir.create_standalone_workingtree(root)
 
1826
 
 
1827
        # The same directory is used by all tests, and we're not specifically
 
1828
        # told when all tests are finished.  This will do.
 
1829
        atexit.register(_rmtree_temp_dir, root)
 
1830
 
 
1831
    def makeAndChdirToTestDir(self):
 
1832
        """Create a temporary directories for this one test.
 
1833
        
 
1834
        This must set self.test_home_dir and self.test_dir and chdir to
 
1835
        self.test_dir.
 
1836
        
 
1837
        For TestCaseWithMemoryTransport we chdir to the TEST_ROOT for this test.
 
1838
        """
 
1839
        os.chdir(TestCaseWithMemoryTransport.TEST_ROOT)
 
1840
        self.test_dir = TestCaseWithMemoryTransport.TEST_ROOT
 
1841
        self.test_home_dir = self.test_dir + "/MemoryTransportMissingHomeDir"
 
1842
        
 
1843
    def make_branch(self, relpath, format=None):
 
1844
        """Create a branch on the transport at relpath."""
 
1845
        repo = self.make_repository(relpath, format=format)
 
1846
        return repo.bzrdir.create_branch()
 
1847
 
 
1848
    def make_bzrdir(self, relpath, format=None):
 
1849
        try:
 
1850
            # might be a relative or absolute path
 
1851
            maybe_a_url = self.get_url(relpath)
 
1852
            segments = maybe_a_url.rsplit('/', 1)
 
1853
            t = get_transport(maybe_a_url)
 
1854
            if len(segments) > 1 and segments[-1] not in ('', '.'):
 
1855
                t.ensure_base()
 
1856
            if format is None:
 
1857
                format = 'default'
 
1858
            if isinstance(format, basestring):
 
1859
                format = bzrdir.format_registry.make_bzrdir(format)
 
1860
            return format.initialize_on_transport(t)
 
1861
        except errors.UninitializableFormat:
 
1862
            raise TestSkipped("Format %s is not initializable." % format)
 
1863
 
 
1864
    def make_repository(self, relpath, shared=False, format=None):
 
1865
        """Create a repository on our default transport at relpath.
 
1866
        
 
1867
        Note that relpath must be a relative path, not a full url.
 
1868
        """
 
1869
        # FIXME: If you create a remoterepository this returns the underlying
 
1870
        # real format, which is incorrect.  Actually we should make sure that 
 
1871
        # RemoteBzrDir returns a RemoteRepository.
 
1872
        # maybe  mbp 20070410
 
1873
        made_control = self.make_bzrdir(relpath, format=format)
 
1874
        return made_control.create_repository(shared=shared)
 
1875
 
 
1876
    def make_branch_and_memory_tree(self, relpath, format=None):
 
1877
        """Create a branch on the default transport and a MemoryTree for it."""
 
1878
        b = self.make_branch(relpath, format=format)
 
1879
        return memorytree.MemoryTree.create_on_branch(b)
 
1880
 
 
1881
    def overrideEnvironmentForTesting(self):
 
1882
        os.environ['HOME'] = self.test_home_dir
 
1883
        os.environ['BZR_HOME'] = self.test_home_dir
 
1884
        
 
1885
    def setUp(self):
 
1886
        super(TestCaseWithMemoryTransport, self).setUp()
 
1887
        self._make_test_root()
 
1888
        _currentdir = os.getcwdu()
 
1889
        def _leaveDirectory():
 
1890
            os.chdir(_currentdir)
 
1891
        self.addCleanup(_leaveDirectory)
 
1892
        self.makeAndChdirToTestDir()
 
1893
        self.overrideEnvironmentForTesting()
 
1894
        self.__readonly_server = None
 
1895
        self.__server = None
 
1896
        self.reduceLockdirTimeout()
 
1897
 
 
1898
     
 
1899
class TestCaseInTempDir(TestCaseWithMemoryTransport):
 
1900
    """Derived class that runs a test within a temporary directory.
 
1901
 
 
1902
    This is useful for tests that need to create a branch, etc.
 
1903
 
 
1904
    The directory is created in a slightly complex way: for each
 
1905
    Python invocation, a new temporary top-level directory is created.
 
1906
    All test cases create their own directory within that.  If the
 
1907
    tests complete successfully, the directory is removed.
 
1908
 
 
1909
    :ivar test_base_dir: The path of the top-level directory for this 
 
1910
    test, which contains a home directory and a work directory.
 
1911
 
 
1912
    :ivar test_home_dir: An initially empty directory under test_base_dir
 
1913
    which is used as $HOME for this test.
 
1914
 
 
1915
    :ivar test_dir: A directory under test_base_dir used as the current
 
1916
    directory when the test proper is run.
 
1917
    """
 
1918
 
 
1919
    OVERRIDE_PYTHON = 'python'
 
1920
 
 
1921
    def check_file_contents(self, filename, expect):
 
1922
        self.log("check contents of file %s" % filename)
 
1923
        contents = file(filename, 'r').read()
 
1924
        if contents != expect:
 
1925
            self.log("expected: %r" % expect)
 
1926
            self.log("actually: %r" % contents)
 
1927
            self.fail("contents of %s not as expected" % filename)
 
1928
 
 
1929
    def makeAndChdirToTestDir(self):
 
1930
        """See TestCaseWithMemoryTransport.makeAndChdirToTestDir().
 
1931
        
 
1932
        For TestCaseInTempDir we create a temporary directory based on the test
 
1933
        name and then create two subdirs - test and home under it.
 
1934
        """
 
1935
        # create a directory within the top level test directory
 
1936
        candidate_dir = tempfile.mkdtemp(dir=self.TEST_ROOT)
 
1937
        # now create test and home directories within this dir
 
1938
        self.test_base_dir = candidate_dir
 
1939
        self.test_home_dir = self.test_base_dir + '/home'
 
1940
        os.mkdir(self.test_home_dir)
 
1941
        self.test_dir = self.test_base_dir + '/work'
 
1942
        os.mkdir(self.test_dir)
 
1943
        os.chdir(self.test_dir)
 
1944
        # put name of test inside
 
1945
        f = file(self.test_base_dir + '/name', 'w')
 
1946
        try:
 
1947
            f.write(self.id())
 
1948
        finally:
 
1949
            f.close()
 
1950
        self.addCleanup(self.deleteTestDir)
 
1951
 
 
1952
    def deleteTestDir(self):
 
1953
        os.chdir(self.TEST_ROOT)
 
1954
        _rmtree_temp_dir(self.test_base_dir)
 
1955
 
 
1956
    def build_tree(self, shape, line_endings='binary', transport=None):
 
1957
        """Build a test tree according to a pattern.
 
1958
 
 
1959
        shape is a sequence of file specifications.  If the final
 
1960
        character is '/', a directory is created.
 
1961
 
 
1962
        This assumes that all the elements in the tree being built are new.
 
1963
 
 
1964
        This doesn't add anything to a branch.
 
1965
 
 
1966
        :param line_endings: Either 'binary' or 'native'
 
1967
            in binary mode, exact contents are written in native mode, the
 
1968
            line endings match the default platform endings.
 
1969
        :param transport: A transport to write to, for building trees on VFS's.
 
1970
            If the transport is readonly or None, "." is opened automatically.
 
1971
        :return: None
 
1972
        """
 
1973
        # It's OK to just create them using forward slashes on windows.
 
1974
        if transport is None or transport.is_readonly():
 
1975
            transport = get_transport(".")
 
1976
        for name in shape:
 
1977
            self.assert_(isinstance(name, basestring))
 
1978
            if name[-1] == '/':
 
1979
                transport.mkdir(urlutils.escape(name[:-1]))
 
1980
            else:
 
1981
                if line_endings == 'binary':
 
1982
                    end = '\n'
 
1983
                elif line_endings == 'native':
 
1984
                    end = os.linesep
 
1985
                else:
 
1986
                    raise errors.BzrError(
 
1987
                        'Invalid line ending request %r' % line_endings)
 
1988
                content = "contents of %s%s" % (name.encode('utf-8'), end)
 
1989
                transport.put_bytes_non_atomic(urlutils.escape(name), content)
 
1990
 
 
1991
    def build_tree_contents(self, shape):
 
1992
        build_tree_contents(shape)
 
1993
 
 
1994
    def assertFileEqual(self, content, path):
 
1995
        """Fail if path does not contain 'content'."""
 
1996
        self.failUnlessExists(path)
 
1997
        f = file(path, 'rb')
 
1998
        try:
 
1999
            s = f.read()
 
2000
        finally:
 
2001
            f.close()
 
2002
        self.assertEqualDiff(content, s)
 
2003
 
 
2004
    def failUnlessExists(self, path):
 
2005
        """Fail unless path or paths, which may be abs or relative, exist."""
 
2006
        if not isinstance(path, basestring):
 
2007
            for p in path:
 
2008
                self.failUnlessExists(p)
 
2009
        else:
 
2010
            self.failUnless(osutils.lexists(path),path+" does not exist")
 
2011
 
 
2012
    def failIfExists(self, path):
 
2013
        """Fail if path or paths, which may be abs or relative, exist."""
 
2014
        if not isinstance(path, basestring):
 
2015
            for p in path:
 
2016
                self.failIfExists(p)
 
2017
        else:
 
2018
            self.failIf(osutils.lexists(path),path+" exists")
 
2019
 
 
2020
    def assertInWorkingTree(self,path,root_path='.',tree=None):
 
2021
        """Assert whether path or paths are in the WorkingTree"""
 
2022
        if tree is None:
 
2023
            tree = workingtree.WorkingTree.open(root_path)
 
2024
        if not isinstance(path, basestring):
 
2025
            for p in path:
 
2026
                self.assertInWorkingTree(p,tree=tree)
 
2027
        else:
 
2028
            self.assertIsNot(tree.path2id(path), None,
 
2029
                path+' not in working tree.')
 
2030
 
 
2031
    def assertNotInWorkingTree(self,path,root_path='.',tree=None):
 
2032
        """Assert whether path or paths are not in the WorkingTree"""
 
2033
        if tree is None:
 
2034
            tree = workingtree.WorkingTree.open(root_path)
 
2035
        if not isinstance(path, basestring):
 
2036
            for p in path:
 
2037
                self.assertNotInWorkingTree(p,tree=tree)
 
2038
        else:
 
2039
            self.assertIs(tree.path2id(path), None, path+' in working tree.')
 
2040
 
 
2041
 
 
2042
class TestCaseWithTransport(TestCaseInTempDir):
 
2043
    """A test case that provides get_url and get_readonly_url facilities.
 
2044
 
 
2045
    These back onto two transport servers, one for readonly access and one for
 
2046
    read write access.
 
2047
 
 
2048
    If no explicit class is provided for readonly access, a
 
2049
    ReadonlyTransportDecorator is used instead which allows the use of non disk
 
2050
    based read write transports.
 
2051
 
 
2052
    If an explicit class is provided for readonly access, that server and the 
 
2053
    readwrite one must both define get_url() as resolving to os.getcwd().
 
2054
    """
 
2055
 
 
2056
    def get_vfs_only_server(self):
 
2057
        """See TestCaseWithMemoryTransport.
 
2058
 
 
2059
        This is useful for some tests with specific servers that need
 
2060
        diagnostics.
 
2061
        """
 
2062
        if self.__vfs_server is None:
 
2063
            self.__vfs_server = self.vfs_transport_factory()
 
2064
            self.__vfs_server.setUp()
 
2065
            self.addCleanup(self.__vfs_server.tearDown)
 
2066
        return self.__vfs_server
 
2067
 
 
2068
    def make_branch_and_tree(self, relpath, format=None):
 
2069
        """Create a branch on the transport and a tree locally.
 
2070
 
 
2071
        If the transport is not a LocalTransport, the Tree can't be created on
 
2072
        the transport.  In that case if the vfs_transport_factory is
 
2073
        LocalURLServer the working tree is created in the local
 
2074
        directory backing the transport, and the returned tree's branch and
 
2075
        repository will also be accessed locally. Otherwise a lightweight
 
2076
        checkout is created and returned.
 
2077
 
 
2078
        :param format: The BzrDirFormat.
 
2079
        :returns: the WorkingTree.
 
2080
        """
 
2081
        # TODO: always use the local disk path for the working tree,
 
2082
        # this obviously requires a format that supports branch references
 
2083
        # so check for that by checking bzrdir.BzrDirFormat.get_default_format()
 
2084
        # RBC 20060208
 
2085
        b = self.make_branch(relpath, format=format)
 
2086
        try:
 
2087
            return b.bzrdir.create_workingtree()
 
2088
        except errors.NotLocalUrl:
 
2089
            # We can only make working trees locally at the moment.  If the
 
2090
            # transport can't support them, then we keep the non-disk-backed
 
2091
            # branch and create a local checkout.
 
2092
            if self.vfs_transport_factory is LocalURLServer:
 
2093
                # the branch is colocated on disk, we cannot create a checkout.
 
2094
                # hopefully callers will expect this.
 
2095
                local_controldir= bzrdir.BzrDir.open(self.get_vfs_only_url(relpath))
 
2096
                return local_controldir.create_workingtree()
 
2097
            else:
 
2098
                return b.create_checkout(relpath, lightweight=True)
 
2099
 
 
2100
    def assertIsDirectory(self, relpath, transport):
 
2101
        """Assert that relpath within transport is a directory.
 
2102
 
 
2103
        This may not be possible on all transports; in that case it propagates
 
2104
        a TransportNotPossible.
 
2105
        """
 
2106
        try:
 
2107
            mode = transport.stat(relpath).st_mode
 
2108
        except errors.NoSuchFile:
 
2109
            self.fail("path %s is not a directory; no such file"
 
2110
                      % (relpath))
 
2111
        if not stat.S_ISDIR(mode):
 
2112
            self.fail("path %s is not a directory; has mode %#o"
 
2113
                      % (relpath, mode))
 
2114
 
 
2115
    def assertTreesEqual(self, left, right):
 
2116
        """Check that left and right have the same content and properties."""
 
2117
        # we use a tree delta to check for equality of the content, and we
 
2118
        # manually check for equality of other things such as the parents list.
 
2119
        self.assertEqual(left.get_parent_ids(), right.get_parent_ids())
 
2120
        differences = left.changes_from(right)
 
2121
        self.assertFalse(differences.has_changed(),
 
2122
            "Trees %r and %r are different: %r" % (left, right, differences))
 
2123
 
 
2124
    def setUp(self):
 
2125
        super(TestCaseWithTransport, self).setUp()
 
2126
        self.__vfs_server = None
 
2127
 
 
2128
 
 
2129
class ChrootedTestCase(TestCaseWithTransport):
 
2130
    """A support class that provides readonly urls outside the local namespace.
 
2131
 
 
2132
    This is done by checking if self.transport_server is a MemoryServer. if it
 
2133
    is then we are chrooted already, if it is not then an HttpServer is used
 
2134
    for readonly urls.
 
2135
 
 
2136
    TODO RBC 20060127: make this an option to TestCaseWithTransport so it can
 
2137
                       be used without needed to redo it when a different 
 
2138
                       subclass is in use ?
 
2139
    """
 
2140
 
 
2141
    def setUp(self):
 
2142
        super(ChrootedTestCase, self).setUp()
 
2143
        if not self.vfs_transport_factory == MemoryServer:
 
2144
            self.transport_readonly_server = HttpServer
 
2145
 
 
2146
 
 
2147
def filter_suite_by_re(suite, pattern, exclude_pattern=None,
 
2148
                       random_order=False):
 
2149
    """Create a test suite by filtering another one.
 
2150
    
 
2151
    :param suite:           the source suite
 
2152
    :param pattern:         pattern that names must match
 
2153
    :param exclude_pattern: pattern that names must not match, if any
 
2154
    :param random_order:    if True, tests in the new suite will be put in
 
2155
                            random order
 
2156
    :returns: the newly created suite
 
2157
    """ 
 
2158
    return sort_suite_by_re(suite, pattern, exclude_pattern,
 
2159
        random_order, False)
 
2160
 
 
2161
 
 
2162
def sort_suite_by_re(suite, pattern, exclude_pattern=None,
 
2163
                     random_order=False, append_rest=True):
 
2164
    """Create a test suite by sorting another one.
 
2165
    
 
2166
    :param suite:           the source suite
 
2167
    :param pattern:         pattern that names must match in order to go
 
2168
                            first in the new suite
 
2169
    :param exclude_pattern: pattern that names must not match, if any
 
2170
    :param random_order:    if True, tests in the new suite will be put in
 
2171
                            random order
 
2172
    :param append_rest:     if False, pattern is a strict filter and not
 
2173
                            just an ordering directive
 
2174
    :returns: the newly created suite
 
2175
    """ 
 
2176
    first = []
 
2177
    second = []
 
2178
    filter_re = re.compile(pattern)
 
2179
    if exclude_pattern is not None:
 
2180
        exclude_re = re.compile(exclude_pattern)
 
2181
    for test in iter_suite_tests(suite):
 
2182
        test_id = test.id()
 
2183
        if exclude_pattern is None or not exclude_re.search(test_id):
 
2184
            if filter_re.search(test_id):
 
2185
                first.append(test)
 
2186
            elif append_rest:
 
2187
                second.append(test)
 
2188
    if random_order:
 
2189
        random.shuffle(first)
 
2190
        random.shuffle(second)
 
2191
    return TestUtil.TestSuite(first + second)
 
2192
 
 
2193
 
 
2194
def run_suite(suite, name='test', verbose=False, pattern=".*",
 
2195
              stop_on_failure=False,
 
2196
              transport=None, lsprof_timed=None, bench_history=None,
 
2197
              matching_tests_first=None,
 
2198
              list_only=False,
 
2199
              random_seed=None,
 
2200
              exclude_pattern=None,
 
2201
              strict=False,
 
2202
              ):
 
2203
    TestCase._gather_lsprof_in_benchmarks = lsprof_timed
 
2204
    if verbose:
 
2205
        verbosity = 2
 
2206
    else:
 
2207
        verbosity = 1
 
2208
    runner = TextTestRunner(stream=sys.stdout,
 
2209
                            descriptions=0,
 
2210
                            verbosity=verbosity,
 
2211
                            bench_history=bench_history,
 
2212
                            list_only=list_only,
 
2213
                            )
 
2214
    runner.stop_on_failure=stop_on_failure
 
2215
    # Initialise the random number generator and display the seed used.
 
2216
    # We convert the seed to a long to make it reuseable across invocations.
 
2217
    random_order = False
 
2218
    if random_seed is not None:
 
2219
        random_order = True
 
2220
        if random_seed == "now":
 
2221
            random_seed = long(time.time())
 
2222
        else:
 
2223
            # Convert the seed to a long if we can
 
2224
            try:
 
2225
                random_seed = long(random_seed)
 
2226
            except:
 
2227
                pass
 
2228
        runner.stream.writeln("Randomizing test order using seed %s\n" %
 
2229
            (random_seed))
 
2230
        random.seed(random_seed)
 
2231
    # Customise the list of tests if requested
 
2232
    if pattern != '.*' or exclude_pattern is not None or random_order:
 
2233
        if matching_tests_first:
 
2234
            suite = sort_suite_by_re(suite, pattern, exclude_pattern,
 
2235
                random_order)
 
2236
        else:
 
2237
            suite = filter_suite_by_re(suite, pattern, exclude_pattern,
 
2238
                random_order)
 
2239
    result = runner.run(suite)
 
2240
 
 
2241
    if strict:
 
2242
        return result.wasStrictlySuccessful()
 
2243
 
 
2244
    return result.wasSuccessful()
 
2245
 
 
2246
 
 
2247
def selftest(verbose=False, pattern=".*", stop_on_failure=True,
 
2248
             transport=None,
 
2249
             test_suite_factory=None,
 
2250
             lsprof_timed=None,
 
2251
             bench_history=None,
 
2252
             matching_tests_first=None,
 
2253
             list_only=False,
 
2254
             random_seed=None,
 
2255
             exclude_pattern=None,
 
2256
             strict=False,
 
2257
             ):
 
2258
    """Run the whole test suite under the enhanced runner"""
 
2259
    # XXX: Very ugly way to do this...
 
2260
    # Disable warning about old formats because we don't want it to disturb
 
2261
    # any blackbox tests.
 
2262
    from bzrlib import repository
 
2263
    repository._deprecation_warning_done = True
 
2264
 
 
2265
    global default_transport
 
2266
    if transport is None:
 
2267
        transport = default_transport
 
2268
    old_transport = default_transport
 
2269
    default_transport = transport
 
2270
    try:
 
2271
        if test_suite_factory is None:
 
2272
            suite = test_suite()
 
2273
        else:
 
2274
            suite = test_suite_factory()
 
2275
        return run_suite(suite, 'testbzr', verbose=verbose, pattern=pattern,
 
2276
                     stop_on_failure=stop_on_failure,
 
2277
                     transport=transport,
 
2278
                     lsprof_timed=lsprof_timed,
 
2279
                     bench_history=bench_history,
 
2280
                     matching_tests_first=matching_tests_first,
 
2281
                     list_only=list_only,
 
2282
                     random_seed=random_seed,
 
2283
                     exclude_pattern=exclude_pattern,
 
2284
                     strict=strict)
 
2285
    finally:
 
2286
        default_transport = old_transport
 
2287
 
 
2288
 
 
2289
def test_suite():
 
2290
    """Build and return TestSuite for the whole of bzrlib.
 
2291
    
 
2292
    This function can be replaced if you need to change the default test
 
2293
    suite on a global basis, but it is not encouraged.
 
2294
    """
 
2295
    testmod_names = [
 
2296
                   'bzrlib.util.tests.test_bencode',
 
2297
                   'bzrlib.tests.test__dirstate_helpers',
 
2298
                   'bzrlib.tests.test_ancestry',
 
2299
                   'bzrlib.tests.test_annotate',
 
2300
                   'bzrlib.tests.test_api',
 
2301
                   'bzrlib.tests.test_atomicfile',
 
2302
                   'bzrlib.tests.test_bad_files',
 
2303
                   'bzrlib.tests.test_branch',
 
2304
                   'bzrlib.tests.test_branchbuilder',
 
2305
                   'bzrlib.tests.test_bugtracker',
 
2306
                   'bzrlib.tests.test_bundle',
 
2307
                   'bzrlib.tests.test_bzrdir',
 
2308
                   'bzrlib.tests.test_cache_utf8',
 
2309
                   'bzrlib.tests.test_commands',
 
2310
                   'bzrlib.tests.test_commit',
 
2311
                   'bzrlib.tests.test_commit_merge',
 
2312
                   'bzrlib.tests.test_config',
 
2313
                   'bzrlib.tests.test_conflicts',
 
2314
                   'bzrlib.tests.test_counted_lock',
 
2315
                   'bzrlib.tests.test_decorators',
 
2316
                   'bzrlib.tests.test_delta',
 
2317
                   'bzrlib.tests.test_deprecated_graph',
 
2318
                   'bzrlib.tests.test_diff',
 
2319
                   'bzrlib.tests.test_dirstate',
 
2320
                   'bzrlib.tests.test_email_message',
 
2321
                   'bzrlib.tests.test_errors',
 
2322
                   'bzrlib.tests.test_escaped_store',
 
2323
                   'bzrlib.tests.test_extract',
 
2324
                   'bzrlib.tests.test_fetch',
 
2325
                   'bzrlib.tests.test_ftp_transport',
 
2326
                   'bzrlib.tests.test_generate_docs',
 
2327
                   'bzrlib.tests.test_generate_ids',
 
2328
                   'bzrlib.tests.test_globbing',
 
2329
                   'bzrlib.tests.test_gpg',
 
2330
                   'bzrlib.tests.test_graph',
 
2331
                   'bzrlib.tests.test_hashcache',
 
2332
                   'bzrlib.tests.test_help',
 
2333
                   'bzrlib.tests.test_hooks',
 
2334
                   'bzrlib.tests.test_http',
 
2335
                   'bzrlib.tests.test_http_response',
 
2336
                   'bzrlib.tests.test_https_ca_bundle',
 
2337
                   'bzrlib.tests.test_identitymap',
 
2338
                   'bzrlib.tests.test_ignores',
 
2339
                   'bzrlib.tests.test_index',
 
2340
                   'bzrlib.tests.test_info',
 
2341
                   'bzrlib.tests.test_inv',
 
2342
                   'bzrlib.tests.test_knit',
 
2343
                   'bzrlib.tests.test_lazy_import',
 
2344
                   'bzrlib.tests.test_lazy_regex',
 
2345
                   'bzrlib.tests.test_lockdir',
 
2346
                   'bzrlib.tests.test_lockable_files',
 
2347
                   'bzrlib.tests.test_log',
 
2348
                   'bzrlib.tests.test_lsprof',
 
2349
                   'bzrlib.tests.test_mail_client',
 
2350
                   'bzrlib.tests.test_memorytree',
 
2351
                   'bzrlib.tests.test_merge',
 
2352
                   'bzrlib.tests.test_merge3',
 
2353
                   'bzrlib.tests.test_merge_core',
 
2354
                   'bzrlib.tests.test_merge_directive',
 
2355
                   'bzrlib.tests.test_missing',
 
2356
                   'bzrlib.tests.test_msgeditor',
 
2357
                   'bzrlib.tests.test_multiparent',
 
2358
                   'bzrlib.tests.test_nonascii',
 
2359
                   'bzrlib.tests.test_options',
 
2360
                   'bzrlib.tests.test_osutils',
 
2361
                   'bzrlib.tests.test_osutils_encodings',
 
2362
                   'bzrlib.tests.test_pack',
 
2363
                   'bzrlib.tests.test_patch',
 
2364
                   'bzrlib.tests.test_patches',
 
2365
                   'bzrlib.tests.test_permissions',
 
2366
                   'bzrlib.tests.test_plugins',
 
2367
                   'bzrlib.tests.test_progress',
 
2368
                   'bzrlib.tests.test_reconcile',
 
2369
                   'bzrlib.tests.test_registry',
 
2370
                   'bzrlib.tests.test_remote',
 
2371
                   'bzrlib.tests.test_repository',
 
2372
                   'bzrlib.tests.test_revert',
 
2373
                   'bzrlib.tests.test_revision',
 
2374
                   'bzrlib.tests.test_revisionnamespaces',
 
2375
                   'bzrlib.tests.test_revisiontree',
 
2376
                   'bzrlib.tests.test_rio',
 
2377
                   'bzrlib.tests.test_sampler',
 
2378
                   'bzrlib.tests.test_selftest',
 
2379
                   'bzrlib.tests.test_setup',
 
2380
                   'bzrlib.tests.test_sftp_transport',
 
2381
                   'bzrlib.tests.test_smart',
 
2382
                   'bzrlib.tests.test_smart_add',
 
2383
                   'bzrlib.tests.test_smart_transport',
 
2384
                   'bzrlib.tests.test_smtp_connection',
 
2385
                   'bzrlib.tests.test_source',
 
2386
                   'bzrlib.tests.test_ssh_transport',
 
2387
                   'bzrlib.tests.test_status',
 
2388
                   'bzrlib.tests.test_store',
 
2389
                   'bzrlib.tests.test_strace',
 
2390
                   'bzrlib.tests.test_subsume',
 
2391
                   'bzrlib.tests.test_symbol_versioning',
 
2392
                   'bzrlib.tests.test_tag',
 
2393
                   'bzrlib.tests.test_testament',
 
2394
                   'bzrlib.tests.test_textfile',
 
2395
                   'bzrlib.tests.test_textmerge',
 
2396
                   'bzrlib.tests.test_timestamp',
 
2397
                   'bzrlib.tests.test_trace',
 
2398
                   'bzrlib.tests.test_transactions',
 
2399
                   'bzrlib.tests.test_transform',
 
2400
                   'bzrlib.tests.test_transport',
 
2401
                   'bzrlib.tests.test_tree',
 
2402
                   'bzrlib.tests.test_treebuilder',
 
2403
                   'bzrlib.tests.test_tsort',
 
2404
                   'bzrlib.tests.test_tuned_gzip',
 
2405
                   'bzrlib.tests.test_ui',
 
2406
                   'bzrlib.tests.test_upgrade',
 
2407
                   'bzrlib.tests.test_urlutils',
 
2408
                   'bzrlib.tests.test_versionedfile',
 
2409
                   'bzrlib.tests.test_version',
 
2410
                   'bzrlib.tests.test_version_info',
 
2411
                   'bzrlib.tests.test_weave',
 
2412
                   'bzrlib.tests.test_whitebox',
 
2413
                   'bzrlib.tests.test_win32utils',
 
2414
                   'bzrlib.tests.test_workingtree',
 
2415
                   'bzrlib.tests.test_workingtree_4',
 
2416
                   'bzrlib.tests.test_wsgi',
 
2417
                   'bzrlib.tests.test_xml',
 
2418
                   ]
 
2419
    test_transport_implementations = [
 
2420
        'bzrlib.tests.test_transport_implementations',
 
2421
        'bzrlib.tests.test_read_bundle',
 
2422
        ]
 
2423
    suite = TestUtil.TestSuite()
 
2424
    loader = TestUtil.TestLoader()
 
2425
    suite.addTest(loader.loadTestsFromModuleNames(testmod_names))
 
2426
    from bzrlib.tests.test_transport_implementations import TransportTestProviderAdapter
 
2427
    adapter = TransportTestProviderAdapter()
 
2428
    adapt_modules(test_transport_implementations, adapter, loader, suite)
 
2429
    for package in packages_to_test():
 
2430
        suite.addTest(package.test_suite())
 
2431
    for m in MODULES_TO_TEST:
 
2432
        suite.addTest(loader.loadTestsFromModule(m))
 
2433
    for m in MODULES_TO_DOCTEST:
 
2434
        try:
 
2435
            suite.addTest(doctest.DocTestSuite(m))
 
2436
        except ValueError, e:
 
2437
            print '**failed to get doctest for: %s\n%s' %(m,e)
 
2438
            raise
 
2439
    for name, plugin in bzrlib.plugin.all_plugins().items():
 
2440
        if getattr(plugin, 'test_suite', None) is not None:
 
2441
            default_encoding = sys.getdefaultencoding()
 
2442
            try:
 
2443
                plugin_suite = plugin.test_suite()
 
2444
            except ImportError, e:
 
2445
                bzrlib.trace.warning(
 
2446
                    'Unable to test plugin "%s": %s', name, e)
 
2447
            else:
 
2448
                suite.addTest(plugin_suite)
 
2449
            if default_encoding != sys.getdefaultencoding():
 
2450
                bzrlib.trace.warning(
 
2451
                    'Plugin "%s" tried to reset default encoding to: %s', name,
 
2452
                    sys.getdefaultencoding())
 
2453
                reload(sys)
 
2454
                sys.setdefaultencoding(default_encoding)
 
2455
    return suite
 
2456
 
 
2457
 
 
2458
def adapt_modules(mods_list, adapter, loader, suite):
 
2459
    """Adapt the modules in mods_list using adapter and add to suite."""
 
2460
    for test in iter_suite_tests(loader.loadTestsFromModuleNames(mods_list)):
 
2461
        suite.addTests(adapter.adapt(test))
 
2462
 
 
2463
 
 
2464
def _rmtree_temp_dir(dirname):
 
2465
    # If LANG=C we probably have created some bogus paths
 
2466
    # which rmtree(unicode) will fail to delete
 
2467
    # so make sure we are using rmtree(str) to delete everything
 
2468
    # except on win32, where rmtree(str) will fail
 
2469
    # since it doesn't have the property of byte-stream paths
 
2470
    # (they are either ascii or mbcs)
 
2471
    if sys.platform == 'win32':
 
2472
        # make sure we are using the unicode win32 api
 
2473
        dirname = unicode(dirname)
 
2474
    else:
 
2475
        dirname = dirname.encode(sys.getfilesystemencoding())
 
2476
    try:
 
2477
        osutils.rmtree(dirname)
 
2478
    except OSError, e:
 
2479
        if sys.platform == 'win32' and e.errno == errno.EACCES:
 
2480
            print >>sys.stderr, ('Permission denied: '
 
2481
                                 'unable to remove testing dir '
 
2482
                                 '%s' % os.path.basename(dirname))
 
2483
        else:
 
2484
            raise
 
2485
 
 
2486
 
 
2487
class Feature(object):
 
2488
    """An operating system Feature."""
 
2489
 
 
2490
    def __init__(self):
 
2491
        self._available = None
 
2492
 
 
2493
    def available(self):
 
2494
        """Is the feature available?
 
2495
 
 
2496
        :return: True if the feature is available.
 
2497
        """
 
2498
        if self._available is None:
 
2499
            self._available = self._probe()
 
2500
        return self._available
 
2501
 
 
2502
    def _probe(self):
 
2503
        """Implement this method in concrete features.
 
2504
 
 
2505
        :return: True if the feature is available.
 
2506
        """
 
2507
        raise NotImplementedError
 
2508
 
 
2509
    def __str__(self):
 
2510
        if getattr(self, 'feature_name', None):
 
2511
            return self.feature_name()
 
2512
        return self.__class__.__name__
 
2513
 
 
2514
 
 
2515
class TestScenarioApplier(object):
 
2516
    """A tool to apply scenarios to tests."""
 
2517
 
 
2518
    def adapt(self, test):
 
2519
        """Return a TestSuite containing a copy of test for each scenario."""
 
2520
        result = unittest.TestSuite()
 
2521
        for scenario in self.scenarios:
 
2522
            result.addTest(self.adapt_test_to_scenario(test, scenario))
 
2523
        return result
 
2524
 
 
2525
    def adapt_test_to_scenario(self, test, scenario):
 
2526
        """Copy test and apply scenario to it.
 
2527
 
 
2528
        :param test: A test to adapt.
 
2529
        :param scenario: A tuple describing the scenarion.
 
2530
            The first element of the tuple is the new test id.
 
2531
            The second element is a dict containing attributes to set on the
 
2532
            test.
 
2533
        :return: The adapted test.
 
2534
        """
 
2535
        from copy import deepcopy
 
2536
        new_test = deepcopy(test)
 
2537
        for name, value in scenario[1].items():
 
2538
            setattr(new_test, name, value)
 
2539
        new_id = "%s(%s)" % (new_test.id(), scenario[0])
 
2540
        new_test.id = lambda: new_id
 
2541
        return new_test