/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/tests/__init__.py

  • Committer: Aaron Bentley
  • Date: 2006-06-06 22:47:43 UTC
  • mto: This revision was merged to the branch mainline in revision 1745.
  • Revision ID: aaron.bentley@utoronto.ca-20060606224743-fae7fc6407ed27f8
Update test for new interface

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005, 2006 by Canonical Ltd
 
2
 
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
 
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
 
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
 
 
18
# TODO: Perhaps there should be an API to find out if bzr running under the
 
19
# test suite -- some plugins might want to avoid making intrusive changes if
 
20
# this is the case.  However, we want behaviour under to test to diverge as
 
21
# little as possible, so this should be used rarely if it's added at all.
 
22
# (Suggestion from j-a-meinel, 2005-11-24)
 
23
 
 
24
# NOTE: Some classes in here use camelCaseNaming() rather than
 
25
# underscore_naming().  That's for consistency with unittest; it's not the
 
26
# general style of bzrlib.  Please continue that consistency when adding e.g.
 
27
# new assertFoo() methods.
 
28
 
 
29
import codecs
 
30
from cStringIO import StringIO
 
31
import difflib
 
32
import errno
 
33
import logging
 
34
import os
 
35
import re
 
36
import stat
 
37
import sys
 
38
import tempfile
 
39
import unittest
 
40
import time
 
41
 
 
42
 
 
43
import bzrlib.branch
 
44
import bzrlib.bzrdir as bzrdir
 
45
import bzrlib.commands
 
46
import bzrlib.bundle.serializer
 
47
import bzrlib.errors as errors
 
48
import bzrlib.inventory
 
49
import bzrlib.iterablefile
 
50
import bzrlib.lockdir
 
51
try:
 
52
    import bzrlib.lsprof
 
53
except ImportError:
 
54
    # lsprof not available
 
55
    pass
 
56
from bzrlib.merge import merge_inner
 
57
import bzrlib.merge3
 
58
import bzrlib.osutils
 
59
import bzrlib.osutils as osutils
 
60
import bzrlib.plugin
 
61
import bzrlib.progress as progress
 
62
from bzrlib.revision import common_ancestor
 
63
import bzrlib.store
 
64
import bzrlib.trace
 
65
from bzrlib.transport import urlescape, get_transport
 
66
import bzrlib.transport
 
67
from bzrlib.transport.local import LocalRelpathServer
 
68
from bzrlib.transport.readonly import ReadonlyServer
 
69
from bzrlib.trace import mutter
 
70
from bzrlib.tests.TestUtil import TestLoader, TestSuite
 
71
from bzrlib.tests.treeshape import build_tree_contents
 
72
from bzrlib.workingtree import WorkingTree, WorkingTreeFormat2
 
73
 
 
74
default_transport = LocalRelpathServer
 
75
 
 
76
MODULES_TO_TEST = []
 
77
MODULES_TO_DOCTEST = [
 
78
                      bzrlib.branch,
 
79
                      bzrlib.bundle.serializer,
 
80
                      bzrlib.commands,
 
81
                      bzrlib.errors,
 
82
                      bzrlib.inventory,
 
83
                      bzrlib.iterablefile,
 
84
                      bzrlib.lockdir,
 
85
                      bzrlib.merge3,
 
86
                      bzrlib.option,
 
87
                      bzrlib.osutils,
 
88
                      bzrlib.store
 
89
                      ]
 
90
 
 
91
 
 
92
def packages_to_test():
 
93
    """Return a list of packages to test.
 
94
 
 
95
    The packages are not globally imported so that import failures are
 
96
    triggered when running selftest, not when importing the command.
 
97
    """
 
98
    import bzrlib.doc
 
99
    import bzrlib.tests.blackbox
 
100
    import bzrlib.tests.branch_implementations
 
101
    import bzrlib.tests.bzrdir_implementations
 
102
    import bzrlib.tests.interrepository_implementations
 
103
    import bzrlib.tests.interversionedfile_implementations
 
104
    import bzrlib.tests.repository_implementations
 
105
    import bzrlib.tests.revisionstore_implementations
 
106
    import bzrlib.tests.workingtree_implementations
 
107
    return [
 
108
            bzrlib.doc,
 
109
            bzrlib.tests.blackbox,
 
110
            bzrlib.tests.branch_implementations,
 
111
            bzrlib.tests.bzrdir_implementations,
 
112
            bzrlib.tests.interrepository_implementations,
 
113
            bzrlib.tests.interversionedfile_implementations,
 
114
            bzrlib.tests.repository_implementations,
 
115
            bzrlib.tests.revisionstore_implementations,
 
116
            bzrlib.tests.workingtree_implementations,
 
117
            ]
 
118
 
 
119
 
 
120
class _MyResult(unittest._TextTestResult):
 
121
    """Custom TestResult.
 
122
 
 
123
    Shows output in a different format, including displaying runtime for tests.
 
124
    """
 
125
    stop_early = False
 
126
    
 
127
    def __init__(self, stream, descriptions, verbosity, pb=None):
 
128
        unittest._TextTestResult.__init__(self, stream, descriptions, verbosity)
 
129
        self.pb = pb
 
130
    
 
131
    def extractBenchmarkTime(self, testCase):
 
132
        """Add a benchmark time for the current test case."""
 
133
        self._benchmarkTime = getattr(testCase, "_benchtime", None)
 
134
    
 
135
    def _elapsedTestTimeString(self):
 
136
        """Return a time string for the overall time the current test has taken."""
 
137
        return self._formatTime(time.time() - self._start_time)
 
138
 
 
139
    def _testTimeString(self):
 
140
        if self._benchmarkTime is not None:
 
141
            return "%s/%s" % (
 
142
                self._formatTime(self._benchmarkTime),
 
143
                self._elapsedTestTimeString())
 
144
        else:
 
145
            return "      %s" % self._elapsedTestTimeString()
 
146
 
 
147
    def _formatTime(self, seconds):
 
148
        """Format seconds as milliseconds with leading spaces."""
 
149
        return "%5dms" % (1000 * seconds)
 
150
 
 
151
    def _ellipsise_unimportant_words(self, a_string, final_width,
 
152
                                   keep_start=False):
 
153
        """Add ellipses (sp?) for overly long strings.
 
154
        
 
155
        :param keep_start: If true preserve the start of a_string rather
 
156
                           than the end of it.
 
157
        """
 
158
        if keep_start:
 
159
            if len(a_string) > final_width:
 
160
                result = a_string[:final_width-3] + '...'
 
161
            else:
 
162
                result = a_string
 
163
        else:
 
164
            if len(a_string) > final_width:
 
165
                result = '...' + a_string[3-final_width:]
 
166
            else:
 
167
                result = a_string
 
168
        return result.ljust(final_width)
 
169
 
 
170
    def startTest(self, test):
 
171
        unittest.TestResult.startTest(self, test)
 
172
        # In a short description, the important words are in
 
173
        # the beginning, but in an id, the important words are
 
174
        # at the end
 
175
        SHOW_DESCRIPTIONS = False
 
176
 
 
177
        if not self.showAll and self.dots and self.pb is not None:
 
178
            final_width = 13
 
179
        else:
 
180
            final_width = osutils.terminal_width()
 
181
            final_width = final_width - 15 - 8
 
182
        what = None
 
183
        if SHOW_DESCRIPTIONS:
 
184
            what = test.shortDescription()
 
185
            if what:
 
186
                what = self._ellipsise_unimportant_words(what, final_width, keep_start=True)
 
187
        if what is None:
 
188
            what = test.id()
 
189
            if what.startswith('bzrlib.tests.'):
 
190
                what = what[13:]
 
191
            what = self._ellipsise_unimportant_words(what, final_width)
 
192
        if self.showAll:
 
193
            self.stream.write(what)
 
194
        elif self.dots and self.pb is not None:
 
195
            self.pb.update(what, self.testsRun - 1, None)
 
196
        self.stream.flush()
 
197
        self._recordTestStartTime()
 
198
 
 
199
    def _recordTestStartTime(self):
 
200
        """Record that a test has started."""
 
201
        self._start_time = time.time()
 
202
 
 
203
    def addError(self, test, err):
 
204
        if isinstance(err[1], TestSkipped):
 
205
            return self.addSkipped(test, err)    
 
206
        unittest.TestResult.addError(self, test, err)
 
207
        self.extractBenchmarkTime(test)
 
208
        if self.showAll:
 
209
            self.stream.writeln("ERROR %s" % self._testTimeString())
 
210
        elif self.dots and self.pb is None:
 
211
            self.stream.write('E')
 
212
        elif self.dots:
 
213
            self.pb.update(self._ellipsise_unimportant_words('ERROR', 13), self.testsRun, None)
 
214
        self.stream.flush()
 
215
        if self.stop_early:
 
216
            self.stop()
 
217
 
 
218
    def addFailure(self, test, err):
 
219
        unittest.TestResult.addFailure(self, test, err)
 
220
        self.extractBenchmarkTime(test)
 
221
        if self.showAll:
 
222
            self.stream.writeln(" FAIL %s" % self._testTimeString())
 
223
        elif self.dots and self.pb is None:
 
224
            self.stream.write('F')
 
225
        elif self.dots:
 
226
            self.pb.update(self._ellipsise_unimportant_words('FAIL', 13), self.testsRun, None)
 
227
        self.stream.flush()
 
228
        if self.stop_early:
 
229
            self.stop()
 
230
 
 
231
    def addSuccess(self, test):
 
232
        self.extractBenchmarkTime(test)
 
233
        if self.showAll:
 
234
            self.stream.writeln('   OK %s' % self._testTimeString())
 
235
            for bench_called, stats in getattr(test, '_benchcalls', []):
 
236
                self.stream.writeln('LSProf output for %s(%s, %s)' % bench_called)
 
237
                stats.pprint(file=self.stream)
 
238
        elif self.dots and self.pb is None:
 
239
            self.stream.write('~')
 
240
        elif self.dots:
 
241
            self.pb.update(self._ellipsise_unimportant_words('OK', 13), self.testsRun, None)
 
242
        self.stream.flush()
 
243
        unittest.TestResult.addSuccess(self, test)
 
244
 
 
245
    def addSkipped(self, test, skip_excinfo):
 
246
        self.extractBenchmarkTime(test)
 
247
        if self.showAll:
 
248
            print >>self.stream, ' SKIP %s' % self._testTimeString()
 
249
            print >>self.stream, '     %s' % skip_excinfo[1]
 
250
        elif self.dots and self.pb is None:
 
251
            self.stream.write('S')
 
252
        elif self.dots:
 
253
            self.pb.update(self._ellipsise_unimportant_words('SKIP', 13), self.testsRun, None)
 
254
        self.stream.flush()
 
255
        # seems best to treat this as success from point-of-view of unittest
 
256
        # -- it actually does nothing so it barely matters :)
 
257
        unittest.TestResult.addSuccess(self, test)
 
258
 
 
259
    def printErrorList(self, flavour, errors):
 
260
        for test, err in errors:
 
261
            self.stream.writeln(self.separator1)
 
262
            self.stream.writeln("%s: %s" % (flavour, self.getDescription(test)))
 
263
            if getattr(test, '_get_log', None) is not None:
 
264
                print >>self.stream
 
265
                print >>self.stream, \
 
266
                        ('vvvv[log from %s]' % test.id()).ljust(78,'-')
 
267
                print >>self.stream, test._get_log()
 
268
                print >>self.stream, \
 
269
                        ('^^^^[log from %s]' % test.id()).ljust(78,'-')
 
270
            self.stream.writeln(self.separator2)
 
271
            self.stream.writeln("%s" % err)
 
272
 
 
273
 
 
274
class TextTestRunner(object):
 
275
    stop_on_failure = False
 
276
 
 
277
    def __init__(self,
 
278
                 stream=sys.stderr,
 
279
                 descriptions=0,
 
280
                 verbosity=1,
 
281
                 keep_output=False,
 
282
                 pb=None):
 
283
        self.stream = unittest._WritelnDecorator(stream)
 
284
        self.descriptions = descriptions
 
285
        self.verbosity = verbosity
 
286
        self.keep_output = keep_output
 
287
        self.pb = pb
 
288
 
 
289
    def _makeResult(self):
 
290
        result = _MyResult(self.stream,
 
291
                           self.descriptions,
 
292
                           self.verbosity,
 
293
                           pb=self.pb)
 
294
        result.stop_early = self.stop_on_failure
 
295
        return result
 
296
 
 
297
    def run(self, test):
 
298
        "Run the given test case or test suite."
 
299
        result = self._makeResult()
 
300
        startTime = time.time()
 
301
        if self.pb is not None:
 
302
            self.pb.update('Running tests', 0, test.countTestCases())
 
303
        test.run(result)
 
304
        stopTime = time.time()
 
305
        timeTaken = stopTime - startTime
 
306
        result.printErrors()
 
307
        self.stream.writeln(result.separator2)
 
308
        run = result.testsRun
 
309
        self.stream.writeln("Ran %d test%s in %.3fs" %
 
310
                            (run, run != 1 and "s" or "", timeTaken))
 
311
        self.stream.writeln()
 
312
        if not result.wasSuccessful():
 
313
            self.stream.write("FAILED (")
 
314
            failed, errored = map(len, (result.failures, result.errors))
 
315
            if failed:
 
316
                self.stream.write("failures=%d" % failed)
 
317
            if errored:
 
318
                if failed: self.stream.write(", ")
 
319
                self.stream.write("errors=%d" % errored)
 
320
            self.stream.writeln(")")
 
321
        else:
 
322
            self.stream.writeln("OK")
 
323
        if self.pb is not None:
 
324
            self.pb.update('Cleaning up', 0, 1)
 
325
        # This is still a little bogus, 
 
326
        # but only a little. Folk not using our testrunner will
 
327
        # have to delete their temp directories themselves.
 
328
        test_root = TestCaseInTempDir.TEST_ROOT
 
329
        if result.wasSuccessful() or not self.keep_output:
 
330
            if test_root is not None:
 
331
                    osutils.rmtree(test_root)
 
332
        else:
 
333
            if self.pb is not None:
 
334
                self.pb.note("Failed tests working directories are in '%s'\n",
 
335
                             test_root)
 
336
            else:
 
337
                self.stream.writeln(
 
338
                    "Failed tests working directories are in '%s'\n" %
 
339
                    test_root)
 
340
        TestCaseInTempDir.TEST_ROOT = None
 
341
        if self.pb is not None:
 
342
            self.pb.clear()
 
343
        return result
 
344
 
 
345
 
 
346
def iter_suite_tests(suite):
 
347
    """Return all tests in a suite, recursing through nested suites"""
 
348
    for item in suite._tests:
 
349
        if isinstance(item, unittest.TestCase):
 
350
            yield item
 
351
        elif isinstance(item, unittest.TestSuite):
 
352
            for r in iter_suite_tests(item):
 
353
                yield r
 
354
        else:
 
355
            raise Exception('unknown object %r inside test suite %r'
 
356
                            % (item, suite))
 
357
 
 
358
 
 
359
class TestSkipped(Exception):
 
360
    """Indicates that a test was intentionally skipped, rather than failing."""
 
361
    # XXX: Not used yet
 
362
 
 
363
 
 
364
class CommandFailed(Exception):
 
365
    pass
 
366
 
 
367
class TestCase(unittest.TestCase):
 
368
    """Base class for bzr unit tests.
 
369
    
 
370
    Tests that need access to disk resources should subclass 
 
371
    TestCaseInTempDir not TestCase.
 
372
 
 
373
    Error and debug log messages are redirected from their usual
 
374
    location into a temporary file, the contents of which can be
 
375
    retrieved by _get_log().  We use a real OS file, not an in-memory object,
 
376
    so that it can also capture file IO.  When the test completes this file
 
377
    is read into memory and removed from disk.
 
378
       
 
379
    There are also convenience functions to invoke bzr's command-line
 
380
    routine, and to build and check bzr trees.
 
381
   
 
382
    In addition to the usual method of overriding tearDown(), this class also
 
383
    allows subclasses to register functions into the _cleanups list, which is
 
384
    run in order as the object is torn down.  It's less likely this will be
 
385
    accidentally overlooked.
 
386
    """
 
387
 
 
388
    _log_file_name = None
 
389
    _log_contents = ''
 
390
    # record lsprof data when performing benchmark calls.
 
391
    _gather_lsprof_in_benchmarks = False
 
392
 
 
393
    def __init__(self, methodName='testMethod'):
 
394
        super(TestCase, self).__init__(methodName)
 
395
        self._cleanups = []
 
396
 
 
397
    def setUp(self):
 
398
        unittest.TestCase.setUp(self)
 
399
        self._cleanEnvironment()
 
400
        bzrlib.trace.disable_default_logging()
 
401
        self._startLogFile()
 
402
        self._benchcalls = []
 
403
        self._benchtime = None
 
404
 
 
405
    def _ndiff_strings(self, a, b):
 
406
        """Return ndiff between two strings containing lines.
 
407
        
 
408
        A trailing newline is added if missing to make the strings
 
409
        print properly."""
 
410
        if b and b[-1] != '\n':
 
411
            b += '\n'
 
412
        if a and a[-1] != '\n':
 
413
            a += '\n'
 
414
        difflines = difflib.ndiff(a.splitlines(True),
 
415
                                  b.splitlines(True),
 
416
                                  linejunk=lambda x: False,
 
417
                                  charjunk=lambda x: False)
 
418
        return ''.join(difflines)
 
419
 
 
420
    def assertEqualDiff(self, a, b, message=None):
 
421
        """Assert two texts are equal, if not raise an exception.
 
422
        
 
423
        This is intended for use with multi-line strings where it can 
 
424
        be hard to find the differences by eye.
 
425
        """
 
426
        # TODO: perhaps override assertEquals to call this for strings?
 
427
        if a == b:
 
428
            return
 
429
        if message is None:
 
430
            message = "texts not equal:\n"
 
431
        raise AssertionError(message + 
 
432
                             self._ndiff_strings(a, b))      
 
433
        
 
434
    def assertEqualMode(self, mode, mode_test):
 
435
        self.assertEqual(mode, mode_test,
 
436
                         'mode mismatch %o != %o' % (mode, mode_test))
 
437
 
 
438
    def assertStartsWith(self, s, prefix):
 
439
        if not s.startswith(prefix):
 
440
            raise AssertionError('string %r does not start with %r' % (s, prefix))
 
441
 
 
442
    def assertEndsWith(self, s, suffix):
 
443
        """Asserts that s ends with suffix."""
 
444
        if not s.endswith(suffix):
 
445
            raise AssertionError('string %r does not end with %r' % (s, suffix))
 
446
 
 
447
    def assertContainsRe(self, haystack, needle_re):
 
448
        """Assert that a contains something matching a regular expression."""
 
449
        if not re.search(needle_re, haystack):
 
450
            raise AssertionError('pattern "%s" not found in "%s"'
 
451
                    % (needle_re, haystack))
 
452
 
 
453
    def assertSubset(self, sublist, superlist):
 
454
        """Assert that every entry in sublist is present in superlist."""
 
455
        missing = []
 
456
        for entry in sublist:
 
457
            if entry not in superlist:
 
458
                missing.append(entry)
 
459
        if len(missing) > 0:
 
460
            raise AssertionError("value(s) %r not present in container %r" % 
 
461
                                 (missing, superlist))
 
462
 
 
463
    def assertIs(self, left, right):
 
464
        if not (left is right):
 
465
            raise AssertionError("%r is not %r." % (left, right))
 
466
 
 
467
    def assertTransportMode(self, transport, path, mode):
 
468
        """Fail if a path does not have mode mode.
 
469
        
 
470
        If modes are not supported on this transport, the assertion is ignored.
 
471
        """
 
472
        if not transport._can_roundtrip_unix_modebits():
 
473
            return
 
474
        path_stat = transport.stat(path)
 
475
        actual_mode = stat.S_IMODE(path_stat.st_mode)
 
476
        self.assertEqual(mode, actual_mode,
 
477
            'mode of %r incorrect (%o != %o)' % (path, mode, actual_mode))
 
478
 
 
479
    def assertIsInstance(self, obj, kls):
 
480
        """Fail if obj is not an instance of kls"""
 
481
        if not isinstance(obj, kls):
 
482
            self.fail("%r is an instance of %s rather than %s" % (
 
483
                obj, obj.__class__, kls))
 
484
 
 
485
    def _startLogFile(self):
 
486
        """Send bzr and test log messages to a temporary file.
 
487
 
 
488
        The file is removed as the test is torn down.
 
489
        """
 
490
        fileno, name = tempfile.mkstemp(suffix='.log', prefix='testbzr')
 
491
        encoder, decoder, stream_reader, stream_writer = codecs.lookup('UTF-8')
 
492
        self._log_file = stream_writer(os.fdopen(fileno, 'w+'))
 
493
        self._log_nonce = bzrlib.trace.enable_test_log(self._log_file)
 
494
        self._log_file_name = name
 
495
        self.addCleanup(self._finishLogFile)
 
496
 
 
497
    def _finishLogFile(self):
 
498
        """Finished with the log file.
 
499
 
 
500
        Read contents into memory, close, and delete.
 
501
        """
 
502
        bzrlib.trace.disable_test_log(self._log_nonce)
 
503
        self._log_file.seek(0)
 
504
        self._log_contents = self._log_file.read()
 
505
        self._log_file.close()
 
506
        os.remove(self._log_file_name)
 
507
        self._log_file = self._log_file_name = None
 
508
 
 
509
    def addCleanup(self, callable):
 
510
        """Arrange to run a callable when this case is torn down.
 
511
 
 
512
        Callables are run in the reverse of the order they are registered, 
 
513
        ie last-in first-out.
 
514
        """
 
515
        if callable in self._cleanups:
 
516
            raise ValueError("cleanup function %r already registered on %s" 
 
517
                    % (callable, self))
 
518
        self._cleanups.append(callable)
 
519
 
 
520
    def _cleanEnvironment(self):
 
521
        new_env = {
 
522
            'HOME': os.getcwd(),
 
523
            'APPDATA': os.getcwd(),
 
524
            'BZREMAIL': None,
 
525
            'EMAIL': None,
 
526
        }
 
527
        self.__old_env = {}
 
528
        self.addCleanup(self._restoreEnvironment)
 
529
        for name, value in new_env.iteritems():
 
530
            self._captureVar(name, value)
 
531
 
 
532
 
 
533
    def _captureVar(self, name, newvalue):
 
534
        """Set an environment variable, preparing it to be reset when finished."""
 
535
        self.__old_env[name] = os.environ.get(name, None)
 
536
        if newvalue is None:
 
537
            if name in os.environ:
 
538
                del os.environ[name]
 
539
        else:
 
540
            os.environ[name] = newvalue
 
541
 
 
542
    @staticmethod
 
543
    def _restoreVar(name, value):
 
544
        if value is None:
 
545
            if name in os.environ:
 
546
                del os.environ[name]
 
547
        else:
 
548
            os.environ[name] = value
 
549
 
 
550
    def _restoreEnvironment(self):
 
551
        for name, value in self.__old_env.iteritems():
 
552
            self._restoreVar(name, value)
 
553
 
 
554
    def tearDown(self):
 
555
        self._runCleanups()
 
556
        unittest.TestCase.tearDown(self)
 
557
 
 
558
    def time(self, callable, *args, **kwargs):
 
559
        """Run callable and accrue the time it takes to the benchmark time.
 
560
        
 
561
        If lsprofiling is enabled (i.e. by --lsprof-time to bzr selftest) then
 
562
        this will cause lsprofile statistics to be gathered and stored in
 
563
        self._benchcalls.
 
564
        """
 
565
        if self._benchtime is None:
 
566
            self._benchtime = 0
 
567
        start = time.time()
 
568
        try:
 
569
            if not self._gather_lsprof_in_benchmarks:
 
570
                return callable(*args, **kwargs)
 
571
            else:
 
572
                # record this benchmark
 
573
                ret, stats = bzrlib.lsprof.profile(callable, *args, **kwargs)
 
574
                stats.sort()
 
575
                self._benchcalls.append(((callable, args, kwargs), stats))
 
576
                return ret
 
577
        finally:
 
578
            self._benchtime += time.time() - start
 
579
 
 
580
    def _runCleanups(self):
 
581
        """Run registered cleanup functions. 
 
582
 
 
583
        This should only be called from TestCase.tearDown.
 
584
        """
 
585
        # TODO: Perhaps this should keep running cleanups even if 
 
586
        # one of them fails?
 
587
        for cleanup_fn in reversed(self._cleanups):
 
588
            cleanup_fn()
 
589
 
 
590
    def log(self, *args):
 
591
        mutter(*args)
 
592
 
 
593
    def _get_log(self):
 
594
        """Return as a string the log for this test"""
 
595
        if self._log_file_name:
 
596
            return open(self._log_file_name).read()
 
597
        else:
 
598
            return self._log_contents
 
599
        # TODO: Delete the log after it's been read in
 
600
 
 
601
    def capture(self, cmd, retcode=0):
 
602
        """Shortcut that splits cmd into words, runs, and returns stdout"""
 
603
        return self.run_bzr_captured(cmd.split(), retcode=retcode)[0]
 
604
 
 
605
    def run_bzr_captured(self, argv, retcode=0, stdin=None):
 
606
        """Invoke bzr and return (stdout, stderr).
 
607
 
 
608
        Useful for code that wants to check the contents of the
 
609
        output, the way error messages are presented, etc.
 
610
 
 
611
        This should be the main method for tests that want to exercise the
 
612
        overall behavior of the bzr application (rather than a unit test
 
613
        or a functional test of the library.)
 
614
 
 
615
        Much of the old code runs bzr by forking a new copy of Python, but
 
616
        that is slower, harder to debug, and generally not necessary.
 
617
 
 
618
        This runs bzr through the interface that catches and reports
 
619
        errors, and with logging set to something approximating the
 
620
        default, so that error reporting can be checked.
 
621
 
 
622
        argv -- arguments to invoke bzr
 
623
        retcode -- expected return code, or None for don't-care.
 
624
        :param stdin: A string to be used as stdin for the command.
 
625
        """
 
626
        if stdin is not None:
 
627
            stdin = StringIO(stdin)
 
628
        stdout = StringIO()
 
629
        stderr = StringIO()
 
630
        self.log('run bzr: %s', ' '.join(argv))
 
631
        # FIXME: don't call into logging here
 
632
        handler = logging.StreamHandler(stderr)
 
633
        handler.setFormatter(bzrlib.trace.QuietFormatter())
 
634
        handler.setLevel(logging.INFO)
 
635
        logger = logging.getLogger('')
 
636
        logger.addHandler(handler)
 
637
        old_ui_factory = bzrlib.ui.ui_factory
 
638
        bzrlib.ui.ui_factory = bzrlib.tests.blackbox.TestUIFactory(
 
639
            stdout=stdout,
 
640
            stderr=stderr)
 
641
        bzrlib.ui.ui_factory.stdin = stdin
 
642
        try:
 
643
            result = self.apply_redirected(stdin, stdout, stderr,
 
644
                                           bzrlib.commands.run_bzr_catch_errors,
 
645
                                           argv)
 
646
        finally:
 
647
            logger.removeHandler(handler)
 
648
            bzrlib.ui.ui_factory = old_ui_factory
 
649
        out = stdout.getvalue()
 
650
        err = stderr.getvalue()
 
651
        if out:
 
652
            self.log('output:\n%s', out)
 
653
        if err:
 
654
            self.log('errors:\n%s', err)
 
655
        if retcode is not None:
 
656
            self.assertEquals(result, retcode)
 
657
        return out, err
 
658
 
 
659
    def run_bzr(self, *args, **kwargs):
 
660
        """Invoke bzr, as if it were run from the command line.
 
661
 
 
662
        This should be the main method for tests that want to exercise the
 
663
        overall behavior of the bzr application (rather than a unit test
 
664
        or a functional test of the library.)
 
665
 
 
666
        This sends the stdout/stderr results into the test's log,
 
667
        where it may be useful for debugging.  See also run_captured.
 
668
 
 
669
        :param stdin: A string to be used as stdin for the command.
 
670
        """
 
671
        retcode = kwargs.pop('retcode', 0)
 
672
        stdin = kwargs.pop('stdin', None)
 
673
        return self.run_bzr_captured(args, retcode, stdin)
 
674
 
 
675
    def check_inventory_shape(self, inv, shape):
 
676
        """Compare an inventory to a list of expected names.
 
677
 
 
678
        Fail if they are not precisely equal.
 
679
        """
 
680
        extras = []
 
681
        shape = list(shape)             # copy
 
682
        for path, ie in inv.entries():
 
683
            name = path.replace('\\', '/')
 
684
            if ie.kind == 'dir':
 
685
                name = name + '/'
 
686
            if name in shape:
 
687
                shape.remove(name)
 
688
            else:
 
689
                extras.append(name)
 
690
        if shape:
 
691
            self.fail("expected paths not found in inventory: %r" % shape)
 
692
        if extras:
 
693
            self.fail("unexpected paths found in inventory: %r" % extras)
 
694
 
 
695
    def apply_redirected(self, stdin=None, stdout=None, stderr=None,
 
696
                         a_callable=None, *args, **kwargs):
 
697
        """Call callable with redirected std io pipes.
 
698
 
 
699
        Returns the return code."""
 
700
        if not callable(a_callable):
 
701
            raise ValueError("a_callable must be callable.")
 
702
        if stdin is None:
 
703
            stdin = StringIO("")
 
704
        if stdout is None:
 
705
            if getattr(self, "_log_file", None) is not None:
 
706
                stdout = self._log_file
 
707
            else:
 
708
                stdout = StringIO()
 
709
        if stderr is None:
 
710
            if getattr(self, "_log_file", None is not None):
 
711
                stderr = self._log_file
 
712
            else:
 
713
                stderr = StringIO()
 
714
        real_stdin = sys.stdin
 
715
        real_stdout = sys.stdout
 
716
        real_stderr = sys.stderr
 
717
        try:
 
718
            sys.stdout = stdout
 
719
            sys.stderr = stderr
 
720
            sys.stdin = stdin
 
721
            return a_callable(*args, **kwargs)
 
722
        finally:
 
723
            sys.stdout = real_stdout
 
724
            sys.stderr = real_stderr
 
725
            sys.stdin = real_stdin
 
726
 
 
727
    def merge(self, branch_from, wt_to):
 
728
        """A helper for tests to do a ui-less merge.
 
729
 
 
730
        This should move to the main library when someone has time to integrate
 
731
        it in.
 
732
        """
 
733
        # minimal ui-less merge.
 
734
        wt_to.branch.fetch(branch_from)
 
735
        base_rev = common_ancestor(branch_from.last_revision(),
 
736
                                   wt_to.branch.last_revision(),
 
737
                                   wt_to.branch.repository)
 
738
        merge_inner(wt_to.branch, branch_from.basis_tree(), 
 
739
                    wt_to.branch.repository.revision_tree(base_rev),
 
740
                    this_tree=wt_to)
 
741
        wt_to.add_pending_merge(branch_from.last_revision())
 
742
 
 
743
 
 
744
BzrTestBase = TestCase
 
745
 
 
746
     
 
747
class TestCaseInTempDir(TestCase):
 
748
    """Derived class that runs a test within a temporary directory.
 
749
 
 
750
    This is useful for tests that need to create a branch, etc.
 
751
 
 
752
    The directory is created in a slightly complex way: for each
 
753
    Python invocation, a new temporary top-level directory is created.
 
754
    All test cases create their own directory within that.  If the
 
755
    tests complete successfully, the directory is removed.
 
756
 
 
757
    InTempDir is an old alias for FunctionalTestCase.
 
758
    """
 
759
 
 
760
    TEST_ROOT = None
 
761
    _TEST_NAME = 'test'
 
762
    OVERRIDE_PYTHON = 'python'
 
763
 
 
764
    def check_file_contents(self, filename, expect):
 
765
        self.log("check contents of file %s" % filename)
 
766
        contents = file(filename, 'r').read()
 
767
        if contents != expect:
 
768
            self.log("expected: %r" % expect)
 
769
            self.log("actually: %r" % contents)
 
770
            self.fail("contents of %s not as expected" % filename)
 
771
 
 
772
    def _make_test_root(self):
 
773
        if TestCaseInTempDir.TEST_ROOT is not None:
 
774
            return
 
775
        i = 0
 
776
        while True:
 
777
            root = u'test%04d.tmp' % i
 
778
            try:
 
779
                os.mkdir(root)
 
780
            except OSError, e:
 
781
                if e.errno == errno.EEXIST:
 
782
                    i += 1
 
783
                    continue
 
784
                else:
 
785
                    raise
 
786
            # successfully created
 
787
            TestCaseInTempDir.TEST_ROOT = osutils.abspath(root)
 
788
            break
 
789
        # make a fake bzr directory there to prevent any tests propagating
 
790
        # up onto the source directory's real branch
 
791
        bzrdir.BzrDir.create_standalone_workingtree(TestCaseInTempDir.TEST_ROOT)
 
792
 
 
793
    def setUp(self):
 
794
        super(TestCaseInTempDir, self).setUp()
 
795
        self._make_test_root()
 
796
        _currentdir = os.getcwdu()
 
797
        # shorten the name, to avoid test failures due to path length
 
798
        short_id = self.id().replace('bzrlib.tests.', '') \
 
799
                   .replace('__main__.', '')[-100:]
 
800
        # it's possible the same test class is run several times for
 
801
        # parameterized tests, so make sure the names don't collide.  
 
802
        i = 0
 
803
        while True:
 
804
            if i > 0:
 
805
                candidate_dir = '%s/%s.%d' % (self.TEST_ROOT, short_id, i)
 
806
            else:
 
807
                candidate_dir = '%s/%s' % (self.TEST_ROOT, short_id)
 
808
            if os.path.exists(candidate_dir):
 
809
                i = i + 1
 
810
                continue
 
811
            else:
 
812
                self.test_dir = candidate_dir
 
813
                os.mkdir(self.test_dir)
 
814
                os.chdir(self.test_dir)
 
815
                break
 
816
        os.environ['HOME'] = self.test_dir
 
817
        os.environ['APPDATA'] = self.test_dir
 
818
        def _leaveDirectory():
 
819
            os.chdir(_currentdir)
 
820
        self.addCleanup(_leaveDirectory)
 
821
        
 
822
    def build_tree(self, shape, line_endings='native', transport=None):
 
823
        """Build a test tree according to a pattern.
 
824
 
 
825
        shape is a sequence of file specifications.  If the final
 
826
        character is '/', a directory is created.
 
827
 
 
828
        This doesn't add anything to a branch.
 
829
        :param line_endings: Either 'binary' or 'native'
 
830
                             in binary mode, exact contents are written
 
831
                             in native mode, the line endings match the
 
832
                             default platform endings.
 
833
 
 
834
        :param transport: A transport to write to, for building trees on 
 
835
                          VFS's. If the transport is readonly or None,
 
836
                          "." is opened automatically.
 
837
        """
 
838
        # XXX: It's OK to just create them using forward slashes on windows?
 
839
        if transport is None or transport.is_readonly():
 
840
            transport = get_transport(".")
 
841
        for name in shape:
 
842
            self.assert_(isinstance(name, basestring))
 
843
            if name[-1] == '/':
 
844
                transport.mkdir(urlescape(name[:-1]))
 
845
            else:
 
846
                if line_endings == 'binary':
 
847
                    end = '\n'
 
848
                elif line_endings == 'native':
 
849
                    end = os.linesep
 
850
                else:
 
851
                    raise errors.BzrError('Invalid line ending request %r' % (line_endings,))
 
852
                content = "contents of %s%s" % (name, end)
 
853
                transport.put(urlescape(name), StringIO(content))
 
854
 
 
855
    def build_tree_contents(self, shape):
 
856
        build_tree_contents(shape)
 
857
 
 
858
    def failUnlessExists(self, path):
 
859
        """Fail unless path, which may be abs or relative, exists."""
 
860
        self.failUnless(osutils.lexists(path))
 
861
 
 
862
    def failIfExists(self, path):
 
863
        """Fail if path, which may be abs or relative, exists."""
 
864
        self.failIf(osutils.lexists(path))
 
865
        
 
866
    def assertFileEqual(self, content, path):
 
867
        """Fail if path does not contain 'content'."""
 
868
        self.failUnless(osutils.lexists(path))
 
869
        self.assertEqualDiff(content, open(path, 'r').read())
 
870
 
 
871
 
 
872
class TestCaseWithTransport(TestCaseInTempDir):
 
873
    """A test case that provides get_url and get_readonly_url facilities.
 
874
 
 
875
    These back onto two transport servers, one for readonly access and one for
 
876
    read write access.
 
877
 
 
878
    If no explicit class is provided for readonly access, a
 
879
    ReadonlyTransportDecorator is used instead which allows the use of non disk
 
880
    based read write transports.
 
881
 
 
882
    If an explicit class is provided for readonly access, that server and the 
 
883
    readwrite one must both define get_url() as resolving to os.getcwd().
 
884
    """
 
885
 
 
886
    def __init__(self, methodName='testMethod'):
 
887
        super(TestCaseWithTransport, self).__init__(methodName)
 
888
        self.__readonly_server = None
 
889
        self.__server = None
 
890
        self.transport_server = default_transport
 
891
        self.transport_readonly_server = None
 
892
 
 
893
    def get_readonly_url(self, relpath=None):
 
894
        """Get a URL for the readonly transport.
 
895
 
 
896
        This will either be backed by '.' or a decorator to the transport 
 
897
        used by self.get_url()
 
898
        relpath provides for clients to get a path relative to the base url.
 
899
        These should only be downwards relative, not upwards.
 
900
        """
 
901
        base = self.get_readonly_server().get_url()
 
902
        if relpath is not None:
 
903
            if not base.endswith('/'):
 
904
                base = base + '/'
 
905
            base = base + relpath
 
906
        return base
 
907
 
 
908
    def get_readonly_server(self):
 
909
        """Get the server instance for the readonly transport
 
910
 
 
911
        This is useful for some tests with specific servers to do diagnostics.
 
912
        """
 
913
        if self.__readonly_server is None:
 
914
            if self.transport_readonly_server is None:
 
915
                # readonly decorator requested
 
916
                # bring up the server
 
917
                self.get_url()
 
918
                self.__readonly_server = ReadonlyServer()
 
919
                self.__readonly_server.setUp(self.__server)
 
920
            else:
 
921
                self.__readonly_server = self.transport_readonly_server()
 
922
                self.__readonly_server.setUp()
 
923
            self.addCleanup(self.__readonly_server.tearDown)
 
924
        return self.__readonly_server
 
925
 
 
926
    def get_server(self):
 
927
        """Get the read/write server instance.
 
928
 
 
929
        This is useful for some tests with specific servers that need
 
930
        diagnostics.
 
931
        """
 
932
        if self.__server is None:
 
933
            self.__server = self.transport_server()
 
934
            self.__server.setUp()
 
935
            self.addCleanup(self.__server.tearDown)
 
936
        return self.__server
 
937
 
 
938
    def get_url(self, relpath=None):
 
939
        """Get a URL for the readwrite transport.
 
940
 
 
941
        This will either be backed by '.' or to an equivalent non-file based
 
942
        facility.
 
943
        relpath provides for clients to get a path relative to the base url.
 
944
        These should only be downwards relative, not upwards.
 
945
        """
 
946
        base = self.get_server().get_url()
 
947
        if relpath is not None and relpath != '.':
 
948
            if not base.endswith('/'):
 
949
                base = base + '/'
 
950
            base = base + relpath
 
951
        return base
 
952
 
 
953
    def get_transport(self):
 
954
        """Return a writeable transport for the test scratch space"""
 
955
        t = get_transport(self.get_url())
 
956
        self.assertFalse(t.is_readonly())
 
957
        return t
 
958
 
 
959
    def get_readonly_transport(self):
 
960
        """Return a readonly transport for the test scratch space
 
961
        
 
962
        This can be used to test that operations which should only need
 
963
        readonly access in fact do not try to write.
 
964
        """
 
965
        t = get_transport(self.get_readonly_url())
 
966
        self.assertTrue(t.is_readonly())
 
967
        return t
 
968
 
 
969
    def make_branch(self, relpath, format=None):
 
970
        """Create a branch on the transport at relpath."""
 
971
        repo = self.make_repository(relpath, format=format)
 
972
        return repo.bzrdir.create_branch()
 
973
 
 
974
    def make_bzrdir(self, relpath, format=None):
 
975
        try:
 
976
            url = self.get_url(relpath)
 
977
            segments = relpath.split('/')
 
978
            if segments and segments[-1] not in ('', '.'):
 
979
                parent = self.get_url('/'.join(segments[:-1]))
 
980
                t = get_transport(parent)
 
981
                try:
 
982
                    t.mkdir(segments[-1])
 
983
                except errors.FileExists:
 
984
                    pass
 
985
            if format is None:
 
986
                format=bzrlib.bzrdir.BzrDirFormat.get_default_format()
 
987
            # FIXME: make this use a single transport someday. RBC 20060418
 
988
            return format.initialize_on_transport(get_transport(relpath))
 
989
        except errors.UninitializableFormat:
 
990
            raise TestSkipped("Format %s is not initializable." % format)
 
991
 
 
992
    def make_repository(self, relpath, shared=False, format=None):
 
993
        """Create a repository on our default transport at relpath."""
 
994
        made_control = self.make_bzrdir(relpath, format=format)
 
995
        return made_control.create_repository(shared=shared)
 
996
 
 
997
    def make_branch_and_tree(self, relpath, format=None):
 
998
        """Create a branch on the transport and a tree locally.
 
999
 
 
1000
        Returns the tree.
 
1001
        """
 
1002
        # TODO: always use the local disk path for the working tree,
 
1003
        # this obviously requires a format that supports branch references
 
1004
        # so check for that by checking bzrdir.BzrDirFormat.get_default_format()
 
1005
        # RBC 20060208
 
1006
        b = self.make_branch(relpath, format=format)
 
1007
        try:
 
1008
            return b.bzrdir.create_workingtree()
 
1009
        except errors.NotLocalUrl:
 
1010
            # new formats - catch No tree error and create
 
1011
            # a branch reference and a checkout.
 
1012
            # old formats at that point - raise TestSkipped.
 
1013
            # TODO: rbc 20060208
 
1014
            return WorkingTreeFormat2().initialize(bzrdir.BzrDir.open(relpath))
 
1015
 
 
1016
    def assertIsDirectory(self, relpath, transport):
 
1017
        """Assert that relpath within transport is a directory.
 
1018
 
 
1019
        This may not be possible on all transports; in that case it propagates
 
1020
        a TransportNotPossible.
 
1021
        """
 
1022
        try:
 
1023
            mode = transport.stat(relpath).st_mode
 
1024
        except errors.NoSuchFile:
 
1025
            self.fail("path %s is not a directory; no such file"
 
1026
                      % (relpath))
 
1027
        if not stat.S_ISDIR(mode):
 
1028
            self.fail("path %s is not a directory; has mode %#o"
 
1029
                      % (relpath, mode))
 
1030
 
 
1031
 
 
1032
class ChrootedTestCase(TestCaseWithTransport):
 
1033
    """A support class that provides readonly urls outside the local namespace.
 
1034
 
 
1035
    This is done by checking if self.transport_server is a MemoryServer. if it
 
1036
    is then we are chrooted already, if it is not then an HttpServer is used
 
1037
    for readonly urls.
 
1038
 
 
1039
    TODO RBC 20060127: make this an option to TestCaseWithTransport so it can
 
1040
                       be used without needed to redo it when a different 
 
1041
                       subclass is in use ?
 
1042
    """
 
1043
 
 
1044
    def setUp(self):
 
1045
        super(ChrootedTestCase, self).setUp()
 
1046
        if not self.transport_server == bzrlib.transport.memory.MemoryServer:
 
1047
            self.transport_readonly_server = bzrlib.transport.http.HttpServer
 
1048
 
 
1049
 
 
1050
def filter_suite_by_re(suite, pattern):
 
1051
    result = TestSuite()
 
1052
    filter_re = re.compile(pattern)
 
1053
    for test in iter_suite_tests(suite):
 
1054
        if filter_re.search(test.id()):
 
1055
            result.addTest(test)
 
1056
    return result
 
1057
 
 
1058
 
 
1059
def run_suite(suite, name='test', verbose=False, pattern=".*",
 
1060
              stop_on_failure=False, keep_output=False,
 
1061
              transport=None, lsprof_timed=None):
 
1062
    TestCaseInTempDir._TEST_NAME = name
 
1063
    TestCase._gather_lsprof_in_benchmarks = lsprof_timed
 
1064
    if verbose:
 
1065
        verbosity = 2
 
1066
        pb = None
 
1067
    else:
 
1068
        verbosity = 1
 
1069
        pb = progress.ProgressBar()
 
1070
    runner = TextTestRunner(stream=sys.stdout,
 
1071
                            descriptions=0,
 
1072
                            verbosity=verbosity,
 
1073
                            keep_output=keep_output,
 
1074
                            pb=pb)
 
1075
    runner.stop_on_failure=stop_on_failure
 
1076
    if pattern != '.*':
 
1077
        suite = filter_suite_by_re(suite, pattern)
 
1078
    result = runner.run(suite)
 
1079
    return result.wasSuccessful()
 
1080
 
 
1081
 
 
1082
def selftest(verbose=False, pattern=".*", stop_on_failure=True,
 
1083
             keep_output=False,
 
1084
             transport=None,
 
1085
             test_suite_factory=None,
 
1086
             lsprof_timed=None):
 
1087
    """Run the whole test suite under the enhanced runner"""
 
1088
    global default_transport
 
1089
    if transport is None:
 
1090
        transport = default_transport
 
1091
    old_transport = default_transport
 
1092
    default_transport = transport
 
1093
    try:
 
1094
        if test_suite_factory is None:
 
1095
            suite = test_suite()
 
1096
        else:
 
1097
            suite = test_suite_factory()
 
1098
        return run_suite(suite, 'testbzr', verbose=verbose, pattern=pattern,
 
1099
                     stop_on_failure=stop_on_failure, keep_output=keep_output,
 
1100
                     transport=transport,
 
1101
                     lsprof_timed=lsprof_timed)
 
1102
    finally:
 
1103
        default_transport = old_transport
 
1104
 
 
1105
 
 
1106
def test_suite():
 
1107
    """Build and return TestSuite for the whole of bzrlib.
 
1108
    
 
1109
    This function can be replaced if you need to change the default test
 
1110
    suite on a global basis, but it is not encouraged.
 
1111
    """
 
1112
    from doctest import DocTestSuite
 
1113
 
 
1114
    global MODULES_TO_DOCTEST
 
1115
 
 
1116
    testmod_names = [ \
 
1117
                   'bzrlib.tests.test_ancestry',
 
1118
                   'bzrlib.tests.test_api',
 
1119
                   'bzrlib.tests.test_bad_files',
 
1120
                   'bzrlib.tests.test_branch',
 
1121
                   'bzrlib.tests.test_bundle',
 
1122
                   'bzrlib.tests.test_bzrdir',
 
1123
                   'bzrlib.tests.test_command',
 
1124
                   'bzrlib.tests.test_commit',
 
1125
                   'bzrlib.tests.test_commit_merge',
 
1126
                   'bzrlib.tests.test_config',
 
1127
                   'bzrlib.tests.test_conflicts',
 
1128
                   'bzrlib.tests.test_decorators',
 
1129
                   'bzrlib.tests.test_diff',
 
1130
                   'bzrlib.tests.test_doc_generate',
 
1131
                   'bzrlib.tests.test_errors',
 
1132
                   'bzrlib.tests.test_escaped_store',
 
1133
                   'bzrlib.tests.test_fetch',
 
1134
                   'bzrlib.tests.test_gpg',
 
1135
                   'bzrlib.tests.test_graph',
 
1136
                   'bzrlib.tests.test_hashcache',
 
1137
                   'bzrlib.tests.test_http',
 
1138
                   'bzrlib.tests.test_identitymap',
 
1139
                   'bzrlib.tests.test_inv',
 
1140
                   'bzrlib.tests.test_knit',
 
1141
                   'bzrlib.tests.test_lockdir',
 
1142
                   'bzrlib.tests.test_lockable_files',
 
1143
                   'bzrlib.tests.test_log',
 
1144
                   'bzrlib.tests.test_merge',
 
1145
                   'bzrlib.tests.test_merge3',
 
1146
                   'bzrlib.tests.test_merge_core',
 
1147
                   'bzrlib.tests.test_missing',
 
1148
                   'bzrlib.tests.test_msgeditor',
 
1149
                   'bzrlib.tests.test_nonascii',
 
1150
                   'bzrlib.tests.test_options',
 
1151
                   'bzrlib.tests.test_osutils',
 
1152
                   'bzrlib.tests.test_patch',
 
1153
                   'bzrlib.tests.test_patches',
 
1154
                   'bzrlib.tests.test_permissions',
 
1155
                   'bzrlib.tests.test_plugins',
 
1156
                   'bzrlib.tests.test_progress',
 
1157
                   'bzrlib.tests.test_reconcile',
 
1158
                   'bzrlib.tests.test_repository',
 
1159
                   'bzrlib.tests.test_revision',
 
1160
                   'bzrlib.tests.test_revisionnamespaces',
 
1161
                   'bzrlib.tests.test_revprops',
 
1162
                   'bzrlib.tests.test_rio',
 
1163
                   'bzrlib.tests.test_sampler',
 
1164
                   'bzrlib.tests.test_selftest',
 
1165
                   'bzrlib.tests.test_setup',
 
1166
                   'bzrlib.tests.test_sftp_transport',
 
1167
                   'bzrlib.tests.test_smart_add',
 
1168
                   'bzrlib.tests.test_source',
 
1169
                   'bzrlib.tests.test_status',
 
1170
                   'bzrlib.tests.test_store',
 
1171
                   'bzrlib.tests.test_symbol_versioning',
 
1172
                   'bzrlib.tests.test_testament',
 
1173
                   'bzrlib.tests.test_textfile',
 
1174
                   'bzrlib.tests.test_textmerge',
 
1175
                   'bzrlib.tests.test_trace',
 
1176
                   'bzrlib.tests.test_transactions',
 
1177
                   'bzrlib.tests.test_transform',
 
1178
                   'bzrlib.tests.test_transport',
 
1179
                   'bzrlib.tests.test_tsort',
 
1180
                   'bzrlib.tests.test_tuned_gzip',
 
1181
                   'bzrlib.tests.test_ui',
 
1182
                   'bzrlib.tests.test_upgrade',
 
1183
                   'bzrlib.tests.test_versionedfile',
 
1184
                   'bzrlib.tests.test_weave',
 
1185
                   'bzrlib.tests.test_whitebox',
 
1186
                   'bzrlib.tests.test_workingtree',
 
1187
                   'bzrlib.tests.test_xml',
 
1188
                   ]
 
1189
    test_transport_implementations = [
 
1190
        'bzrlib.tests.test_transport_implementations']
 
1191
 
 
1192
    suite = TestSuite()
 
1193
    loader = TestUtil.TestLoader()
 
1194
    from bzrlib.transport import TransportTestProviderAdapter
 
1195
    adapter = TransportTestProviderAdapter()
 
1196
    adapt_modules(test_transport_implementations, adapter, loader, suite)
 
1197
    suite.addTest(loader.loadTestsFromModuleNames(testmod_names))
 
1198
    for package in packages_to_test():
 
1199
        suite.addTest(package.test_suite())
 
1200
    for m in MODULES_TO_TEST:
 
1201
        suite.addTest(loader.loadTestsFromModule(m))
 
1202
    for m in (MODULES_TO_DOCTEST):
 
1203
        suite.addTest(DocTestSuite(m))
 
1204
    for name, plugin in bzrlib.plugin.all_plugins().items():
 
1205
        if getattr(plugin, 'test_suite', None) is not None:
 
1206
            suite.addTest(plugin.test_suite())
 
1207
    return suite
 
1208
 
 
1209
 
 
1210
def adapt_modules(mods_list, adapter, loader, suite):
 
1211
    """Adapt the modules in mods_list using adapter and add to suite."""
 
1212
    for test in iter_suite_tests(loader.loadTestsFromModuleNames(mods_list)):
 
1213
        suite.addTests(adapter.adapt(test))