/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/tests/test_osutils.py

  • Committer: Robert Collins
  • Date: 2007-04-19 02:27:44 UTC
  • mto: This revision was merged to the branch mainline in revision 2426.
  • Revision ID: robertc@robertcollins.net-20070419022744-pfdqz42kp1wizh43
``make docs`` now creates a man page at ``man1/bzr.1`` fixing bug 107388.
(Robert Collins)

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005-2011 Canonical Ltd
 
1
# Copyright (C) 2005, 2006 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
"""Tests for the osutils wrapper."""
18
18
 
19
 
from cStringIO import StringIO
20
19
import errno
21
20
import os
22
 
import re
23
21
import socket
 
22
import stat
24
23
import sys
25
 
import time
26
24
 
 
25
import bzrlib
27
26
from bzrlib import (
28
27
    errors,
29
 
    lazy_regex,
30
28
    osutils,
31
 
    symbol_versioning,
32
 
    tests,
33
 
    trace,
34
29
    win32utils,
35
30
    )
 
31
from bzrlib.errors import BzrBadParameterNotUnicode, InvalidURL
36
32
from bzrlib.tests import (
37
 
    features,
38
 
    file_utils,
39
 
    test__walkdirs_win32,
40
 
    )
41
 
from bzrlib.tests.scenarios import load_tests_apply_scenarios
42
 
 
43
 
 
44
 
class _UTF8DirReaderFeature(tests.Feature):
45
 
 
46
 
    def _probe(self):
47
 
        try:
48
 
            from bzrlib import _readdir_pyx
49
 
            self.reader = _readdir_pyx.UTF8DirReader
50
 
            return True
51
 
        except ImportError:
52
 
            return False
53
 
 
54
 
    def feature_name(self):
55
 
        return 'bzrlib._readdir_pyx'
56
 
 
57
 
UTF8DirReaderFeature = _UTF8DirReaderFeature()
58
 
 
59
 
term_ios_feature = tests.ModuleAvailableFeature('termios')
60
 
 
61
 
 
62
 
def _already_unicode(s):
63
 
    return s
64
 
 
65
 
 
66
 
def _utf8_to_unicode(s):
67
 
    return s.decode('UTF-8')
68
 
 
69
 
 
70
 
def dir_reader_scenarios():
71
 
    # For each dir reader we define:
72
 
 
73
 
    # - native_to_unicode: a function converting the native_abspath as returned
74
 
    #   by DirReader.read_dir to its unicode representation
75
 
 
76
 
    # UnicodeDirReader is the fallback, it should be tested on all platforms.
77
 
    scenarios = [('unicode',
78
 
                  dict(_dir_reader_class=osutils.UnicodeDirReader,
79
 
                       _native_to_unicode=_already_unicode))]
80
 
    # Some DirReaders are platform specific and even there they may not be
81
 
    # available.
82
 
    if UTF8DirReaderFeature.available():
83
 
        from bzrlib import _readdir_pyx
84
 
        scenarios.append(('utf8',
85
 
                          dict(_dir_reader_class=_readdir_pyx.UTF8DirReader,
86
 
                               _native_to_unicode=_utf8_to_unicode)))
87
 
 
88
 
    if test__walkdirs_win32.win32_readdir_feature.available():
89
 
        try:
90
 
            from bzrlib import _walkdirs_win32
91
 
            scenarios.append(
92
 
                ('win32',
93
 
                 dict(_dir_reader_class=_walkdirs_win32.Win32ReadDir,
94
 
                      _native_to_unicode=_already_unicode)))
95
 
        except ImportError:
96
 
            pass
97
 
    return scenarios
98
 
 
99
 
 
100
 
load_tests = load_tests_apply_scenarios
101
 
 
102
 
 
103
 
class TestContainsWhitespace(tests.TestCase):
 
33
        StringIOWrapper,
 
34
        TestCase, 
 
35
        TestCaseInTempDir, 
 
36
        TestSkipped,
 
37
        )
 
38
 
 
39
 
 
40
class TestOSUtils(TestCaseInTempDir):
104
41
 
105
42
    def test_contains_whitespace(self):
106
 
        self.assertTrue(osutils.contains_whitespace(u' '))
107
 
        self.assertTrue(osutils.contains_whitespace(u'hello there'))
108
 
        self.assertTrue(osutils.contains_whitespace(u'hellothere\n'))
109
 
        self.assertTrue(osutils.contains_whitespace(u'hello\nthere'))
110
 
        self.assertTrue(osutils.contains_whitespace(u'hello\rthere'))
111
 
        self.assertTrue(osutils.contains_whitespace(u'hello\tthere'))
 
43
        self.failUnless(osutils.contains_whitespace(u' '))
 
44
        self.failUnless(osutils.contains_whitespace(u'hello there'))
 
45
        self.failUnless(osutils.contains_whitespace(u'hellothere\n'))
 
46
        self.failUnless(osutils.contains_whitespace(u'hello\nthere'))
 
47
        self.failUnless(osutils.contains_whitespace(u'hello\rthere'))
 
48
        self.failUnless(osutils.contains_whitespace(u'hello\tthere'))
112
49
 
113
50
        # \xa0 is "Non-breaking-space" which on some python locales thinks it
114
51
        # is whitespace, but we do not.
115
 
        self.assertFalse(osutils.contains_whitespace(u''))
116
 
        self.assertFalse(osutils.contains_whitespace(u'hellothere'))
117
 
        self.assertFalse(osutils.contains_whitespace(u'hello\xa0there'))
118
 
 
119
 
 
120
 
class TestRename(tests.TestCaseInTempDir):
121
 
 
122
 
    def create_file(self, filename, content):
123
 
        f = open(filename, 'wb')
124
 
        try:
125
 
            f.write(content)
126
 
        finally:
127
 
            f.close()
128
 
 
129
 
    def _fancy_rename(self, a, b):
130
 
        osutils.fancy_rename(a, b, rename_func=os.rename,
131
 
                             unlink_func=os.unlink)
 
52
        self.failIf(osutils.contains_whitespace(u''))
 
53
        self.failIf(osutils.contains_whitespace(u'hellothere'))
 
54
        self.failIf(osutils.contains_whitespace(u'hello\xa0there'))
132
55
 
133
56
    def test_fancy_rename(self):
134
57
        # This should work everywhere
135
 
        self.create_file('a', 'something in a\n')
136
 
        self._fancy_rename('a', 'b')
137
 
        self.assertPathDoesNotExist('a')
138
 
        self.assertPathExists('b')
 
58
        def rename(a, b):
 
59
            osutils.fancy_rename(a, b,
 
60
                    rename_func=os.rename,
 
61
                    unlink_func=os.unlink)
 
62
 
 
63
        open('a', 'wb').write('something in a\n')
 
64
        rename('a', 'b')
 
65
        self.failIfExists('a')
 
66
        self.failUnlessExists('b')
139
67
        self.check_file_contents('b', 'something in a\n')
140
68
 
141
 
        self.create_file('a', 'new something in a\n')
142
 
        self._fancy_rename('b', 'a')
 
69
        open('a', 'wb').write('new something in a\n')
 
70
        rename('b', 'a')
143
71
 
144
72
        self.check_file_contents('a', 'something in a\n')
145
73
 
146
 
    def test_fancy_rename_fails_source_missing(self):
147
 
        # An exception should be raised, and the target should be left in place
148
 
        self.create_file('target', 'data in target\n')
149
 
        self.assertRaises((IOError, OSError), self._fancy_rename,
150
 
                          'missingsource', 'target')
151
 
        self.assertPathExists('target')
152
 
        self.check_file_contents('target', 'data in target\n')
153
 
 
154
 
    def test_fancy_rename_fails_if_source_and_target_missing(self):
155
 
        self.assertRaises((IOError, OSError), self._fancy_rename,
156
 
                          'missingsource', 'missingtarget')
157
 
 
158
74
    def test_rename(self):
159
75
        # Rename should be semi-atomic on all platforms
160
 
        self.create_file('a', 'something in a\n')
 
76
        open('a', 'wb').write('something in a\n')
161
77
        osutils.rename('a', 'b')
162
 
        self.assertPathDoesNotExist('a')
163
 
        self.assertPathExists('b')
 
78
        self.failIfExists('a')
 
79
        self.failUnlessExists('b')
164
80
        self.check_file_contents('b', 'something in a\n')
165
81
 
166
 
        self.create_file('a', 'new something in a\n')
 
82
        open('a', 'wb').write('new something in a\n')
167
83
        osutils.rename('b', 'a')
168
84
 
169
85
        self.check_file_contents('a', 'something in a\n')
170
86
 
171
87
    # TODO: test fancy_rename using a MemoryTransport
172
88
 
173
 
    def test_rename_change_case(self):
174
 
        # on Windows we should be able to change filename case by rename
175
 
        self.build_tree(['a', 'b/'])
176
 
        osutils.rename('a', 'A')
177
 
        osutils.rename('b', 'B')
178
 
        # we can't use failUnlessExists on case-insensitive filesystem
179
 
        # so try to check shape of the tree
180
 
        shape = sorted(os.listdir('.'))
181
 
        self.assertEquals(['A', 'B'], shape)
182
 
 
183
 
 
184
 
class TestRandChars(tests.TestCase):
185
 
 
186
89
    def test_01_rand_chars_empty(self):
187
90
        result = osutils.rand_chars(0)
188
91
        self.assertEqual(result, '')
193
96
        self.assertEqual(type(result), str)
194
97
        self.assertContainsRe(result, r'^[a-z0-9]{100}$')
195
98
 
196
 
 
197
 
class TestIsInside(tests.TestCase):
198
 
 
199
99
    def test_is_inside(self):
200
100
        is_inside = osutils.is_inside
201
101
        self.assertTrue(is_inside('src', 'src/foo.c'))
205
105
        self.assertFalse(is_inside('foo.c', ''))
206
106
        self.assertTrue(is_inside('', 'foo.c'))
207
107
 
208
 
    def test_is_inside_any(self):
209
 
        SRC_FOO_C = osutils.pathjoin('src', 'foo.c')
210
 
        for dirs, fn in [(['src', 'doc'], SRC_FOO_C),
211
 
                         (['src'], SRC_FOO_C),
212
 
                         (['src'], 'src'),
213
 
                         ]:
214
 
            self.assert_(osutils.is_inside_any(dirs, fn))
215
 
        for dirs, fn in [(['src'], 'srccontrol'),
216
 
                         (['src'], 'srccontrol/foo')]:
217
 
            self.assertFalse(osutils.is_inside_any(dirs, fn))
218
 
 
219
 
    def test_is_inside_or_parent_of_any(self):
220
 
        for dirs, fn in [(['src', 'doc'], 'src/foo.c'),
221
 
                         (['src'], 'src/foo.c'),
222
 
                         (['src/bar.c'], 'src'),
223
 
                         (['src/bar.c', 'bla/foo.c'], 'src'),
224
 
                         (['src'], 'src'),
225
 
                         ]:
226
 
            self.assert_(osutils.is_inside_or_parent_of_any(dirs, fn))
227
 
 
228
 
        for dirs, fn in [(['src'], 'srccontrol'),
229
 
                         (['srccontrol/foo.c'], 'src'),
230
 
                         (['src'], 'srccontrol/foo')]:
231
 
            self.assertFalse(osutils.is_inside_or_parent_of_any(dirs, fn))
232
 
 
233
 
 
234
 
class TestLstat(tests.TestCaseInTempDir):
235
 
 
236
 
    def test_lstat_matches_fstat(self):
237
 
        # On Windows, lstat and fstat don't always agree, primarily in the
238
 
        # 'st_ino' and 'st_dev' fields. So we force them to be '0' in our
239
 
        # custom implementation.
240
 
        if sys.platform == 'win32':
241
 
            # We only have special lstat/fstat if we have the extension.
242
 
            # Without it, we may end up re-reading content when we don't have
243
 
            # to, but otherwise it doesn't effect correctness.
244
 
            self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
245
 
        f = open('test-file.txt', 'wb')
246
 
        self.addCleanup(f.close)
247
 
        f.write('some content\n')
248
 
        f.flush()
249
 
        self.assertEqualStat(osutils.fstat(f.fileno()),
250
 
                             osutils.lstat('test-file.txt'))
251
 
 
252
 
 
253
 
class TestRmTree(tests.TestCaseInTempDir):
254
 
 
255
108
    def test_rmtree(self):
256
109
        # Check to remove tree with read-only files/dirs
257
110
        os.mkdir('dir')
267
120
 
268
121
        osutils.rmtree('dir')
269
122
 
270
 
        self.assertPathDoesNotExist('dir/file')
271
 
        self.assertPathDoesNotExist('dir')
272
 
 
273
 
 
274
 
class TestDeleteAny(tests.TestCaseInTempDir):
275
 
 
276
 
    def test_delete_any_readonly(self):
277
 
        # from <https://bugs.launchpad.net/bzr/+bug/218206>
278
 
        self.build_tree(['d/', 'f'])
279
 
        osutils.make_readonly('d')
280
 
        osutils.make_readonly('f')
281
 
 
282
 
        osutils.delete_any('f')
283
 
        osutils.delete_any('d')
284
 
 
285
 
 
286
 
class TestKind(tests.TestCaseInTempDir):
 
123
        self.failIfExists('dir/file')
 
124
        self.failIfExists('dir')
287
125
 
288
126
    def test_file_kind(self):
289
127
        self.build_tree(['file', 'dir/'])
292
130
        if osutils.has_symlinks():
293
131
            os.symlink('symlink', 'symlink')
294
132
            self.assertEquals('symlink', osutils.file_kind('symlink'))
295
 
 
 
133
        
296
134
        # TODO: jam 20060529 Test a block device
297
135
        try:
298
136
            os.lstat('/dev/null')
320
158
                os.remove('socket')
321
159
 
322
160
    def test_kind_marker(self):
323
 
        self.assertEqual("", osutils.kind_marker("file"))
324
 
        self.assertEqual("/", osutils.kind_marker('directory'))
325
 
        self.assertEqual("/", osutils.kind_marker(osutils._directory_kind))
326
 
        self.assertEqual("@", osutils.kind_marker("symlink"))
327
 
        self.assertEqual("+", osutils.kind_marker("tree-reference"))
328
 
        self.assertEqual("", osutils.kind_marker("fifo"))
329
 
        self.assertEqual("", osutils.kind_marker("socket"))
330
 
        self.assertEqual("", osutils.kind_marker("unknown"))
331
 
 
332
 
 
333
 
class TestUmask(tests.TestCaseInTempDir):
 
161
        self.assertEqual(osutils.kind_marker('file'), '')
 
162
        self.assertEqual(osutils.kind_marker('directory'), '/')
 
163
        self.assertEqual(osutils.kind_marker('symlink'), '@')
 
164
        self.assertEqual(osutils.kind_marker('tree-reference'), '+')
334
165
 
335
166
    def test_get_umask(self):
336
167
        if sys.platform == 'win32':
339
170
            return
340
171
 
341
172
        orig_umask = osutils.get_umask()
342
 
        self.addCleanup(os.umask, orig_umask)
343
 
        os.umask(0222)
344
 
        self.assertEqual(0222, osutils.get_umask())
345
 
        os.umask(0022)
346
 
        self.assertEqual(0022, osutils.get_umask())
347
 
        os.umask(0002)
348
 
        self.assertEqual(0002, osutils.get_umask())
349
 
        os.umask(0027)
350
 
        self.assertEqual(0027, osutils.get_umask())
351
 
 
352
 
 
353
 
class TestDateTime(tests.TestCase):
 
173
        try:
 
174
            os.umask(0222)
 
175
            self.assertEqual(0222, osutils.get_umask())
 
176
            os.umask(0022)
 
177
            self.assertEqual(0022, osutils.get_umask())
 
178
            os.umask(0002)
 
179
            self.assertEqual(0002, osutils.get_umask())
 
180
            os.umask(0027)
 
181
            self.assertEqual(0027, osutils.get_umask())
 
182
        finally:
 
183
            os.umask(orig_umask)
354
184
 
355
185
    def assertFormatedDelta(self, expected, seconds):
356
186
        """Assert osutils.format_delta formats as expected"""
388
218
        self.assertFormatedDelta('1 second in the future', -1)
389
219
        self.assertFormatedDelta('2 seconds in the future', -2)
390
220
 
391
 
    def test_format_date(self):
392
 
        self.assertRaises(errors.UnsupportedTimezoneFormat,
393
 
            osutils.format_date, 0, timezone='foo')
394
 
        self.assertIsInstance(osutils.format_date(0), str)
395
 
        self.assertIsInstance(osutils.format_local_date(0), unicode)
396
 
        # Testing for the actual value of the local weekday without
397
 
        # duplicating the code from format_date is difficult.
398
 
        # Instead blackbox.test_locale should check for localized
399
 
        # dates once they do occur in output strings.
400
 
 
401
 
    def test_format_date_with_offset_in_original_timezone(self):
402
 
        self.assertEqual("Thu 1970-01-01 00:00:00 +0000",
403
 
            osutils.format_date_with_offset_in_original_timezone(0))
404
 
        self.assertEqual("Fri 1970-01-02 03:46:40 +0000",
405
 
            osutils.format_date_with_offset_in_original_timezone(100000))
406
 
        self.assertEqual("Fri 1970-01-02 05:46:40 +0200",
407
 
            osutils.format_date_with_offset_in_original_timezone(100000, 7200))
408
 
 
409
 
    def test_local_time_offset(self):
410
 
        """Test that local_time_offset() returns a sane value."""
411
 
        offset = osutils.local_time_offset()
412
 
        self.assertTrue(isinstance(offset, int))
413
 
        # Test that the offset is no more than a eighteen hours in
414
 
        # either direction.
415
 
        # Time zone handling is system specific, so it is difficult to
416
 
        # do more specific tests, but a value outside of this range is
417
 
        # probably wrong.
418
 
        eighteen_hours = 18 * 3600
419
 
        self.assertTrue(-eighteen_hours < offset < eighteen_hours)
420
 
 
421
 
    def test_local_time_offset_with_timestamp(self):
422
 
        """Test that local_time_offset() works with a timestamp."""
423
 
        offset = osutils.local_time_offset(1000000000.1234567)
424
 
        self.assertTrue(isinstance(offset, int))
425
 
        eighteen_hours = 18 * 3600
426
 
        self.assertTrue(-eighteen_hours < offset < eighteen_hours)
427
 
 
428
 
 
429
 
class TestLinks(tests.TestCaseInTempDir):
430
 
 
431
221
    def test_dereference_path(self):
432
 
        self.requireFeature(tests.SymlinkFeature)
 
222
        if not osutils.has_symlinks():
 
223
            raise TestSkipped('Symlinks are not supported on this platform')
433
224
        cwd = osutils.realpath('.')
434
225
        os.mkdir('bar')
435
226
        bar_path = osutils.pathjoin(cwd, 'bar')
438
229
        self.assertEqual(bar_path, osutils.realpath('./bar'))
439
230
        os.symlink('bar', 'foo')
440
231
        self.assertEqual(bar_path, osutils.realpath('./foo'))
441
 
 
 
232
        
442
233
        # Does not dereference terminal symlinks
443
234
        foo_path = osutils.pathjoin(cwd, 'foo')
444
235
        self.assertEqual(foo_path, osutils.dereference_path('./foo'))
455
246
        foo_baz_path = osutils.pathjoin(foo_path, 'baz')
456
247
        self.assertEqual(baz_path, osutils.dereference_path(foo_baz_path))
457
248
 
458
 
    def test_changing_access(self):
459
 
        f = file('file', 'w')
460
 
        f.write('monkey')
461
 
        f.close()
462
 
 
463
 
        # Make a file readonly
464
 
        osutils.make_readonly('file')
465
 
        mode = os.lstat('file').st_mode
466
 
        self.assertEqual(mode, mode & 0777555)
467
 
 
468
 
        # Make a file writable
469
 
        osutils.make_writable('file')
470
 
        mode = os.lstat('file').st_mode
471
 
        self.assertEqual(mode, mode | 0200)
472
 
 
473
 
        if osutils.has_symlinks():
474
 
            # should not error when handed a symlink
475
 
            os.symlink('nonexistent', 'dangling')
476
 
            osutils.make_readonly('dangling')
477
 
            osutils.make_writable('dangling')
478
 
 
479
 
    def test_host_os_dereferences_symlinks(self):
480
 
        osutils.host_os_dereferences_symlinks()
481
 
 
482
 
 
483
 
class TestCanonicalRelPath(tests.TestCaseInTempDir):
484
 
 
485
 
    _test_needs_features = [tests.CaseInsCasePresFilenameFeature]
486
 
 
487
 
    def test_canonical_relpath_simple(self):
488
 
        f = file('MixedCaseName', 'w')
489
 
        f.close()
490
 
        actual = osutils.canonical_relpath(self.test_base_dir, 'mixedcasename')
491
 
        self.assertEqual('work/MixedCaseName', actual)
492
 
 
493
 
    def test_canonical_relpath_missing_tail(self):
494
 
        os.mkdir('MixedCaseParent')
495
 
        actual = osutils.canonical_relpath(self.test_base_dir,
496
 
                                           'mixedcaseparent/nochild')
497
 
        self.assertEqual('work/MixedCaseParent/nochild', actual)
498
 
 
499
 
 
500
 
class Test_CICPCanonicalRelpath(tests.TestCaseWithTransport):
501
 
 
502
 
    def assertRelpath(self, expected, base, path):
503
 
        actual = osutils._cicp_canonical_relpath(base, path)
504
 
        self.assertEqual(expected, actual)
505
 
 
506
 
    def test_simple(self):
507
 
        self.build_tree(['MixedCaseName'])
508
 
        base = osutils.realpath(self.get_transport('.').local_abspath('.'))
509
 
        self.assertRelpath('MixedCaseName', base, 'mixedcAsename')
510
 
 
511
 
    def test_subdir_missing_tail(self):
512
 
        self.build_tree(['MixedCaseParent/', 'MixedCaseParent/a_child'])
513
 
        base = osutils.realpath(self.get_transport('.').local_abspath('.'))
514
 
        self.assertRelpath('MixedCaseParent/a_child', base,
515
 
                           'MixedCaseParent/a_child')
516
 
        self.assertRelpath('MixedCaseParent/a_child', base,
517
 
                           'MixedCaseParent/A_Child')
518
 
        self.assertRelpath('MixedCaseParent/not_child', base,
519
 
                           'MixedCaseParent/not_child')
520
 
 
521
 
    def test_at_root_slash(self):
522
 
        # We can't test this on Windows, because it has a 'MIN_ABS_PATHLENGTH'
523
 
        # check...
524
 
        if osutils.MIN_ABS_PATHLENGTH > 1:
525
 
            raise tests.TestSkipped('relpath requires %d chars'
526
 
                                    % osutils.MIN_ABS_PATHLENGTH)
527
 
        self.assertRelpath('foo', '/', '/foo')
528
 
 
529
 
    def test_at_root_drive(self):
530
 
        if sys.platform != 'win32':
531
 
            raise tests.TestNotApplicable('we can only test drive-letter relative'
532
 
                                          ' paths on Windows where we have drive'
533
 
                                          ' letters.')
534
 
        # see bug #322807
535
 
        # The specific issue is that when at the root of a drive, 'abspath'
536
 
        # returns "C:/" or just "/". However, the code assumes that abspath
537
 
        # always returns something like "C:/foo" or "/foo" (no trailing slash).
538
 
        self.assertRelpath('foo', 'C:/', 'C:/foo')
539
 
        self.assertRelpath('foo', 'X:/', 'X:/foo')
540
 
        self.assertRelpath('foo', 'X:/', 'X://foo')
541
 
 
542
 
 
543
 
class TestPumpFile(tests.TestCase):
544
 
    """Test pumpfile method."""
545
 
 
546
 
    def setUp(self):
547
 
        tests.TestCase.setUp(self)
548
 
        # create a test datablock
549
 
        self.block_size = 512
550
 
        pattern = '0123456789ABCDEF'
551
 
        self.test_data = pattern * (3 * self.block_size / len(pattern))
552
 
        self.test_data_len = len(self.test_data)
553
 
 
554
 
    def test_bracket_block_size(self):
555
 
        """Read data in blocks with the requested read size bracketing the
556
 
        block size."""
557
 
        # make sure test data is larger than max read size
558
 
        self.assertTrue(self.test_data_len > self.block_size)
559
 
 
560
 
        from_file = file_utils.FakeReadFile(self.test_data)
561
 
        to_file = StringIO()
562
 
 
563
 
        # read (max / 2) bytes and verify read size wasn't affected
564
 
        num_bytes_to_read = self.block_size / 2
565
 
        osutils.pumpfile(from_file, to_file, num_bytes_to_read, self.block_size)
566
 
        self.assertEqual(from_file.get_max_read_size(), num_bytes_to_read)
567
 
        self.assertEqual(from_file.get_read_count(), 1)
568
 
 
569
 
        # read (max) bytes and verify read size wasn't affected
570
 
        num_bytes_to_read = self.block_size
571
 
        from_file.reset_read_count()
572
 
        osutils.pumpfile(from_file, to_file, num_bytes_to_read, self.block_size)
573
 
        self.assertEqual(from_file.get_max_read_size(), num_bytes_to_read)
574
 
        self.assertEqual(from_file.get_read_count(), 1)
575
 
 
576
 
        # read (max + 1) bytes and verify read size was limited
577
 
        num_bytes_to_read = self.block_size + 1
578
 
        from_file.reset_read_count()
579
 
        osutils.pumpfile(from_file, to_file, num_bytes_to_read, self.block_size)
580
 
        self.assertEqual(from_file.get_max_read_size(), self.block_size)
581
 
        self.assertEqual(from_file.get_read_count(), 2)
582
 
 
583
 
        # finish reading the rest of the data
584
 
        num_bytes_to_read = self.test_data_len - to_file.tell()
585
 
        osutils.pumpfile(from_file, to_file, num_bytes_to_read, self.block_size)
586
 
 
587
 
        # report error if the data wasn't equal (we only report the size due
588
 
        # to the length of the data)
589
 
        response_data = to_file.getvalue()
590
 
        if response_data != self.test_data:
591
 
            message = "Data not equal.  Expected %d bytes, received %d."
592
 
            self.fail(message % (len(response_data), self.test_data_len))
593
 
 
594
 
    def test_specified_size(self):
595
 
        """Request a transfer larger than the maximum block size and verify
596
 
        that the maximum read doesn't exceed the block_size."""
597
 
        # make sure test data is larger than max read size
598
 
        self.assertTrue(self.test_data_len > self.block_size)
599
 
 
600
 
        # retrieve data in blocks
601
 
        from_file = file_utils.FakeReadFile(self.test_data)
602
 
        to_file = StringIO()
603
 
        osutils.pumpfile(from_file, to_file, self.test_data_len,
604
 
                         self.block_size)
605
 
 
606
 
        # verify read size was equal to the maximum read size
607
 
        self.assertTrue(from_file.get_max_read_size() > 0)
608
 
        self.assertEqual(from_file.get_max_read_size(), self.block_size)
609
 
        self.assertEqual(from_file.get_read_count(), 3)
610
 
 
611
 
        # report error if the data wasn't equal (we only report the size due
612
 
        # to the length of the data)
613
 
        response_data = to_file.getvalue()
614
 
        if response_data != self.test_data:
615
 
            message = "Data not equal.  Expected %d bytes, received %d."
616
 
            self.fail(message % (len(response_data), self.test_data_len))
617
 
 
618
 
    def test_to_eof(self):
619
 
        """Read to end-of-file and verify that the reads are not larger than
620
 
        the maximum read size."""
621
 
        # make sure test data is larger than max read size
622
 
        self.assertTrue(self.test_data_len > self.block_size)
623
 
 
624
 
        # retrieve data to EOF
625
 
        from_file = file_utils.FakeReadFile(self.test_data)
626
 
        to_file = StringIO()
627
 
        osutils.pumpfile(from_file, to_file, -1, self.block_size)
628
 
 
629
 
        # verify read size was equal to the maximum read size
630
 
        self.assertEqual(from_file.get_max_read_size(), self.block_size)
631
 
        self.assertEqual(from_file.get_read_count(), 4)
632
 
 
633
 
        # report error if the data wasn't equal (we only report the size due
634
 
        # to the length of the data)
635
 
        response_data = to_file.getvalue()
636
 
        if response_data != self.test_data:
637
 
            message = "Data not equal.  Expected %d bytes, received %d."
638
 
            self.fail(message % (len(response_data), self.test_data_len))
639
 
 
640
 
    def test_defaults(self):
641
 
        """Verifies that the default arguments will read to EOF -- this
642
 
        test verifies that any existing usages of pumpfile will not be broken
643
 
        with this new version."""
644
 
        # retrieve data using default (old) pumpfile method
645
 
        from_file = file_utils.FakeReadFile(self.test_data)
646
 
        to_file = StringIO()
647
 
        osutils.pumpfile(from_file, to_file)
648
 
 
649
 
        # report error if the data wasn't equal (we only report the size due
650
 
        # to the length of the data)
651
 
        response_data = to_file.getvalue()
652
 
        if response_data != self.test_data:
653
 
            message = "Data not equal.  Expected %d bytes, received %d."
654
 
            self.fail(message % (len(response_data), self.test_data_len))
655
 
 
656
 
    def test_report_activity(self):
657
 
        activity = []
658
 
        def log_activity(length, direction):
659
 
            activity.append((length, direction))
660
 
        from_file = StringIO(self.test_data)
661
 
        to_file = StringIO()
662
 
        osutils.pumpfile(from_file, to_file, buff_size=500,
663
 
                         report_activity=log_activity, direction='read')
664
 
        self.assertEqual([(500, 'read'), (500, 'read'), (500, 'read'),
665
 
                          (36, 'read')], activity)
666
 
 
667
 
        from_file = StringIO(self.test_data)
668
 
        to_file = StringIO()
669
 
        del activity[:]
670
 
        osutils.pumpfile(from_file, to_file, buff_size=500,
671
 
                         report_activity=log_activity, direction='write')
672
 
        self.assertEqual([(500, 'write'), (500, 'write'), (500, 'write'),
673
 
                          (36, 'write')], activity)
674
 
 
675
 
        # And with a limited amount of data
676
 
        from_file = StringIO(self.test_data)
677
 
        to_file = StringIO()
678
 
        del activity[:]
679
 
        osutils.pumpfile(from_file, to_file, buff_size=500, read_length=1028,
680
 
                         report_activity=log_activity, direction='read')
681
 
        self.assertEqual([(500, 'read'), (500, 'read'), (28, 'read')], activity)
682
 
 
683
 
 
684
 
 
685
 
class TestPumpStringFile(tests.TestCase):
686
 
 
687
 
    def test_empty(self):
688
 
        output = StringIO()
689
 
        osutils.pump_string_file("", output)
690
 
        self.assertEqual("", output.getvalue())
691
 
 
692
 
    def test_more_than_segment_size(self):
693
 
        output = StringIO()
694
 
        osutils.pump_string_file("123456789", output, 2)
695
 
        self.assertEqual("123456789", output.getvalue())
696
 
 
697
 
    def test_segment_size(self):
698
 
        output = StringIO()
699
 
        osutils.pump_string_file("12", output, 2)
700
 
        self.assertEqual("12", output.getvalue())
701
 
 
702
 
    def test_segment_size_multiple(self):
703
 
        output = StringIO()
704
 
        osutils.pump_string_file("1234", output, 2)
705
 
        self.assertEqual("1234", output.getvalue())
706
 
 
707
 
 
708
 
class TestRelpath(tests.TestCase):
709
 
 
710
 
    def test_simple_relpath(self):
711
 
        cwd = osutils.getcwd()
712
 
        subdir = cwd + '/subdir'
713
 
        self.assertEqual('subdir', osutils.relpath(cwd, subdir))
714
 
 
715
 
    def test_deep_relpath(self):
716
 
        cwd = osutils.getcwd()
717
 
        subdir = cwd + '/sub/subsubdir'
718
 
        self.assertEqual('sub/subsubdir', osutils.relpath(cwd, subdir))
719
 
 
720
 
    def test_not_relative(self):
721
 
        self.assertRaises(errors.PathNotChild,
722
 
                          osutils.relpath, 'C:/path', 'H:/path')
723
 
        self.assertRaises(errors.PathNotChild,
724
 
                          osutils.relpath, 'C:/', 'H:/path')
725
 
 
726
 
 
727
 
class TestSafeUnicode(tests.TestCase):
 
249
 
 
250
    def test_kind_marker(self):
 
251
        self.assertEqual("", osutils.kind_marker("file"))
 
252
        self.assertEqual("/", osutils.kind_marker(osutils._directory_kind))
 
253
        self.assertEqual("@", osutils.kind_marker("symlink"))
 
254
        self.assertRaises(errors.BzrError, osutils.kind_marker, "unknown")
 
255
 
 
256
 
 
257
class TestSafeUnicode(TestCase):
728
258
 
729
259
    def test_from_ascii_string(self):
730
260
        self.assertEqual(u'foobar', osutils.safe_unicode('foobar'))
739
269
        self.assertEqual(u'foo\xae', osutils.safe_unicode('foo\xc2\xae'))
740
270
 
741
271
    def test_bad_utf8_string(self):
742
 
        self.assertRaises(errors.BzrBadParameterNotUnicode,
 
272
        self.assertRaises(BzrBadParameterNotUnicode,
743
273
                          osutils.safe_unicode,
744
274
                          '\xbb\xbb')
745
275
 
746
276
 
747
 
class TestSafeUtf8(tests.TestCase):
 
277
class TestSafeUtf8(TestCase):
748
278
 
749
279
    def test_from_ascii_string(self):
750
280
        f = 'foobar'
760
290
        self.assertEqual('foo\xc2\xae', osutils.safe_utf8('foo\xc2\xae'))
761
291
 
762
292
    def test_bad_utf8_string(self):
763
 
        self.assertRaises(errors.BzrBadParameterNotUnicode,
 
293
        self.assertRaises(BzrBadParameterNotUnicode,
764
294
                          osutils.safe_utf8, '\xbb\xbb')
765
295
 
766
296
 
767
 
class TestSafeRevisionId(tests.TestCase):
 
297
class TestSafeRevisionId(TestCase):
768
298
 
769
299
    def test_from_ascii_string(self):
770
 
        # this shouldn't give a warning because it's getting an ascii string
771
300
        self.assertEqual('foobar', osutils.safe_revision_id('foobar'))
772
301
 
773
302
    def test_from_unicode_string_ascii_contents(self):
792
321
        self.assertEqual(None, osutils.safe_revision_id(None))
793
322
 
794
323
 
795
 
class TestSafeFileId(tests.TestCase):
 
324
class TestSafeFileId(TestCase):
796
325
 
797
326
    def test_from_ascii_string(self):
798
327
        self.assertEqual('foobar', osutils.safe_file_id('foobar'))
818
347
        self.assertEqual(None, osutils.safe_file_id(None))
819
348
 
820
349
 
821
 
class TestWin32Funcs(tests.TestCase):
822
 
    """Test that _win32 versions of os utilities return appropriate paths."""
 
350
class TestWin32Funcs(TestCase):
 
351
    """Test that the _win32 versions of os utilities return appropriate paths."""
823
352
 
824
353
    def test_abspath(self):
825
354
        self.assertEqual('C:/foo', osutils._win32_abspath('C:\\foo'))
832
361
        self.assertEqual('C:/foo', osutils._win32_realpath('C:/foo'))
833
362
 
834
363
    def test_pathjoin(self):
835
 
        self.assertEqual('path/to/foo',
836
 
                         osutils._win32_pathjoin('path', 'to', 'foo'))
837
 
        self.assertEqual('C:/foo',
838
 
                         osutils._win32_pathjoin('path\\to', 'C:\\foo'))
839
 
        self.assertEqual('C:/foo',
840
 
                         osutils._win32_pathjoin('path/to', 'C:/foo'))
841
 
        self.assertEqual('path/to/foo',
842
 
                         osutils._win32_pathjoin('path/to/', 'foo'))
843
 
        self.assertEqual('/foo',
844
 
                         osutils._win32_pathjoin('C:/path/to/', '/foo'))
845
 
        self.assertEqual('/foo',
846
 
                         osutils._win32_pathjoin('C:\\path\\to\\', '\\foo'))
 
364
        self.assertEqual('path/to/foo', osutils._win32_pathjoin('path', 'to', 'foo'))
 
365
        self.assertEqual('C:/foo', osutils._win32_pathjoin('path\\to', 'C:\\foo'))
 
366
        self.assertEqual('C:/foo', osutils._win32_pathjoin('path/to', 'C:/foo'))
 
367
        self.assertEqual('path/to/foo', osutils._win32_pathjoin('path/to/', 'foo'))
 
368
        self.assertEqual('/foo', osutils._win32_pathjoin('C:/path/to/', '/foo'))
 
369
        self.assertEqual('/foo', osutils._win32_pathjoin('C:\\path\\to\\', '\\foo'))
847
370
 
848
371
    def test_normpath(self):
849
 
        self.assertEqual('path/to/foo',
850
 
                         osutils._win32_normpath(r'path\\from\..\to\.\foo'))
851
 
        self.assertEqual('path/to/foo',
852
 
                         osutils._win32_normpath('path//from/../to/./foo'))
 
372
        self.assertEqual('path/to/foo', osutils._win32_normpath(r'path\\from\..\to\.\foo'))
 
373
        self.assertEqual('path/to/foo', osutils._win32_normpath('path//from/../to/./foo'))
853
374
 
854
375
    def test_getcwd(self):
855
376
        cwd = osutils._win32_getcwd()
876
397
        self.assertEqual('//HOST/path', osutils._win98_abspath('//HOST/path'))
877
398
        # relative path
878
399
        cwd = osutils.getcwd().rstrip('/')
879
 
        drive = osutils.ntpath.splitdrive(cwd)[0]
 
400
        drive = osutils._nt_splitdrive(cwd)[0]
880
401
        self.assertEqual(cwd+'/path', osutils._win98_abspath('path'))
881
402
        self.assertEqual(drive+'/path', osutils._win98_abspath('/path'))
882
403
        # unicode path
884
405
        self.assertEqual(cwd+'/'+u, osutils._win98_abspath(u))
885
406
 
886
407
 
887
 
class TestWin32FuncsDirs(tests.TestCaseInTempDir):
 
408
class TestWin32FuncsDirs(TestCaseInTempDir):
888
409
    """Test win32 functions that create files."""
 
410
    
 
411
    def test_getcwd(self):
 
412
        if win32utils.winver == 'Windows 98':
 
413
            raise TestSkipped('Windows 98 cannot handle unicode filenames')
 
414
        # Make sure getcwd can handle unicode filenames
 
415
        try:
 
416
            os.mkdir(u'mu-\xb5')
 
417
        except UnicodeError:
 
418
            raise TestSkipped("Unable to create Unicode filename")
889
419
 
890
 
    def test_getcwd(self):
891
 
        self.requireFeature(tests.UnicodeFilenameFeature)
892
 
        os.mkdir(u'mu-\xb5')
893
420
        os.chdir(u'mu-\xb5')
894
421
        # TODO: jam 20060427 This will probably fail on Mac OSX because
895
422
        #       it will change the normalization of B\xe5gfors
897
424
        #       osutils.getcwd() renormalize the path.
898
425
        self.assertEndsWith(osutils._win32_getcwd(), u'mu-\xb5')
899
426
 
900
 
    def test_minimum_path_selection(self):
901
 
        self.assertEqual(set(),
902
 
            osutils.minimum_path_selection([]))
903
 
        self.assertEqual(set(['a']),
904
 
            osutils.minimum_path_selection(['a']))
905
 
        self.assertEqual(set(['a', 'b']),
906
 
            osutils.minimum_path_selection(['a', 'b']))
907
 
        self.assertEqual(set(['a/', 'b']),
908
 
            osutils.minimum_path_selection(['a/', 'b']))
909
 
        self.assertEqual(set(['a/', 'b']),
910
 
            osutils.minimum_path_selection(['a/c', 'a/', 'b']))
911
 
        self.assertEqual(set(['a-b', 'a', 'a0b']),
912
 
            osutils.minimum_path_selection(['a-b', 'a/b', 'a0b', 'a']))
913
 
 
914
427
    def test_mkdtemp(self):
915
428
        tmpdir = osutils._win32_mkdtemp(dir='.')
916
429
        self.assertFalse('\\' in tmpdir)
924
437
        b.close()
925
438
 
926
439
        osutils._win32_rename('b', 'a')
927
 
        self.assertPathExists('a')
928
 
        self.assertPathDoesNotExist('b')
 
440
        self.failUnlessExists('a')
 
441
        self.failIfExists('b')
929
442
        self.assertFileEqual('baz\n', 'a')
930
443
 
931
444
    def test_rename_missing_file(self):
971
484
        self.assertRaises(errors.BzrError, osutils.splitpath, 'a/../b')
972
485
 
973
486
 
974
 
class TestParentDirectories(tests.TestCaseInTempDir):
975
 
    """Test osutils.parent_directories()"""
976
 
 
977
 
    def test_parent_directories(self):
978
 
        self.assertEqual([], osutils.parent_directories('a'))
979
 
        self.assertEqual(['a'], osutils.parent_directories('a/b'))
980
 
        self.assertEqual(['a/b', 'a'], osutils.parent_directories('a/b/c'))
981
 
 
982
 
 
983
 
class TestMacFuncsDirs(tests.TestCaseInTempDir):
 
487
class TestMacFuncsDirs(TestCaseInTempDir):
984
488
    """Test mac special functions that require directories."""
985
489
 
986
490
    def test_getcwd(self):
987
 
        self.requireFeature(tests.UnicodeFilenameFeature)
988
 
        os.mkdir(u'B\xe5gfors')
 
491
        # On Mac, this will actually create Ba\u030agfors
 
492
        # but chdir will still work, because it accepts both paths
 
493
        try:
 
494
            os.mkdir(u'B\xe5gfors')
 
495
        except UnicodeError:
 
496
            raise TestSkipped("Unable to create Unicode filename")
 
497
 
989
498
        os.chdir(u'B\xe5gfors')
990
499
        self.assertEndsWith(osutils._mac_getcwd(), u'B\xe5gfors')
991
500
 
992
501
    def test_getcwd_nonnorm(self):
993
 
        self.requireFeature(tests.UnicodeFilenameFeature)
994
502
        # Test that _mac_getcwd() will normalize this path
995
 
        os.mkdir(u'Ba\u030agfors')
 
503
        try:
 
504
            os.mkdir(u'Ba\u030agfors')
 
505
        except UnicodeError:
 
506
            raise TestSkipped("Unable to create Unicode filename")
 
507
 
996
508
        os.chdir(u'Ba\u030agfors')
997
509
        self.assertEndsWith(osutils._mac_getcwd(), u'B\xe5gfors')
998
510
 
999
511
 
1000
 
class TestChunksToLines(tests.TestCase):
1001
 
 
1002
 
    def test_smoketest(self):
1003
 
        self.assertEqual(['foo\n', 'bar\n', 'baz\n'],
1004
 
                         osutils.chunks_to_lines(['foo\nbar', '\nbaz\n']))
1005
 
        self.assertEqual(['foo\n', 'bar\n', 'baz\n'],
1006
 
                         osutils.chunks_to_lines(['foo\n', 'bar\n', 'baz\n']))
1007
 
 
1008
 
    def test_osutils_binding(self):
1009
 
        from bzrlib.tests import test__chunks_to_lines
1010
 
        if test__chunks_to_lines.compiled_chunkstolines_feature.available():
1011
 
            from bzrlib._chunks_to_lines_pyx import chunks_to_lines
1012
 
        else:
1013
 
            from bzrlib._chunks_to_lines_py import chunks_to_lines
1014
 
        self.assertIs(chunks_to_lines, osutils.chunks_to_lines)
1015
 
 
1016
 
 
1017
 
class TestSplitLines(tests.TestCase):
 
512
class TestSplitLines(TestCase):
1018
513
 
1019
514
    def test_split_unicode(self):
1020
515
        self.assertEqual([u'foo\n', u'bar\xae'],
1027
522
                         osutils.split_lines('foo\rbar\n'))
1028
523
 
1029
524
 
1030
 
class TestWalkDirs(tests.TestCaseInTempDir):
1031
 
 
1032
 
    def assertExpectedBlocks(self, expected, result):
1033
 
        self.assertEqual(expected,
1034
 
                         [(dirinfo, [line[0:3] for line in block])
1035
 
                          for dirinfo, block in result])
 
525
class TestWalkDirs(TestCaseInTempDir):
1036
526
 
1037
527
    def test_walkdirs(self):
1038
528
        tree = [
1071
561
            result.append((dirdetail, dirblock))
1072
562
 
1073
563
        self.assertTrue(found_bzrdir)
1074
 
        self.assertExpectedBlocks(expected_dirblocks, result)
 
564
        self.assertEqual(expected_dirblocks,
 
565
            [(dirinfo, [line[0:3] for line in block]) for dirinfo, block in result])
1075
566
        # you can search a subdir only, with a supplied prefix.
1076
567
        result = []
1077
568
        for dirblock in osutils.walkdirs('./1dir', '1dir'):
1078
569
            result.append(dirblock)
1079
 
        self.assertExpectedBlocks(expected_dirblocks[1:], result)
1080
 
 
1081
 
    def test_walkdirs_os_error(self):
1082
 
        # <https://bugs.launchpad.net/bzr/+bug/338653>
1083
 
        # Pyrex readdir didn't raise useful messages if it had an error
1084
 
        # reading the directory
1085
 
        if sys.platform == 'win32':
1086
 
            raise tests.TestNotApplicable(
1087
 
                "readdir IOError not tested on win32")
1088
 
        self.requireFeature(features.not_running_as_root)
1089
 
        os.mkdir("test-unreadable")
1090
 
        os.chmod("test-unreadable", 0000)
1091
 
        # must chmod it back so that it can be removed
1092
 
        self.addCleanup(os.chmod, "test-unreadable", 0700)
1093
 
        # The error is not raised until the generator is actually evaluated.
1094
 
        # (It would be ok if it happened earlier but at the moment it
1095
 
        # doesn't.)
1096
 
        e = self.assertRaises(OSError, list, osutils._walkdirs_utf8("."))
1097
 
        self.assertEquals('./test-unreadable', e.filename)
1098
 
        self.assertEquals(errno.EACCES, e.errno)
1099
 
        # Ensure the message contains the file name
1100
 
        self.assertContainsRe(str(e), "\./test-unreadable")
1101
 
 
1102
 
 
1103
 
    def test_walkdirs_encoding_error(self):
1104
 
        # <https://bugs.launchpad.net/bzr/+bug/488519>
1105
 
        # walkdirs didn't raise a useful message when the filenames
1106
 
        # are not using the filesystem's encoding
1107
 
 
1108
 
        # require a bytestring based filesystem
1109
 
        self.requireFeature(tests.ByteStringNamedFilesystem)
1110
 
 
1111
 
        tree = [
1112
 
            '.bzr',
1113
 
            '0file',
1114
 
            '1dir/',
1115
 
            '1dir/0file',
1116
 
            '1dir/1dir/',
1117
 
            '1file'
1118
 
            ]
1119
 
 
1120
 
        self.build_tree(tree)
1121
 
 
1122
 
        # rename the 1file to a latin-1 filename
1123
 
        os.rename("./1file", "\xe8file")
1124
 
        if "\xe8file" not in os.listdir("."):
1125
 
            self.skip("Lack filesystem that preserves arbitrary bytes")
1126
 
 
1127
 
        self._save_platform_info()
1128
 
        win32utils.winver = None # Avoid the win32 detection code
1129
 
        osutils._fs_enc = 'UTF-8'
1130
 
 
1131
 
        # this should raise on error
1132
 
        def attempt():
1133
 
            for dirdetail, dirblock in osutils.walkdirs('.'):
1134
 
                pass
1135
 
 
1136
 
        self.assertRaises(errors.BadFilenameEncoding, attempt)
 
570
        self.assertEqual(expected_dirblocks[1:],
 
571
            [(dirinfo, [line[0:3] for line in block]) for dirinfo, block in result])
1137
572
 
1138
573
    def test__walkdirs_utf8(self):
1139
574
        tree = [
1172
607
            result.append((dirdetail, dirblock))
1173
608
 
1174
609
        self.assertTrue(found_bzrdir)
1175
 
        self.assertExpectedBlocks(expected_dirblocks, result)
1176
 
 
 
610
        self.assertEqual(expected_dirblocks,
 
611
            [(dirinfo, [line[0:3] for line in block]) for dirinfo, block in result])
1177
612
        # you can search a subdir only, with a supplied prefix.
1178
613
        result = []
1179
614
        for dirblock in osutils.walkdirs('./1dir', '1dir'):
1180
615
            result.append(dirblock)
1181
 
        self.assertExpectedBlocks(expected_dirblocks[1:], result)
 
616
        self.assertEqual(expected_dirblocks[1:],
 
617
            [(dirinfo, [line[0:3] for line in block]) for dirinfo, block in result])
1182
618
 
1183
619
    def _filter_out_stat(self, result):
1184
620
        """Filter out the stat value from the walkdirs result"""
1189
625
                new_dirblock.append((info[0], info[1], info[2], info[4]))
1190
626
            dirblock[:] = new_dirblock
1191
627
 
1192
 
    def _save_platform_info(self):
1193
 
        self.overrideAttr(win32utils, 'winver')
1194
 
        self.overrideAttr(osutils, '_fs_enc')
1195
 
        self.overrideAttr(osutils, '_selected_dir_reader')
1196
 
 
1197
 
    def assertDirReaderIs(self, expected):
1198
 
        """Assert the right implementation for _walkdirs_utf8 is chosen."""
1199
 
        # Force it to redetect
1200
 
        osutils._selected_dir_reader = None
1201
 
        # Nothing to list, but should still trigger the selection logic
1202
 
        self.assertEqual([(('', '.'), [])], list(osutils._walkdirs_utf8('.')))
1203
 
        self.assertIsInstance(osutils._selected_dir_reader, expected)
1204
 
 
1205
 
    def test_force_walkdirs_utf8_fs_utf8(self):
1206
 
        self.requireFeature(UTF8DirReaderFeature)
1207
 
        self._save_platform_info()
1208
 
        win32utils.winver = None # Avoid the win32 detection code
1209
 
        osutils._fs_enc = 'UTF-8'
1210
 
        self.assertDirReaderIs(UTF8DirReaderFeature.reader)
1211
 
 
1212
 
    def test_force_walkdirs_utf8_fs_ascii(self):
1213
 
        self.requireFeature(UTF8DirReaderFeature)
1214
 
        self._save_platform_info()
1215
 
        win32utils.winver = None # Avoid the win32 detection code
1216
 
        osutils._fs_enc = 'US-ASCII'
1217
 
        self.assertDirReaderIs(UTF8DirReaderFeature.reader)
1218
 
 
1219
 
    def test_force_walkdirs_utf8_fs_ANSI(self):
1220
 
        self.requireFeature(UTF8DirReaderFeature)
1221
 
        self._save_platform_info()
1222
 
        win32utils.winver = None # Avoid the win32 detection code
1223
 
        osutils._fs_enc = 'ANSI_X3.4-1968'
1224
 
        self.assertDirReaderIs(UTF8DirReaderFeature.reader)
1225
 
 
1226
 
    def test_force_walkdirs_utf8_fs_latin1(self):
1227
 
        self._save_platform_info()
1228
 
        win32utils.winver = None # Avoid the win32 detection code
1229
 
        osutils._fs_enc = 'latin1'
1230
 
        self.assertDirReaderIs(osutils.UnicodeDirReader)
1231
 
 
1232
 
    def test_force_walkdirs_utf8_nt(self):
1233
 
        # Disabled because the thunk of the whole walkdirs api is disabled.
1234
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1235
 
        self._save_platform_info()
1236
 
        win32utils.winver = 'Windows NT'
1237
 
        from bzrlib._walkdirs_win32 import Win32ReadDir
1238
 
        self.assertDirReaderIs(Win32ReadDir)
1239
 
 
1240
 
    def test_force_walkdirs_utf8_98(self):
1241
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1242
 
        self._save_platform_info()
1243
 
        win32utils.winver = 'Windows 98'
1244
 
        self.assertDirReaderIs(osutils.UnicodeDirReader)
1245
 
 
1246
628
    def test_unicode_walkdirs(self):
1247
629
        """Walkdirs should always return unicode paths."""
1248
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1249
630
        name0 = u'0file-\xb6'
1250
631
        name1 = u'1dir-\u062c\u0648'
1251
632
        name2 = u'2file-\u0633'
1256
637
            name1 + '/' + name1 + '/',
1257
638
            name2,
1258
639
            ]
1259
 
        self.build_tree(tree)
 
640
        try:
 
641
            self.build_tree(tree)
 
642
        except UnicodeError:
 
643
            raise TestSkipped('Could not represent Unicode chars'
 
644
                              ' in current encoding.')
1260
645
        expected_dirblocks = [
1261
646
                ((u'', u'.'),
1262
647
                 [(name0, name0, 'file', './' + name0),
1288
673
 
1289
674
        The abspath portion might be in unicode or utf-8
1290
675
        """
1291
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1292
676
        name0 = u'0file-\xb6'
1293
677
        name1 = u'1dir-\u062c\u0648'
1294
678
        name2 = u'2file-\u0633'
1299
683
            name1 + '/' + name1 + '/',
1300
684
            name2,
1301
685
            ]
1302
 
        self.build_tree(tree)
 
686
        try:
 
687
            self.build_tree(tree)
 
688
        except UnicodeError:
 
689
            raise TestSkipped('Could not represent Unicode chars'
 
690
                              ' in current encoding.')
1303
691
        name0 = name0.encode('utf8')
1304
692
        name1 = name1.encode('utf8')
1305
693
        name2 = name2.encode('utf8')
1344
732
            result.append((dirdetail, new_dirblock))
1345
733
        self.assertEqual(expected_dirblocks, result)
1346
734
 
1347
 
    def test__walkdirs_utf8_with_unicode_fs(self):
1348
 
        """UnicodeDirReader should be a safe fallback everywhere
 
735
    def test_unicode__walkdirs_unicode_to_utf8(self):
 
736
        """walkdirs_unicode_to_utf8 should be a safe fallback everywhere
1349
737
 
1350
738
        The abspath portion should be in unicode
1351
739
        """
1352
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1353
 
        # Use the unicode reader. TODO: split into driver-and-driven unit
1354
 
        # tests.
1355
 
        self._save_platform_info()
1356
 
        osutils._selected_dir_reader = osutils.UnicodeDirReader()
1357
 
        name0u = u'0file-\xb6'
1358
 
        name1u = u'1dir-\u062c\u0648'
1359
 
        name2u = u'2file-\u0633'
1360
 
        tree = [
1361
 
            name0u,
1362
 
            name1u + '/',
1363
 
            name1u + '/' + name0u,
1364
 
            name1u + '/' + name1u + '/',
1365
 
            name2u,
1366
 
            ]
1367
 
        self.build_tree(tree)
1368
 
        name0 = name0u.encode('utf8')
1369
 
        name1 = name1u.encode('utf8')
1370
 
        name2 = name2u.encode('utf8')
1371
 
 
1372
 
        # All of the abspaths should be in unicode, all of the relative paths
1373
 
        # should be in utf8
1374
 
        expected_dirblocks = [
1375
 
                (('', '.'),
1376
 
                 [(name0, name0, 'file', './' + name0u),
1377
 
                  (name1, name1, 'directory', './' + name1u),
1378
 
                  (name2, name2, 'file', './' + name2u),
1379
 
                 ]
1380
 
                ),
1381
 
                ((name1, './' + name1u),
1382
 
                 [(name1 + '/' + name0, name0, 'file', './' + name1u
1383
 
                                                        + '/' + name0u),
1384
 
                  (name1 + '/' + name1, name1, 'directory', './' + name1u
1385
 
                                                            + '/' + name1u),
1386
 
                 ]
1387
 
                ),
1388
 
                ((name1 + '/' + name1, './' + name1u + '/' + name1u),
1389
 
                 [
1390
 
                 ]
1391
 
                ),
1392
 
            ]
1393
 
        result = list(osutils._walkdirs_utf8('.'))
1394
 
        self._filter_out_stat(result)
1395
 
        self.assertEqual(expected_dirblocks, result)
1396
 
 
1397
 
    def test__walkdirs_utf8_win32readdir(self):
1398
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1399
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1400
 
        from bzrlib._walkdirs_win32 import Win32ReadDir
1401
 
        self._save_platform_info()
1402
 
        osutils._selected_dir_reader = Win32ReadDir()
1403
 
        name0u = u'0file-\xb6'
1404
 
        name1u = u'1dir-\u062c\u0648'
1405
 
        name2u = u'2file-\u0633'
1406
 
        tree = [
1407
 
            name0u,
1408
 
            name1u + '/',
1409
 
            name1u + '/' + name0u,
1410
 
            name1u + '/' + name1u + '/',
1411
 
            name2u,
1412
 
            ]
1413
 
        self.build_tree(tree)
1414
 
        name0 = name0u.encode('utf8')
1415
 
        name1 = name1u.encode('utf8')
1416
 
        name2 = name2u.encode('utf8')
1417
 
 
1418
 
        # All of the abspaths should be in unicode, all of the relative paths
1419
 
        # should be in utf8
1420
 
        expected_dirblocks = [
1421
 
                (('', '.'),
1422
 
                 [(name0, name0, 'file', './' + name0u),
1423
 
                  (name1, name1, 'directory', './' + name1u),
1424
 
                  (name2, name2, 'file', './' + name2u),
1425
 
                 ]
1426
 
                ),
1427
 
                ((name1, './' + name1u),
1428
 
                 [(name1 + '/' + name0, name0, 'file', './' + name1u
1429
 
                                                        + '/' + name0u),
1430
 
                  (name1 + '/' + name1, name1, 'directory', './' + name1u
1431
 
                                                            + '/' + name1u),
1432
 
                 ]
1433
 
                ),
1434
 
                ((name1 + '/' + name1, './' + name1u + '/' + name1u),
1435
 
                 [
1436
 
                 ]
1437
 
                ),
1438
 
            ]
1439
 
        result = list(osutils._walkdirs_utf8(u'.'))
1440
 
        self._filter_out_stat(result)
1441
 
        self.assertEqual(expected_dirblocks, result)
1442
 
 
1443
 
    def assertStatIsCorrect(self, path, win32stat):
1444
 
        os_stat = os.stat(path)
1445
 
        self.assertEqual(os_stat.st_size, win32stat.st_size)
1446
 
        self.assertAlmostEqual(os_stat.st_mtime, win32stat.st_mtime, places=4)
1447
 
        self.assertAlmostEqual(os_stat.st_ctime, win32stat.st_ctime, places=4)
1448
 
        self.assertAlmostEqual(os_stat.st_atime, win32stat.st_atime, places=4)
1449
 
        self.assertEqual(os_stat.st_dev, win32stat.st_dev)
1450
 
        self.assertEqual(os_stat.st_ino, win32stat.st_ino)
1451
 
        self.assertEqual(os_stat.st_mode, win32stat.st_mode)
1452
 
 
1453
 
    def test__walkdirs_utf_win32_find_file_stat_file(self):
1454
 
        """make sure our Stat values are valid"""
1455
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1456
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1457
 
        from bzrlib._walkdirs_win32 import Win32ReadDir
1458
 
        name0u = u'0file-\xb6'
1459
 
        name0 = name0u.encode('utf8')
1460
 
        self.build_tree([name0u])
1461
 
        # I hate to sleep() here, but I'm trying to make the ctime different
1462
 
        # from the mtime
1463
 
        time.sleep(2)
1464
 
        f = open(name0u, 'ab')
 
740
        name0u = u'0file-\xb6'
 
741
        name1u = u'1dir-\u062c\u0648'
 
742
        name2u = u'2file-\u0633'
 
743
        tree = [
 
744
            name0u,
 
745
            name1u + '/',
 
746
            name1u + '/' + name0u,
 
747
            name1u + '/' + name1u + '/',
 
748
            name2u,
 
749
            ]
1465
750
        try:
1466
 
            f.write('just a small update')
1467
 
        finally:
1468
 
            f.close()
1469
 
 
1470
 
        result = Win32ReadDir().read_dir('', u'.')
1471
 
        entry = result[0]
1472
 
        self.assertEqual((name0, name0, 'file'), entry[:3])
1473
 
        self.assertEqual(u'./' + name0u, entry[4])
1474
 
        self.assertStatIsCorrect(entry[4], entry[3])
1475
 
        self.assertNotEqual(entry[3].st_mtime, entry[3].st_ctime)
1476
 
 
1477
 
    def test__walkdirs_utf_win32_find_file_stat_directory(self):
1478
 
        """make sure our Stat values are valid"""
1479
 
        self.requireFeature(test__walkdirs_win32.win32_readdir_feature)
1480
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1481
 
        from bzrlib._walkdirs_win32 import Win32ReadDir
1482
 
        name0u = u'0dir-\u062c\u0648'
 
751
            self.build_tree(tree)
 
752
        except UnicodeError:
 
753
            raise TestSkipped('Could not represent Unicode chars'
 
754
                              ' in current encoding.')
1483
755
        name0 = name0u.encode('utf8')
1484
 
        self.build_tree([name0u + '/'])
 
756
        name1 = name1u.encode('utf8')
 
757
        name2 = name2u.encode('utf8')
1485
758
 
1486
 
        result = Win32ReadDir().read_dir('', u'.')
1487
 
        entry = result[0]
1488
 
        self.assertEqual((name0, name0, 'directory'), entry[:3])
1489
 
        self.assertEqual(u'./' + name0u, entry[4])
1490
 
        self.assertStatIsCorrect(entry[4], entry[3])
 
759
        # All of the abspaths should be in unicode, all of the relative paths
 
760
        # should be in utf8
 
761
        expected_dirblocks = [
 
762
                (('', '.'),
 
763
                 [(name0, name0, 'file', './' + name0u),
 
764
                  (name1, name1, 'directory', './' + name1u),
 
765
                  (name2, name2, 'file', './' + name2u),
 
766
                 ]
 
767
                ),
 
768
                ((name1, './' + name1u),
 
769
                 [(name1 + '/' + name0, name0, 'file', './' + name1u
 
770
                                                        + '/' + name0u),
 
771
                  (name1 + '/' + name1, name1, 'directory', './' + name1u
 
772
                                                            + '/' + name1u),
 
773
                 ]
 
774
                ),
 
775
                ((name1 + '/' + name1, './' + name1u + '/' + name1u),
 
776
                 [
 
777
                 ]
 
778
                ),
 
779
            ]
 
780
        result = list(osutils._walkdirs_unicode_to_utf8('.'))
 
781
        self._filter_out_stat(result)
 
782
        self.assertEqual(expected_dirblocks, result)
1491
783
 
1492
784
    def assertPathCompare(self, path_less, path_greater):
1493
785
        """check that path_less and path_greater compare correctly."""
1567
859
            sorted(original_paths, cmp=osutils.compare_paths_prefix_order))
1568
860
 
1569
861
 
1570
 
class TestCopyTree(tests.TestCaseInTempDir):
1571
 
 
 
862
class TestCopyTree(TestCaseInTempDir):
 
863
    
1572
864
    def test_copy_basic_tree(self):
1573
865
        self.build_tree(['source/', 'source/a', 'source/b/', 'source/b/c'])
1574
866
        osutils.copy_tree('source', 'target')
1583
875
        self.assertEqual(['c'], os.listdir('target/b'))
1584
876
 
1585
877
    def test_copy_tree_symlinks(self):
1586
 
        self.requireFeature(tests.SymlinkFeature)
 
878
        if not osutils.has_symlinks():
 
879
            return
1587
880
        self.build_tree(['source/'])
1588
881
        os.symlink('a/generic/path', 'source/lnk')
1589
882
        osutils.copy_tree('source', 'target')
1614
907
                          ('d', 'source/b', 'target/b'),
1615
908
                          ('f', 'source/b/c', 'target/b/c'),
1616
909
                         ], processed_files)
1617
 
        self.assertPathDoesNotExist('target')
 
910
        self.failIfExists('target')
1618
911
        if osutils.has_symlinks():
1619
912
            self.assertEqual([('source/lnk', 'target/lnk')], processed_links)
1620
913
 
1621
914
 
1622
 
class TestSetUnsetEnv(tests.TestCase):
 
915
#class TestTerminalEncoding has been moved to test_osutils_encodings.py
 
916
# [bialix] 2006/12/26
 
917
 
 
918
 
 
919
class TestSetUnsetEnv(TestCase):
1623
920
    """Test updating the environment"""
1624
921
 
1625
922
    def setUp(self):
1631
928
        def cleanup():
1632
929
            if 'BZR_TEST_ENV_VAR' in os.environ:
1633
930
                del os.environ['BZR_TEST_ENV_VAR']
 
931
 
1634
932
        self.addCleanup(cleanup)
1635
933
 
1636
934
    def test_set(self):
1648
946
 
1649
947
    def test_unicode(self):
1650
948
        """Environment can only contain plain strings
1651
 
 
 
949
        
1652
950
        So Unicode strings must be encoded.
1653
951
        """
1654
 
        uni_val, env_val = tests.probe_unicode_in_user_encoding()
1655
 
        if uni_val is None:
1656
 
            raise tests.TestSkipped(
1657
 
                'Cannot find a unicode character that works in encoding %s'
1658
 
                % (osutils.get_user_encoding(),))
 
952
        # Try a few different characters, to see if we can get
 
953
        # one that will be valid in the user_encoding
 
954
        possible_vals = [u'm\xb5', u'\xe1', u'\u0410']
 
955
        for uni_val in possible_vals:
 
956
            try:
 
957
                env_val = uni_val.encode(bzrlib.user_encoding)
 
958
            except UnicodeEncodeError:
 
959
                # Try a different character
 
960
                pass
 
961
            else:
 
962
                break
 
963
        else:
 
964
            raise TestSkipped('Cannot find a unicode character that works in'
 
965
                              ' encoding %s' % (bzrlib.user_encoding,))
1659
966
 
1660
967
        old = osutils.set_or_unset_env('BZR_TEST_ENV_VAR', uni_val)
1661
968
        self.assertEqual(env_val, os.environ.get('BZR_TEST_ENV_VAR'))
1666
973
        old = osutils.set_or_unset_env('BZR_TEST_ENV_VAR', None)
1667
974
        self.assertEqual('foo', old)
1668
975
        self.assertEqual(None, os.environ.get('BZR_TEST_ENV_VAR'))
1669
 
        self.assertFalse('BZR_TEST_ENV_VAR' in os.environ)
1670
 
 
1671
 
 
1672
 
class TestSizeShaFile(tests.TestCaseInTempDir):
1673
 
 
1674
 
    def test_sha_empty(self):
1675
 
        self.build_tree_contents([('foo', '')])
1676
 
        expected_sha = osutils.sha_string('')
1677
 
        f = open('foo')
1678
 
        self.addCleanup(f.close)
1679
 
        size, sha = osutils.size_sha_file(f)
1680
 
        self.assertEqual(0, size)
1681
 
        self.assertEqual(expected_sha, sha)
1682
 
 
1683
 
    def test_sha_mixed_endings(self):
1684
 
        text = 'test\r\nwith\nall\rpossible line endings\r\n'
1685
 
        self.build_tree_contents([('foo', text)])
1686
 
        expected_sha = osutils.sha_string(text)
1687
 
        f = open('foo', 'rb')
1688
 
        self.addCleanup(f.close)
1689
 
        size, sha = osutils.size_sha_file(f)
1690
 
        self.assertEqual(38, size)
1691
 
        self.assertEqual(expected_sha, sha)
1692
 
 
1693
 
 
1694
 
class TestShaFileByName(tests.TestCaseInTempDir):
1695
 
 
1696
 
    def test_sha_empty(self):
1697
 
        self.build_tree_contents([('foo', '')])
1698
 
        expected_sha = osutils.sha_string('')
1699
 
        self.assertEqual(expected_sha, osutils.sha_file_by_name('foo'))
1700
 
 
1701
 
    def test_sha_mixed_endings(self):
1702
 
        text = 'test\r\nwith\nall\rpossible line endings\r\n'
1703
 
        self.build_tree_contents([('foo', text)])
1704
 
        expected_sha = osutils.sha_string(text)
1705
 
        self.assertEqual(expected_sha, osutils.sha_file_by_name('foo'))
1706
 
 
1707
 
 
1708
 
class TestResourceLoading(tests.TestCaseInTempDir):
1709
 
 
1710
 
    def test_resource_string(self):
1711
 
        # test resource in bzrlib
1712
 
        text = osutils.resource_string('bzrlib', 'debug.py')
1713
 
        self.assertContainsRe(text, "debug_flags = set()")
1714
 
        # test resource under bzrlib
1715
 
        text = osutils.resource_string('bzrlib.ui', 'text.py')
1716
 
        self.assertContainsRe(text, "class TextUIFactory")
1717
 
        # test unsupported package
1718
 
        self.assertRaises(errors.BzrError, osutils.resource_string, 'zzzz',
1719
 
            'yyy.xx')
1720
 
        # test unknown resource
1721
 
        self.assertRaises(IOError, osutils.resource_string, 'bzrlib', 'yyy.xx')
1722
 
 
1723
 
 
1724
 
class TestReCompile(tests.TestCase):
1725
 
 
1726
 
    def _deprecated_re_compile_checked(self, *args, **kwargs):
1727
 
        return self.applyDeprecated(symbol_versioning.deprecated_in((2, 2, 0)),
1728
 
            osutils.re_compile_checked, *args, **kwargs)
1729
 
 
1730
 
    def test_re_compile_checked(self):
1731
 
        r = self._deprecated_re_compile_checked(r'A*', re.IGNORECASE)
1732
 
        self.assertTrue(r.match('aaaa'))
1733
 
        self.assertTrue(r.match('aAaA'))
1734
 
 
1735
 
    def test_re_compile_checked_error(self):
1736
 
        # like https://bugs.launchpad.net/bzr/+bug/251352
1737
 
 
1738
 
        # Due to possible test isolation error, re.compile is not lazy at
1739
 
        # this point. We re-install lazy compile.
1740
 
        lazy_regex.install_lazy_compile()
1741
 
        err = self.assertRaises(
1742
 
            errors.BzrCommandError,
1743
 
            self._deprecated_re_compile_checked, '*', re.IGNORECASE, 'test case')
1744
 
        self.assertEqual(
1745
 
            'Invalid regular expression in test case: '
1746
 
            '"*" nothing to repeat',
1747
 
            str(err))
1748
 
 
1749
 
 
1750
 
class TestDirReader(tests.TestCaseInTempDir):
1751
 
 
1752
 
    scenarios = dir_reader_scenarios()
1753
 
 
1754
 
    # Set by load_tests
1755
 
    _dir_reader_class = None
1756
 
    _native_to_unicode = None
1757
 
 
1758
 
    def setUp(self):
1759
 
        tests.TestCaseInTempDir.setUp(self)
1760
 
        self.overrideAttr(osutils,
1761
 
                          '_selected_dir_reader', self._dir_reader_class())
1762
 
 
1763
 
    def _get_ascii_tree(self):
1764
 
        tree = [
1765
 
            '0file',
1766
 
            '1dir/',
1767
 
            '1dir/0file',
1768
 
            '1dir/1dir/',
1769
 
            '2file'
1770
 
            ]
1771
 
        expected_dirblocks = [
1772
 
                (('', '.'),
1773
 
                 [('0file', '0file', 'file'),
1774
 
                  ('1dir', '1dir', 'directory'),
1775
 
                  ('2file', '2file', 'file'),
1776
 
                 ]
1777
 
                ),
1778
 
                (('1dir', './1dir'),
1779
 
                 [('1dir/0file', '0file', 'file'),
1780
 
                  ('1dir/1dir', '1dir', 'directory'),
1781
 
                 ]
1782
 
                ),
1783
 
                (('1dir/1dir', './1dir/1dir'),
1784
 
                 [
1785
 
                 ]
1786
 
                ),
1787
 
            ]
1788
 
        return tree, expected_dirblocks
1789
 
 
1790
 
    def test_walk_cur_dir(self):
1791
 
        tree, expected_dirblocks = self._get_ascii_tree()
1792
 
        self.build_tree(tree)
1793
 
        result = list(osutils._walkdirs_utf8('.'))
1794
 
        # Filter out stat and abspath
1795
 
        self.assertEqual(expected_dirblocks,
1796
 
                         [(dirinfo, [line[0:3] for line in block])
1797
 
                          for dirinfo, block in result])
1798
 
 
1799
 
    def test_walk_sub_dir(self):
1800
 
        tree, expected_dirblocks = self._get_ascii_tree()
1801
 
        self.build_tree(tree)
1802
 
        # you can search a subdir only, with a supplied prefix.
1803
 
        result = list(osutils._walkdirs_utf8('./1dir', '1dir'))
1804
 
        # Filter out stat and abspath
1805
 
        self.assertEqual(expected_dirblocks[1:],
1806
 
                         [(dirinfo, [line[0:3] for line in block])
1807
 
                          for dirinfo, block in result])
1808
 
 
1809
 
    def _get_unicode_tree(self):
1810
 
        name0u = u'0file-\xb6'
1811
 
        name1u = u'1dir-\u062c\u0648'
1812
 
        name2u = u'2file-\u0633'
1813
 
        tree = [
1814
 
            name0u,
1815
 
            name1u + '/',
1816
 
            name1u + '/' + name0u,
1817
 
            name1u + '/' + name1u + '/',
1818
 
            name2u,
1819
 
            ]
1820
 
        name0 = name0u.encode('UTF-8')
1821
 
        name1 = name1u.encode('UTF-8')
1822
 
        name2 = name2u.encode('UTF-8')
1823
 
        expected_dirblocks = [
1824
 
                (('', '.'),
1825
 
                 [(name0, name0, 'file', './' + name0u),
1826
 
                  (name1, name1, 'directory', './' + name1u),
1827
 
                  (name2, name2, 'file', './' + name2u),
1828
 
                 ]
1829
 
                ),
1830
 
                ((name1, './' + name1u),
1831
 
                 [(name1 + '/' + name0, name0, 'file', './' + name1u
1832
 
                                                        + '/' + name0u),
1833
 
                  (name1 + '/' + name1, name1, 'directory', './' + name1u
1834
 
                                                            + '/' + name1u),
1835
 
                 ]
1836
 
                ),
1837
 
                ((name1 + '/' + name1, './' + name1u + '/' + name1u),
1838
 
                 [
1839
 
                 ]
1840
 
                ),
1841
 
            ]
1842
 
        return tree, expected_dirblocks
1843
 
 
1844
 
    def _filter_out(self, raw_dirblocks):
1845
 
        """Filter out a walkdirs_utf8 result.
1846
 
 
1847
 
        stat field is removed, all native paths are converted to unicode
1848
 
        """
1849
 
        filtered_dirblocks = []
1850
 
        for dirinfo, block in raw_dirblocks:
1851
 
            dirinfo = (dirinfo[0], self._native_to_unicode(dirinfo[1]))
1852
 
            details = []
1853
 
            for line in block:
1854
 
                details.append(line[0:3] + (self._native_to_unicode(line[4]), ))
1855
 
            filtered_dirblocks.append((dirinfo, details))
1856
 
        return filtered_dirblocks
1857
 
 
1858
 
    def test_walk_unicode_tree(self):
1859
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1860
 
        tree, expected_dirblocks = self._get_unicode_tree()
1861
 
        self.build_tree(tree)
1862
 
        result = list(osutils._walkdirs_utf8('.'))
1863
 
        self.assertEqual(expected_dirblocks, self._filter_out(result))
1864
 
 
1865
 
    def test_symlink(self):
1866
 
        self.requireFeature(tests.SymlinkFeature)
1867
 
        self.requireFeature(tests.UnicodeFilenameFeature)
1868
 
        target = u'target\N{Euro Sign}'
1869
 
        link_name = u'l\N{Euro Sign}nk'
1870
 
        os.symlink(target, link_name)
1871
 
        target_utf8 = target.encode('UTF-8')
1872
 
        link_name_utf8 = link_name.encode('UTF-8')
1873
 
        expected_dirblocks = [
1874
 
                (('', '.'),
1875
 
                 [(link_name_utf8, link_name_utf8,
1876
 
                   'symlink', './' + link_name),],
1877
 
                 )]
1878
 
        result = list(osutils._walkdirs_utf8('.'))
1879
 
        self.assertEqual(expected_dirblocks, self._filter_out(result))
1880
 
 
1881
 
 
1882
 
class TestReadLink(tests.TestCaseInTempDir):
1883
 
    """Exposes os.readlink() problems and the osutils solution.
1884
 
 
1885
 
    The only guarantee offered by os.readlink(), starting with 2.6, is that a
1886
 
    unicode string will be returned if a unicode string is passed.
1887
 
 
1888
 
    But prior python versions failed to properly encode the passed unicode
1889
 
    string.
1890
 
    """
1891
 
    _test_needs_features = [tests.SymlinkFeature, tests.UnicodeFilenameFeature]
1892
 
 
1893
 
    def setUp(self):
1894
 
        super(tests.TestCaseInTempDir, self).setUp()
1895
 
        self.link = u'l\N{Euro Sign}ink'
1896
 
        self.target = u'targe\N{Euro Sign}t'
1897
 
        os.symlink(self.target, self.link)
1898
 
 
1899
 
    def test_os_readlink_link_encoding(self):
1900
 
        if sys.version_info < (2, 6):
1901
 
            self.assertRaises(UnicodeEncodeError, os.readlink, self.link)
1902
 
        else:
1903
 
            self.assertEquals(self.target,  os.readlink(self.link))
1904
 
 
1905
 
    def test_os_readlink_link_decoding(self):
1906
 
        self.assertEquals(self.target.encode(osutils._fs_enc),
1907
 
                          os.readlink(self.link.encode(osutils._fs_enc)))
1908
 
 
1909
 
 
1910
 
class TestConcurrency(tests.TestCase):
1911
 
 
1912
 
    def setUp(self):
1913
 
        super(TestConcurrency, self).setUp()
1914
 
        self.overrideAttr(osutils, '_cached_local_concurrency')
1915
 
 
1916
 
    def test_local_concurrency(self):
1917
 
        concurrency = osutils.local_concurrency()
1918
 
        self.assertIsInstance(concurrency, int)
1919
 
 
1920
 
    def test_local_concurrency_environment_variable(self):
1921
 
        self.overrideEnv('BZR_CONCURRENCY', '2')
1922
 
        self.assertEqual(2, osutils.local_concurrency(use_cache=False))
1923
 
        self.overrideEnv('BZR_CONCURRENCY', '3')
1924
 
        self.assertEqual(3, osutils.local_concurrency(use_cache=False))
1925
 
        self.overrideEnv('BZR_CONCURRENCY', 'foo')
1926
 
        self.assertEqual(1, osutils.local_concurrency(use_cache=False))
1927
 
 
1928
 
    def test_option_concurrency(self):
1929
 
        self.overrideEnv('BZR_CONCURRENCY', '1')
1930
 
        self.run_bzr('rocks --concurrency 42')
1931
 
        # Command line overrides environment variable
1932
 
        self.assertEquals('42', os.environ['BZR_CONCURRENCY'])
1933
 
        self.assertEquals(42, osutils.local_concurrency(use_cache=False))
1934
 
 
1935
 
 
1936
 
class TestFailedToLoadExtension(tests.TestCase):
1937
 
 
1938
 
    def _try_loading(self):
1939
 
        try:
1940
 
            import bzrlib._fictional_extension_py
1941
 
        except ImportError, e:
1942
 
            osutils.failed_to_load_extension(e)
1943
 
            return True
1944
 
 
1945
 
    def setUp(self):
1946
 
        super(TestFailedToLoadExtension, self).setUp()
1947
 
        self.overrideAttr(osutils, '_extension_load_failures', [])
1948
 
 
1949
 
    def test_failure_to_load(self):
1950
 
        self._try_loading()
1951
 
        self.assertLength(1, osutils._extension_load_failures)
1952
 
        self.assertEquals(osutils._extension_load_failures[0],
1953
 
            "No module named _fictional_extension_py")
1954
 
 
1955
 
    def test_report_extension_load_failures_no_warning(self):
1956
 
        self.assertTrue(self._try_loading())
1957
 
        warnings, result = self.callCatchWarnings(osutils.report_extension_load_failures)
1958
 
        # it used to give a Python warning; it no longer does
1959
 
        self.assertLength(0, warnings)
1960
 
 
1961
 
    def test_report_extension_load_failures_message(self):
1962
 
        log = StringIO()
1963
 
        trace.push_log_file(log)
1964
 
        self.assertTrue(self._try_loading())
1965
 
        osutils.report_extension_load_failures()
1966
 
        self.assertContainsRe(
1967
 
            log.getvalue(),
1968
 
            r"bzr: warning: some compiled extensions could not be loaded; "
1969
 
            "see <https://answers\.launchpad\.net/bzr/\+faq/703>\n"
1970
 
            )
1971
 
 
1972
 
 
1973
 
class TestTerminalWidth(tests.TestCase):
1974
 
 
1975
 
    def setUp(self):
1976
 
        tests.TestCase.setUp(self)
1977
 
        self._orig_terminal_size_state = osutils._terminal_size_state
1978
 
        self._orig_first_terminal_size = osutils._first_terminal_size
1979
 
        self.addCleanup(self.restore_osutils_globals)
1980
 
        osutils._terminal_size_state = 'no_data'
1981
 
        osutils._first_terminal_size = None
1982
 
 
1983
 
    def restore_osutils_globals(self):
1984
 
        osutils._terminal_size_state = self._orig_terminal_size_state
1985
 
        osutils._first_terminal_size = self._orig_first_terminal_size
1986
 
 
1987
 
    def replace_stdout(self, new):
1988
 
        self.overrideAttr(sys, 'stdout', new)
1989
 
 
1990
 
    def replace__terminal_size(self, new):
1991
 
        self.overrideAttr(osutils, '_terminal_size', new)
1992
 
 
1993
 
    def set_fake_tty(self):
1994
 
 
1995
 
        class I_am_a_tty(object):
1996
 
            def isatty(self):
1997
 
                return True
1998
 
 
1999
 
        self.replace_stdout(I_am_a_tty())
2000
 
 
2001
 
    def test_default_values(self):
2002
 
        self.assertEqual(80, osutils.default_terminal_width)
2003
 
 
2004
 
    def test_defaults_to_BZR_COLUMNS(self):
2005
 
        # BZR_COLUMNS is set by the test framework
2006
 
        self.assertNotEqual('12', os.environ['BZR_COLUMNS'])
2007
 
        self.overrideEnv('BZR_COLUMNS', '12')
2008
 
        self.assertEqual(12, osutils.terminal_width())
2009
 
 
2010
 
    def test_BZR_COLUMNS_0_no_limit(self):
2011
 
        self.overrideEnv('BZR_COLUMNS', '0')
2012
 
        self.assertEqual(None, osutils.terminal_width())
2013
 
 
2014
 
    def test_falls_back_to_COLUMNS(self):
2015
 
        self.overrideEnv('BZR_COLUMNS', None)
2016
 
        self.assertNotEqual('42', os.environ['COLUMNS'])
2017
 
        self.set_fake_tty()
2018
 
        self.overrideEnv('COLUMNS', '42')
2019
 
        self.assertEqual(42, osutils.terminal_width())
2020
 
 
2021
 
    def test_tty_default_without_columns(self):
2022
 
        self.overrideEnv('BZR_COLUMNS', None)
2023
 
        self.overrideEnv('COLUMNS', None)
2024
 
 
2025
 
        def terminal_size(w, h):
2026
 
            return 42, 42
2027
 
 
2028
 
        self.set_fake_tty()
2029
 
        # We need to override the osutils definition as it depends on the
2030
 
        # running environment that we can't control (PQM running without a
2031
 
        # controlling terminal is one example).
2032
 
        self.replace__terminal_size(terminal_size)
2033
 
        self.assertEqual(42, osutils.terminal_width())
2034
 
 
2035
 
    def test_non_tty_default_without_columns(self):
2036
 
        self.overrideEnv('BZR_COLUMNS', None)
2037
 
        self.overrideEnv('COLUMNS', None)
2038
 
        self.replace_stdout(None)
2039
 
        self.assertEqual(None, osutils.terminal_width())
2040
 
 
2041
 
    def test_no_TIOCGWINSZ(self):
2042
 
        self.requireFeature(term_ios_feature)
2043
 
        termios = term_ios_feature.module
2044
 
        # bug 63539 is about a termios without TIOCGWINSZ attribute
2045
 
        try:
2046
 
            orig = termios.TIOCGWINSZ
2047
 
        except AttributeError:
2048
 
            # We won't remove TIOCGWINSZ, because it doesn't exist anyway :)
2049
 
            pass
2050
 
        else:
2051
 
            self.overrideAttr(termios, 'TIOCGWINSZ')
2052
 
            del termios.TIOCGWINSZ
2053
 
        self.overrideEnv('BZR_COLUMNS', None)
2054
 
        self.overrideEnv('COLUMNS', None)
2055
 
        # Whatever the result is, if we don't raise an exception, it's ok.
2056
 
        osutils.terminal_width()
2057
 
 
2058
 
class TestCreationOps(tests.TestCaseInTempDir):
2059
 
    _test_needs_features = [features.chown_feature]
2060
 
 
2061
 
    def setUp(self):
2062
 
        tests.TestCaseInTempDir.setUp(self)
2063
 
        self.overrideAttr(os, 'chown', self._dummy_chown)
2064
 
 
2065
 
        # params set by call to _dummy_chown
2066
 
        self.path = self.uid = self.gid = None
2067
 
 
2068
 
    def _dummy_chown(self, path, uid, gid):
2069
 
        self.path, self.uid, self.gid = path, uid, gid
2070
 
 
2071
 
    def test_copy_ownership_from_path(self):
2072
 
        """copy_ownership_from_path test with specified src."""
2073
 
        ownsrc = '/'
2074
 
        f = open('test_file', 'wt')
2075
 
        osutils.copy_ownership_from_path('test_file', ownsrc)
2076
 
 
2077
 
        s = os.stat(ownsrc)
2078
 
        self.assertEquals(self.path, 'test_file')
2079
 
        self.assertEquals(self.uid, s.st_uid)
2080
 
        self.assertEquals(self.gid, s.st_gid)
2081
 
 
2082
 
    def test_copy_ownership_nonesrc(self):
2083
 
        """copy_ownership_from_path test with src=None."""
2084
 
        f = open('test_file', 'wt')
2085
 
        # should use parent dir for permissions
2086
 
        osutils.copy_ownership_from_path('test_file')
2087
 
 
2088
 
        s = os.stat('..')
2089
 
        self.assertEquals(self.path, 'test_file')
2090
 
        self.assertEquals(self.uid, s.st_uid)
2091
 
        self.assertEquals(self.gid, s.st_gid)
2092
 
 
2093
 
class TestGetuserUnicode(tests.TestCase):
2094
 
 
2095
 
    def test_ascii_user(self):
2096
 
        self.overrideEnv('LOGNAME', 'jrandom')
2097
 
        self.assertEqual(u'jrandom', osutils.getuser_unicode())
2098
 
 
2099
 
    def test_unicode_user(self):
2100
 
        ue = osutils.get_user_encoding()
2101
 
        uni_val, env_val = tests.probe_unicode_in_user_encoding()
2102
 
        if uni_val is None:
2103
 
            raise tests.TestSkipped(
2104
 
                'Cannot find a unicode character that works in encoding %s'
2105
 
                % (osutils.get_user_encoding(),))
2106
 
        uni_username = u'jrandom' + uni_val
2107
 
        encoded_username = uni_username.encode(ue)
2108
 
        self.overrideEnv('LOGNAME', encoded_username)
2109
 
        self.assertEqual(uni_username, osutils.getuser_unicode())
2110
 
        self.overrideEnv('LOGNAME', u'jrandom\xb6'.encode(ue))
2111
 
        self.assertEqual(u'jrandom\xb6', osutils.getuser_unicode())
2112
 
 
2113
 
class TestBackupNames(tests.TestCase):
2114
 
 
2115
 
    def setUp(self):
2116
 
        super(TestBackupNames, self).setUp()
2117
 
        self.backups = []
2118
 
 
2119
 
    def backup_exists(self, name):
2120
 
        return name in self.backups
2121
 
 
2122
 
    def available_backup_name(self, name):
2123
 
        backup_name = osutils.available_backup_name(name, self.backup_exists)
2124
 
        self.backups.append(backup_name)
2125
 
        return backup_name
2126
 
 
2127
 
    def assertBackupName(self, expected, name):
2128
 
        self.assertEqual(expected, self.available_backup_name(name))
2129
 
 
2130
 
    def test_empty(self):
2131
 
        self.assertBackupName('file.~1~', 'file')
2132
 
 
2133
 
    def test_existing(self):
2134
 
        self.available_backup_name('file')
2135
 
        self.available_backup_name('file')
2136
 
        self.assertBackupName('file.~3~', 'file')
2137
 
        # Empty slots are found, this is not a strict requirement and may be
2138
 
        # revisited if we test against all implementations.
2139
 
        self.backups.remove('file.~2~')
2140
 
        self.assertBackupName('file.~2~', 'file')
2141
 
 
2142
 
 
2143
 
class TestFindExecutableInPath(tests.TestCase):
2144
 
 
2145
 
    def test_windows(self):
2146
 
        if sys.platform != 'win32':
2147
 
            raise tests.TestSkipped('test requires win32')
2148
 
        self.assertTrue(osutils.find_executable_on_path('explorer') is not None)
2149
 
        self.assertTrue(
2150
 
            osutils.find_executable_on_path('explorer.exe') is not None)
2151
 
        self.assertTrue(
2152
 
            osutils.find_executable_on_path('EXPLORER.EXE') is not None)
2153
 
        self.assertTrue(
2154
 
            osutils.find_executable_on_path('THIS SHOULD NOT EXIST') is None)
2155
 
        self.assertTrue(osutils.find_executable_on_path('file.txt') is None)
2156
 
 
2157
 
    def test_other(self):
2158
 
        if sys.platform == 'win32':
2159
 
            raise tests.TestSkipped('test requires non-win32')
2160
 
        self.assertTrue(osutils.find_executable_on_path('sh') is not None)
2161
 
        self.assertTrue(
2162
 
            osutils.find_executable_on_path('THIS SHOULD NOT EXIST') is None)
 
976
        self.failIf('BZR_TEST_ENV_VAR' in os.environ)
 
977
 
 
978
 
 
979
class TestLocalTimeOffset(TestCase):
 
980
 
 
981
    def test_local_time_offset(self):
 
982
        """Test that local_time_offset() returns a sane value."""
 
983
        offset = osutils.local_time_offset()
 
984
        self.assertTrue(isinstance(offset, int))
 
985
        # Test that the offset is no more than a eighteen hours in
 
986
        # either direction.
 
987
        # Time zone handling is system specific, so it is difficult to
 
988
        # do more specific tests, but a value outside of this range is
 
989
        # probably wrong.
 
990
        eighteen_hours = 18 * 3600
 
991
        self.assertTrue(-eighteen_hours < offset < eighteen_hours)
 
992
 
 
993
    def test_local_time_offset_with_timestamp(self):
 
994
        """Test that local_time_offset() works with a timestamp."""
 
995
        offset = osutils.local_time_offset(1000000000.1234567)
 
996
        self.assertTrue(isinstance(offset, int))
 
997
        eighteen_hours = 18 * 3600
 
998
        self.assertTrue(-eighteen_hours < offset < eighteen_hours)