/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/commands.py

  • Committer: Aaron Bentley
  • Date: 2006-09-20 14:03:05 UTC
  • mto: This revision was merged to the branch mainline in revision 2162.
  • Revision ID: abentley@panoramicfeedback.com-20060920140305-7726fe3eb92690b1
Get tree._iter_changed down to ~ 1 stat per file

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2006 by Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
 
 
18
# TODO: probably should say which arguments are candidates for glob
 
19
# expansion on windows and do that at the command level.
 
20
 
 
21
# TODO: Define arguments by objects, rather than just using names.
 
22
# Those objects can specify the expected type of the argument, which
 
23
# would help with validation and shell completion.  They could also provide
 
24
# help/explanation for that argument in a structured way.
 
25
 
 
26
# TODO: Specific "examples" property on commands for consistent formatting.
 
27
 
 
28
# TODO: "--profile=cum", to change sort order.  Is there any value in leaving
 
29
# the profile output behind so it can be interactively examined?
 
30
 
 
31
import codecs
 
32
import errno
 
33
import os
 
34
from warnings import warn
 
35
import sys
 
36
 
 
37
import bzrlib
 
38
import bzrlib.errors as errors
 
39
from bzrlib.errors import (BzrError,
 
40
                           BzrCommandError,
 
41
                           BzrCheckError,
 
42
                           NotBranchError)
 
43
from bzrlib import option
 
44
from bzrlib.option import Option
 
45
import bzrlib.osutils
 
46
from bzrlib.symbol_versioning import (deprecated_method, zero_eight)
 
47
import bzrlib.trace
 
48
from bzrlib.trace import mutter, note, log_error, warning, be_quiet
 
49
 
 
50
plugin_cmds = {}
 
51
 
 
52
 
 
53
def register_command(cmd, decorate=False):
 
54
    """Utility function to help register a command
 
55
 
 
56
    :param cmd: Command subclass to register
 
57
    :param decorate: If true, allow overriding an existing command
 
58
        of the same name; the old command is returned by this function.
 
59
        Otherwise it is an error to try to override an existing command.
 
60
    """
 
61
    global plugin_cmds
 
62
    k = cmd.__name__
 
63
    if k.startswith("cmd_"):
 
64
        k_unsquished = _unsquish_command_name(k)
 
65
    else:
 
66
        k_unsquished = k
 
67
    if k_unsquished not in plugin_cmds:
 
68
        plugin_cmds[k_unsquished] = cmd
 
69
        mutter('registered plugin command %s', k_unsquished)
 
70
        if decorate and k_unsquished in builtin_command_names():
 
71
            return _builtin_commands()[k_unsquished]
 
72
    elif decorate:
 
73
        result = plugin_cmds[k_unsquished]
 
74
        plugin_cmds[k_unsquished] = cmd
 
75
        return result
 
76
    else:
 
77
        log_error('Two plugins defined the same command: %r' % k)
 
78
        log_error('Not loading the one in %r' % sys.modules[cmd.__module__])
 
79
 
 
80
 
 
81
def _squish_command_name(cmd):
 
82
    return 'cmd_' + cmd.replace('-', '_')
 
83
 
 
84
 
 
85
def _unsquish_command_name(cmd):
 
86
    assert cmd.startswith("cmd_")
 
87
    return cmd[4:].replace('_','-')
 
88
 
 
89
 
 
90
def _builtin_commands():
 
91
    import bzrlib.builtins
 
92
    r = {}
 
93
    builtins = bzrlib.builtins.__dict__
 
94
    for name in builtins:
 
95
        if name.startswith("cmd_"):
 
96
            real_name = _unsquish_command_name(name)
 
97
            r[real_name] = builtins[name]
 
98
    return r
 
99
            
 
100
 
 
101
def builtin_command_names():
 
102
    """Return list of builtin command names."""
 
103
    return _builtin_commands().keys()
 
104
    
 
105
 
 
106
def plugin_command_names():
 
107
    return plugin_cmds.keys()
 
108
 
 
109
 
 
110
def _get_cmd_dict(plugins_override=True):
 
111
    """Return name->class mapping for all commands."""
 
112
    d = _builtin_commands()
 
113
    if plugins_override:
 
114
        d.update(plugin_cmds)
 
115
    return d
 
116
 
 
117
    
 
118
def get_all_cmds(plugins_override=True):
 
119
    """Return canonical name and class for all registered commands."""
 
120
    for k, v in _get_cmd_dict(plugins_override=plugins_override).iteritems():
 
121
        yield k,v
 
122
 
 
123
 
 
124
def get_cmd_object(cmd_name, plugins_override=True):
 
125
    """Return the canonical name and command class for a command.
 
126
 
 
127
    plugins_override
 
128
        If true, plugin commands can override builtins.
 
129
    """
 
130
    from bzrlib.externalcommand import ExternalCommand
 
131
 
 
132
    # We want only 'ascii' command names, but the user may have typed
 
133
    # in a Unicode name. In that case, they should just get a
 
134
    # 'command not found' error later.
 
135
    # In the future, we may actually support Unicode command names.
 
136
 
 
137
    # first look up this command under the specified name
 
138
    cmds = _get_cmd_dict(plugins_override=plugins_override)
 
139
    try:
 
140
        return cmds[cmd_name]()
 
141
    except KeyError:
 
142
        pass
 
143
 
 
144
    # look for any command which claims this as an alias
 
145
    for real_cmd_name, cmd_class in cmds.iteritems():
 
146
        if cmd_name in cmd_class.aliases:
 
147
            return cmd_class()
 
148
 
 
149
    cmd_obj = ExternalCommand.find_command(cmd_name)
 
150
    if cmd_obj:
 
151
        return cmd_obj
 
152
 
 
153
    raise BzrCommandError('unknown command "%s"' % cmd_name)
 
154
 
 
155
 
 
156
class Command(object):
 
157
    """Base class for commands.
 
158
 
 
159
    Commands are the heart of the command-line bzr interface.
 
160
 
 
161
    The command object mostly handles the mapping of command-line
 
162
    parameters into one or more bzrlib operations, and of the results
 
163
    into textual output.
 
164
 
 
165
    Commands normally don't have any state.  All their arguments are
 
166
    passed in to the run method.  (Subclasses may take a different
 
167
    policy if the behaviour of the instance needs to depend on e.g. a
 
168
    shell plugin and not just its Python class.)
 
169
 
 
170
    The docstring for an actual command should give a single-line
 
171
    summary, then a complete description of the command.  A grammar
 
172
    description will be inserted.
 
173
 
 
174
    aliases
 
175
        Other accepted names for this command.
 
176
 
 
177
    takes_args
 
178
        List of argument forms, marked with whether they are optional,
 
179
        repeated, etc.
 
180
 
 
181
                Examples:
 
182
 
 
183
                ['to_location', 'from_branch?', 'file*']
 
184
 
 
185
                'to_location' is required
 
186
                'from_branch' is optional
 
187
                'file' can be specified 0 or more times
 
188
 
 
189
    takes_options
 
190
        List of options that may be given for this command.  These can
 
191
        be either strings, referring to globally-defined options,
 
192
        or option objects.  Retrieve through options().
 
193
 
 
194
    hidden
 
195
        If true, this command isn't advertised.  This is typically
 
196
        for commands intended for expert users.
 
197
 
 
198
    encoding_type
 
199
        Command objects will get a 'outf' attribute, which has been
 
200
        setup to properly handle encoding of unicode strings.
 
201
        encoding_type determines what will happen when characters cannot
 
202
        be encoded
 
203
            strict - abort if we cannot decode
 
204
            replace - put in a bogus character (typically '?')
 
205
            exact - do not encode sys.stdout
 
206
 
 
207
    """
 
208
    aliases = []
 
209
    takes_args = []
 
210
    takes_options = []
 
211
    encoding_type = 'strict'
 
212
 
 
213
    hidden = False
 
214
    
 
215
    def __init__(self):
 
216
        """Construct an instance of this command."""
 
217
        if self.__doc__ == Command.__doc__:
 
218
            warn("No help message set for %r" % self)
 
219
 
 
220
    def options(self):
 
221
        """Return dict of valid options for this command.
 
222
 
 
223
        Maps from long option name to option object."""
 
224
        r = dict()
 
225
        r['help'] = Option.OPTIONS['help']
 
226
        for o in self.takes_options:
 
227
            if isinstance(o, basestring):
 
228
                o = Option.OPTIONS[o]
 
229
            r[o.name] = o
 
230
        return r
 
231
 
 
232
    def _setup_outf(self):
 
233
        """Return a file linked to stdout, which has proper encoding."""
 
234
        assert self.encoding_type in ['strict', 'exact', 'replace']
 
235
 
 
236
        # Originally I was using self.stdout, but that looks
 
237
        # *way* too much like sys.stdout
 
238
        if self.encoding_type == 'exact':
 
239
            self.outf = sys.stdout
 
240
            return
 
241
 
 
242
        output_encoding = bzrlib.osutils.get_terminal_encoding()
 
243
 
 
244
        # use 'replace' so that we don't abort if trying to write out
 
245
        # in e.g. the default C locale.
 
246
        self.outf = codecs.getwriter(output_encoding)(sys.stdout, errors=self.encoding_type)
 
247
        # For whatever reason codecs.getwriter() does not advertise its encoding
 
248
        # it just returns the encoding of the wrapped file, which is completely
 
249
        # bogus. So set the attribute, so we can find the correct encoding later.
 
250
        self.outf.encoding = output_encoding
 
251
 
 
252
    @deprecated_method(zero_eight)
 
253
    def run_argv(self, argv):
 
254
        """Parse command line and run.
 
255
        
 
256
        See run_argv_aliases for the 0.8 and beyond api.
 
257
        """
 
258
        return self.run_argv_aliases(argv)
 
259
 
 
260
    def run_argv_aliases(self, argv, alias_argv=None):
 
261
        """Parse the command line and run with extra aliases in alias_argv."""
 
262
        if argv is None:
 
263
            warn("Passing None for [] is deprecated from bzrlib 0.10", 
 
264
                 DeprecationWarning, stacklevel=2)
 
265
            argv = []
 
266
        args, opts = parse_args(self, argv, alias_argv)
 
267
        if 'help' in opts:  # e.g. bzr add --help
 
268
            from bzrlib.help import help_on_command
 
269
            help_on_command(self.name())
 
270
            return 0
 
271
        # mix arguments and options into one dictionary
 
272
        cmdargs = _match_argform(self.name(), self.takes_args, args)
 
273
        cmdopts = {}
 
274
        for k, v in opts.items():
 
275
            cmdopts[k.replace('-', '_')] = v
 
276
 
 
277
        all_cmd_args = cmdargs.copy()
 
278
        all_cmd_args.update(cmdopts)
 
279
 
 
280
        self._setup_outf()
 
281
 
 
282
        return self.run(**all_cmd_args)
 
283
    
 
284
    def run(self):
 
285
        """Actually run the command.
 
286
 
 
287
        This is invoked with the options and arguments bound to
 
288
        keyword parameters.
 
289
 
 
290
        Return 0 or None if the command was successful, or a non-zero
 
291
        shell error code if not.  It's OK for this method to allow
 
292
        an exception to raise up.
 
293
        """
 
294
        raise NotImplementedError('no implementation of command %r' 
 
295
                                  % self.name())
 
296
 
 
297
    def help(self):
 
298
        """Return help message for this class."""
 
299
        from inspect import getdoc
 
300
        if self.__doc__ is Command.__doc__:
 
301
            return None
 
302
        return getdoc(self)
 
303
 
 
304
    def name(self):
 
305
        return _unsquish_command_name(self.__class__.__name__)
 
306
 
 
307
    def plugin_name(self):
 
308
        """Get the name of the plugin that provides this command.
 
309
 
 
310
        :return: The name of the plugin or None if the command is builtin.
 
311
        """
 
312
        mod_parts = self.__module__.split('.')
 
313
        if len(mod_parts) >= 3 and mod_parts[1] == 'plugins':
 
314
            return mod_parts[2]
 
315
        else:
 
316
            return None
 
317
 
 
318
 
 
319
def parse_spec(spec):
 
320
    """
 
321
    >>> parse_spec(None)
 
322
    [None, None]
 
323
    >>> parse_spec("./")
 
324
    ['./', None]
 
325
    >>> parse_spec("../@")
 
326
    ['..', -1]
 
327
    >>> parse_spec("../f/@35")
 
328
    ['../f', 35]
 
329
    >>> parse_spec('./@revid:john@arbash-meinel.com-20050711044610-3ca0327c6a222f67')
 
330
    ['.', 'revid:john@arbash-meinel.com-20050711044610-3ca0327c6a222f67']
 
331
    """
 
332
    if spec is None:
 
333
        return [None, None]
 
334
    if '/@' in spec:
 
335
        parsed = spec.split('/@')
 
336
        assert len(parsed) == 2
 
337
        if parsed[1] == "":
 
338
            parsed[1] = -1
 
339
        else:
 
340
            try:
 
341
                parsed[1] = int(parsed[1])
 
342
            except ValueError:
 
343
                pass # We can allow stuff like ./@revid:blahblahblah
 
344
            else:
 
345
                assert parsed[1] >=0
 
346
    else:
 
347
        parsed = [spec, None]
 
348
    return parsed
 
349
 
 
350
def parse_args(command, argv, alias_argv=None):
 
351
    """Parse command line.
 
352
    
 
353
    Arguments and options are parsed at this level before being passed
 
354
    down to specific command handlers.  This routine knows, from a
 
355
    lookup table, something about the available options, what optargs
 
356
    they take, and which commands will accept them.
 
357
    """
 
358
    # TODO: make it a method of the Command?
 
359
    parser = option.get_optparser(command.options())
 
360
    if alias_argv is not None:
 
361
        args = alias_argv + argv
 
362
    else:
 
363
        args = argv
 
364
 
 
365
    options, args = parser.parse_args(args)
 
366
    opts = dict([(k, v) for k, v in options.__dict__.iteritems() if 
 
367
                 v is not option.OptionParser.DEFAULT_VALUE])
 
368
    return args, opts
 
369
 
 
370
 
 
371
def _match_argform(cmd, takes_args, args):
 
372
    argdict = {}
 
373
 
 
374
    # step through args and takes_args, allowing appropriate 0-many matches
 
375
    for ap in takes_args:
 
376
        argname = ap[:-1]
 
377
        if ap[-1] == '?':
 
378
            if args:
 
379
                argdict[argname] = args.pop(0)
 
380
        elif ap[-1] == '*': # all remaining arguments
 
381
            if args:
 
382
                argdict[argname + '_list'] = args[:]
 
383
                args = []
 
384
            else:
 
385
                argdict[argname + '_list'] = None
 
386
        elif ap[-1] == '+':
 
387
            if not args:
 
388
                raise BzrCommandError("command %r needs one or more %s"
 
389
                        % (cmd, argname.upper()))
 
390
            else:
 
391
                argdict[argname + '_list'] = args[:]
 
392
                args = []
 
393
        elif ap[-1] == '$': # all but one
 
394
            if len(args) < 2:
 
395
                raise BzrCommandError("command %r needs one or more %s"
 
396
                        % (cmd, argname.upper()))
 
397
            argdict[argname + '_list'] = args[:-1]
 
398
            args[:-1] = []
 
399
        else:
 
400
            # just a plain arg
 
401
            argname = ap
 
402
            if not args:
 
403
                raise BzrCommandError("command %r requires argument %s"
 
404
                        % (cmd, argname.upper()))
 
405
            else:
 
406
                argdict[argname] = args.pop(0)
 
407
            
 
408
    if args:
 
409
        raise BzrCommandError("extra argument to command %s: %s"
 
410
                              % (cmd, args[0]))
 
411
 
 
412
    return argdict
 
413
 
 
414
 
 
415
 
 
416
def apply_profiled(the_callable, *args, **kwargs):
 
417
    import hotshot
 
418
    import tempfile
 
419
    import hotshot.stats
 
420
    pffileno, pfname = tempfile.mkstemp()
 
421
    try:
 
422
        prof = hotshot.Profile(pfname)
 
423
        try:
 
424
            ret = prof.runcall(the_callable, *args, **kwargs) or 0
 
425
        finally:
 
426
            prof.close()
 
427
        stats = hotshot.stats.load(pfname)
 
428
        stats.strip_dirs()
 
429
        stats.sort_stats('cum')   # 'time'
 
430
        ## XXX: Might like to write to stderr or the trace file instead but
 
431
        ## print_stats seems hardcoded to stdout
 
432
        stats.print_stats(20)
 
433
        return ret
 
434
    finally:
 
435
        os.close(pffileno)
 
436
        os.remove(pfname)
 
437
 
 
438
 
 
439
def apply_lsprofiled(filename, the_callable, *args, **kwargs):
 
440
    from bzrlib.lsprof import profile
 
441
    import cPickle
 
442
    ret, stats = profile(the_callable, *args, **kwargs)
 
443
    stats.sort()
 
444
    if filename is None:
 
445
        stats.pprint()
 
446
    else:
 
447
        stats.freeze()
 
448
        cPickle.dump(stats, open(filename, 'w'), 2)
 
449
        print 'Profile data written to %r.' % filename
 
450
    return ret
 
451
 
 
452
 
 
453
def get_alias(cmd):
 
454
    """Return an expanded alias, or None if no alias exists"""
 
455
    import bzrlib.config
 
456
    alias = bzrlib.config.GlobalConfig().get_alias(cmd)
 
457
    if (alias):
 
458
        return alias.split(' ')
 
459
    return None
 
460
 
 
461
 
 
462
def run_bzr(argv):
 
463
    """Execute a command.
 
464
 
 
465
    This is similar to main(), but without all the trappings for
 
466
    logging and error handling.  
 
467
    
 
468
    argv
 
469
       The command-line arguments, without the program name from argv[0]
 
470
       These should already be decoded. All library/test code calling
 
471
       run_bzr should be passing valid strings (don't need decoding).
 
472
    
 
473
    Returns a command status or raises an exception.
 
474
 
 
475
    Special master options: these must come before the command because
 
476
    they control how the command is interpreted.
 
477
 
 
478
    --no-plugins
 
479
        Do not load plugin modules at all
 
480
 
 
481
    --no-aliases
 
482
        Do not allow aliases
 
483
 
 
484
    --builtin
 
485
        Only use builtin commands.  (Plugins are still allowed to change
 
486
        other behaviour.)
 
487
 
 
488
    --profile
 
489
        Run under the Python hotshot profiler.
 
490
 
 
491
    --lsprof
 
492
        Run under the Python lsprof profiler.
 
493
    """
 
494
    argv = list(argv)
 
495
 
 
496
    opt_lsprof = opt_profile = opt_no_plugins = opt_builtin =  \
 
497
                opt_no_aliases = False
 
498
    opt_lsprof_file = None
 
499
 
 
500
    # --no-plugins is handled specially at a very early stage. We need
 
501
    # to load plugins before doing other command parsing so that they
 
502
    # can override commands, but this needs to happen first.
 
503
 
 
504
    argv_copy = []
 
505
    i = 0
 
506
    while i < len(argv):
 
507
        a = argv[i]
 
508
        if a == '--profile':
 
509
            opt_profile = True
 
510
        elif a == '--lsprof':
 
511
            opt_lsprof = True
 
512
        elif a == '--lsprof-file':
 
513
            opt_lsprof = True
 
514
            opt_lsprof_file = argv[i + 1]
 
515
            i += 1
 
516
        elif a == '--no-plugins':
 
517
            opt_no_plugins = True
 
518
        elif a == '--no-aliases':
 
519
            opt_no_aliases = True
 
520
        elif a == '--builtin':
 
521
            opt_builtin = True
 
522
        elif a in ('--quiet', '-q'):
 
523
            be_quiet()
 
524
        else:
 
525
            argv_copy.append(a)
 
526
        i += 1
 
527
 
 
528
    argv = argv_copy
 
529
    if (not argv):
 
530
        from bzrlib.builtins import cmd_help
 
531
        cmd_help().run_argv_aliases([])
 
532
        return 0
 
533
 
 
534
    if argv[0] == '--version':
 
535
        from bzrlib.version import show_version
 
536
        show_version()
 
537
        return 0
 
538
        
 
539
    if not opt_no_plugins:
 
540
        from bzrlib.plugin import load_plugins
 
541
        load_plugins()
 
542
    else:
 
543
        from bzrlib.plugin import disable_plugins
 
544
        disable_plugins()
 
545
 
 
546
    alias_argv = None
 
547
 
 
548
    if not opt_no_aliases:
 
549
        alias_argv = get_alias(argv[0])
 
550
        if alias_argv:
 
551
            alias_argv = [a.decode(bzrlib.user_encoding) for a in alias_argv]
 
552
            argv[0] = alias_argv.pop(0)
 
553
 
 
554
    cmd = argv.pop(0)
 
555
    # We want only 'ascii' command names, but the user may have typed
 
556
    # in a Unicode name. In that case, they should just get a
 
557
    # 'command not found' error later.
 
558
 
 
559
    cmd_obj = get_cmd_object(cmd, plugins_override=not opt_builtin)
 
560
    if not getattr(cmd_obj.run_argv, 'is_deprecated', False):
 
561
        run = cmd_obj.run_argv
 
562
        run_argv = [argv]
 
563
    else:
 
564
        run = cmd_obj.run_argv_aliases
 
565
        run_argv = [argv, alias_argv]
 
566
 
 
567
    try:
 
568
        if opt_lsprof:
 
569
            ret = apply_lsprofiled(opt_lsprof_file, run, *run_argv)
 
570
        elif opt_profile:
 
571
            ret = apply_profiled(run, *run_argv)
 
572
        else:
 
573
            ret = run(*run_argv)
 
574
        return ret or 0
 
575
    finally:
 
576
        # reset, in case we may do other commands later within the same process
 
577
        be_quiet(False)
 
578
 
 
579
def display_command(func):
 
580
    """Decorator that suppresses pipe/interrupt errors."""
 
581
    def ignore_pipe(*args, **kwargs):
 
582
        try:
 
583
            result = func(*args, **kwargs)
 
584
            sys.stdout.flush()
 
585
            return result
 
586
        except IOError, e:
 
587
            if getattr(e, 'errno', None) is None:
 
588
                raise
 
589
            if e.errno != errno.EPIPE:
 
590
                # Win32 raises IOError with errno=0 on a broken pipe
 
591
                if sys.platform != 'win32' or e.errno != 0:
 
592
                    raise
 
593
            pass
 
594
        except KeyboardInterrupt:
 
595
            pass
 
596
    return ignore_pipe
 
597
 
 
598
 
 
599
def main(argv):
 
600
    import bzrlib.ui
 
601
    from bzrlib.ui.text import TextUIFactory
 
602
    bzrlib.ui.ui_factory = TextUIFactory()
 
603
    argv = [a.decode(bzrlib.user_encoding) for a in argv[1:]]
 
604
    ret = run_bzr_catch_errors(argv)
 
605
    mutter("return code %d", ret)
 
606
    return ret
 
607
 
 
608
 
 
609
def run_bzr_catch_errors(argv):
 
610
    try:
 
611
        return run_bzr(argv)
 
612
        # do this here inside the exception wrappers to catch EPIPE
 
613
        sys.stdout.flush()
 
614
    except Exception, e:
 
615
        # used to handle AssertionError and KeyboardInterrupt
 
616
        # specially here, but hopefully they're handled ok by the logger now
 
617
        bzrlib.trace.report_exception(sys.exc_info(), sys.stderr)
 
618
        if os.environ.get('BZR_PDB'):
 
619
            print '**** entering debugger'
 
620
            import pdb
 
621
            pdb.post_mortem(sys.exc_traceback)
 
622
        return 3
 
623
 
 
624
if __name__ == '__main__':
 
625
    sys.exit(main(sys.argv))