/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/commands.py

  • Committer: Andrew Bennetts
  • Date: 2010-01-11 12:37:53 UTC
  • mto: This revision was merged to the branch mainline in revision 4948.
  • Revision ID: andrew.bennetts@canonical.com-20100111123753-w88kec1ny3sngod4
Fix bzrlib.test.commands.*; they need to use 'run_direct' not 'run' so that the OperationWithCleanups is used.

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2006, 2008, 2009 Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
16
 
 
17
 
 
18
# TODO: probably should say which arguments are candidates for glob
 
19
# expansion on windows and do that at the command level.
 
20
 
 
21
# TODO: Define arguments by objects, rather than just using names.
 
22
# Those objects can specify the expected type of the argument, which
 
23
# would help with validation and shell completion.  They could also provide
 
24
# help/explanation for that argument in a structured way.
 
25
 
 
26
# TODO: Specific "examples" property on commands for consistent formatting.
 
27
 
 
28
# TODO: "--profile=cum", to change sort order.  Is there any value in leaving
 
29
# the profile output behind so it can be interactively examined?
 
30
 
 
31
import os
 
32
import sys
 
33
 
 
34
from bzrlib.lazy_import import lazy_import
 
35
lazy_import(globals(), """
 
36
import codecs
 
37
import errno
 
38
import threading
 
39
from warnings import warn
 
40
 
 
41
import bzrlib
 
42
from bzrlib import (
 
43
    cleanup,
 
44
    debug,
 
45
    errors,
 
46
    option,
 
47
    osutils,
 
48
    trace,
 
49
    ui,
 
50
    win32utils,
 
51
    )
 
52
""")
 
53
 
 
54
from bzrlib.hooks import HookPoint, Hooks
 
55
# Compatibility - Option used to be in commands.
 
56
from bzrlib.option import Option
 
57
from bzrlib import registry
 
58
from bzrlib.symbol_versioning import (
 
59
    deprecated_function,
 
60
    deprecated_in,
 
61
    deprecated_method,
 
62
    suppress_deprecation_warnings,
 
63
    )
 
64
 
 
65
 
 
66
class CommandInfo(object):
 
67
    """Information about a command."""
 
68
 
 
69
    def __init__(self, aliases):
 
70
        """The list of aliases for the command."""
 
71
        self.aliases = aliases
 
72
 
 
73
    @classmethod
 
74
    def from_command(klass, command):
 
75
        """Factory to construct a CommandInfo from a command."""
 
76
        return klass(command.aliases)
 
77
 
 
78
 
 
79
class CommandRegistry(registry.Registry):
 
80
 
 
81
    @staticmethod
 
82
    def _get_name(command_name):
 
83
        if command_name.startswith("cmd_"):
 
84
            return _unsquish_command_name(command_name)
 
85
        else:
 
86
            return command_name
 
87
 
 
88
    def register(self, cmd, decorate=False):
 
89
        """Utility function to help register a command
 
90
 
 
91
        :param cmd: Command subclass to register
 
92
        :param decorate: If true, allow overriding an existing command
 
93
            of the same name; the old command is returned by this function.
 
94
            Otherwise it is an error to try to override an existing command.
 
95
        """
 
96
        k = cmd.__name__
 
97
        k_unsquished = self._get_name(k)
 
98
        try:
 
99
            previous = self.get(k_unsquished)
 
100
        except KeyError:
 
101
            previous = _builtin_commands().get(k_unsquished)
 
102
        info = CommandInfo.from_command(cmd)
 
103
        try:
 
104
            registry.Registry.register(self, k_unsquished, cmd,
 
105
                                       override_existing=decorate, info=info)
 
106
        except KeyError:
 
107
            trace.warning('Two plugins defined the same command: %r' % k)
 
108
            trace.warning('Not loading the one in %r' %
 
109
                sys.modules[cmd.__module__])
 
110
            trace.warning('Previously this command was registered from %r' %
 
111
                sys.modules[previous.__module__])
 
112
        return previous
 
113
 
 
114
    def register_lazy(self, command_name, aliases, module_name):
 
115
        """Register a command without loading its module.
 
116
 
 
117
        :param command_name: The primary name of the command.
 
118
        :param aliases: A list of aliases for the command.
 
119
        :module_name: The module that the command lives in.
 
120
        """
 
121
        key = self._get_name(command_name)
 
122
        registry.Registry.register_lazy(self, key, module_name, command_name,
 
123
                                        info=CommandInfo(aliases))
 
124
 
 
125
 
 
126
plugin_cmds = CommandRegistry()
 
127
 
 
128
 
 
129
def register_command(cmd, decorate=False):
 
130
    global plugin_cmds
 
131
    return plugin_cmds.register(cmd, decorate)
 
132
 
 
133
 
 
134
def _squish_command_name(cmd):
 
135
    return 'cmd_' + cmd.replace('-', '_')
 
136
 
 
137
 
 
138
def _unsquish_command_name(cmd):
 
139
    return cmd[4:].replace('_','-')
 
140
 
 
141
 
 
142
def _builtin_commands():
 
143
    import bzrlib.builtins
 
144
    return _scan_module_for_commands(bzrlib.builtins)
 
145
 
 
146
 
 
147
def _scan_module_for_commands(module):
 
148
    r = {}
 
149
    for name, obj in module.__dict__.iteritems():
 
150
        if name.startswith("cmd_"):
 
151
            real_name = _unsquish_command_name(name)
 
152
            r[real_name] = obj
 
153
    return r
 
154
 
 
155
 
 
156
def _list_bzr_commands(names):
 
157
    """Find commands from bzr's core and plugins."""
 
158
    # to eliminate duplicates
 
159
    names.update(builtin_command_names())
 
160
    names.update(plugin_command_names())
 
161
    return names
 
162
 
 
163
 
 
164
def all_command_names():
 
165
    """Return a set of all command names."""
 
166
    names = set()
 
167
    for hook in Command.hooks['list_commands']:
 
168
        names = hook(names)
 
169
        if names is None:
 
170
            raise AssertionError(
 
171
                'hook %s returned None' % Command.hooks.get_hook_name(hook))
 
172
    return names
 
173
 
 
174
 
 
175
def builtin_command_names():
 
176
    """Return list of builtin command names.
 
177
    
 
178
    Use of all_command_names() is encouraged rather than builtin_command_names
 
179
    and/or plugin_command_names.
 
180
    """
 
181
    return _builtin_commands().keys()
 
182
 
 
183
 
 
184
def plugin_command_names():
 
185
    """Returns command names from commands registered by plugins."""
 
186
    return plugin_cmds.keys()
 
187
 
 
188
 
 
189
@deprecated_function(deprecated_in((1, 17, 0)))
 
190
def get_all_cmds(plugins_override=False):
 
191
    """Return canonical name and class for most commands.
 
192
    
 
193
    NB: This does not return all commands since the introduction of
 
194
    command hooks, and returning the class is not sufficient to 
 
195
    get correctly setup commands, which is why it is deprecated.
 
196
 
 
197
    Use 'all_command_names' + 'get_cmd_object' instead.
 
198
    """
 
199
    d = _builtin_commands()
 
200
    if plugins_override:
 
201
        d.update(plugin_cmds.iteritems())
 
202
    for k, v in d.iteritems():
 
203
        yield k,v
 
204
 
 
205
 
 
206
def get_cmd_object(cmd_name, plugins_override=True):
 
207
    """Return the command object for a command.
 
208
 
 
209
    plugins_override
 
210
        If true, plugin commands can override builtins.
 
211
    """
 
212
    try:
 
213
        return _get_cmd_object(cmd_name, plugins_override)
 
214
    except KeyError:
 
215
        raise errors.BzrCommandError('unknown command "%s"' % cmd_name)
 
216
 
 
217
 
 
218
def _get_cmd_object(cmd_name, plugins_override=True):
 
219
    """Get a command object.
 
220
 
 
221
    :param cmd_name: The name of the command.
 
222
    :param plugins_override: Allow plugins to override builtins.
 
223
    :return: A Command object instance
 
224
    :raises KeyError: If no command is found.
 
225
    """
 
226
    # We want only 'ascii' command names, but the user may have typed
 
227
    # in a Unicode name. In that case, they should just get a
 
228
    # 'command not found' error later.
 
229
    # In the future, we may actually support Unicode command names.
 
230
    cmd = None
 
231
    # Get a command
 
232
    for hook in Command.hooks['get_command']:
 
233
        cmd = hook(cmd, cmd_name)
 
234
        if cmd is not None and not plugins_override and not cmd.plugin_name():
 
235
            # We've found a non-plugin command, don't permit it to be
 
236
            # overridden.
 
237
            break
 
238
    if cmd is None:
 
239
        for hook in Command.hooks['get_missing_command']:
 
240
            cmd = hook(cmd_name)
 
241
            if cmd is not None:
 
242
                break
 
243
    if cmd is None:
 
244
        # No command found.
 
245
        raise KeyError
 
246
    # Allow plugins to extend commands
 
247
    for hook in Command.hooks['extend_command']:
 
248
        hook(cmd)
 
249
    return cmd
 
250
 
 
251
 
 
252
def _try_plugin_provider(cmd_name):
 
253
    """Probe for a plugin provider having cmd_name."""
 
254
    try:
 
255
        plugin_metadata, provider = probe_for_provider(cmd_name)
 
256
        raise errors.CommandAvailableInPlugin(cmd_name,
 
257
            plugin_metadata, provider)
 
258
    except errors.NoPluginAvailable:
 
259
        pass
 
260
 
 
261
 
 
262
def probe_for_provider(cmd_name):
 
263
    """Look for a provider for cmd_name.
 
264
 
 
265
    :param cmd_name: The command name.
 
266
    :return: plugin_metadata, provider for getting cmd_name.
 
267
    :raises NoPluginAvailable: When no provider can supply the plugin.
 
268
    """
 
269
    # look for providers that provide this command but aren't installed
 
270
    for provider in command_providers_registry:
 
271
        try:
 
272
            return provider.plugin_for_command(cmd_name), provider
 
273
        except errors.NoPluginAvailable:
 
274
            pass
 
275
    raise errors.NoPluginAvailable(cmd_name)
 
276
 
 
277
 
 
278
def _get_bzr_command(cmd_or_None, cmd_name):
 
279
    """Get a command from bzr's core."""
 
280
    cmds = _builtin_commands()
 
281
    try:
 
282
        return cmds[cmd_name]()
 
283
    except KeyError:
 
284
        pass
 
285
    # look for any command which claims this as an alias
 
286
    for real_cmd_name, cmd_class in cmds.iteritems():
 
287
        if cmd_name in cmd_class.aliases:
 
288
            return cmd_class()
 
289
    return cmd_or_None
 
290
 
 
291
 
 
292
def _get_external_command(cmd_or_None, cmd_name):
 
293
    """Lookup a command that is a shell script."""
 
294
    # Only do external command lookups when no command is found so far.
 
295
    if cmd_or_None is not None:
 
296
        return cmd_or_None
 
297
    from bzrlib.externalcommand import ExternalCommand
 
298
    cmd_obj = ExternalCommand.find_command(cmd_name)
 
299
    if cmd_obj:
 
300
        return cmd_obj
 
301
 
 
302
 
 
303
def _get_plugin_command(cmd_or_None, cmd_name):
 
304
    """Get a command from bzr's plugins."""
 
305
    try:
 
306
        return plugin_cmds.get(cmd_name)()
 
307
    except KeyError:
 
308
        pass
 
309
    for key in plugin_cmds.keys():
 
310
        info = plugin_cmds.get_info(key)
 
311
        if cmd_name in info.aliases:
 
312
            return plugin_cmds.get(key)()
 
313
    return cmd_or_None
 
314
 
 
315
 
 
316
class Command(object):
 
317
    """Base class for commands.
 
318
 
 
319
    Commands are the heart of the command-line bzr interface.
 
320
 
 
321
    The command object mostly handles the mapping of command-line
 
322
    parameters into one or more bzrlib operations, and of the results
 
323
    into textual output.
 
324
 
 
325
    Commands normally don't have any state.  All their arguments are
 
326
    passed in to the run method.  (Subclasses may take a different
 
327
    policy if the behaviour of the instance needs to depend on e.g. a
 
328
    shell plugin and not just its Python class.)
 
329
 
 
330
    The docstring for an actual command should give a single-line
 
331
    summary, then a complete description of the command.  A grammar
 
332
    description will be inserted.
 
333
 
 
334
    aliases
 
335
        Other accepted names for this command.
 
336
 
 
337
    takes_args
 
338
        List of argument forms, marked with whether they are optional,
 
339
        repeated, etc.
 
340
 
 
341
                Examples:
 
342
 
 
343
                ['to_location', 'from_branch?', 'file*']
 
344
 
 
345
                'to_location' is required
 
346
                'from_branch' is optional
 
347
                'file' can be specified 0 or more times
 
348
 
 
349
    takes_options
 
350
        List of options that may be given for this command.  These can
 
351
        be either strings, referring to globally-defined options,
 
352
        or option objects.  Retrieve through options().
 
353
 
 
354
    hidden
 
355
        If true, this command isn't advertised.  This is typically
 
356
        for commands intended for expert users.
 
357
 
 
358
    encoding_type
 
359
        Command objects will get a 'outf' attribute, which has been
 
360
        setup to properly handle encoding of unicode strings.
 
361
        encoding_type determines what will happen when characters cannot
 
362
        be encoded
 
363
            strict - abort if we cannot decode
 
364
            replace - put in a bogus character (typically '?')
 
365
            exact - do not encode sys.stdout
 
366
 
 
367
            NOTE: by default on Windows, sys.stdout is opened as a text
 
368
            stream, therefore LF line-endings are converted to CRLF.
 
369
            When a command uses encoding_type = 'exact', then
 
370
            sys.stdout is forced to be a binary stream, and line-endings
 
371
            will not mangled.
 
372
 
 
373
    :cvar hooks: An instance of CommandHooks.
 
374
    """
 
375
    aliases = []
 
376
    takes_args = []
 
377
    takes_options = []
 
378
    encoding_type = 'strict'
 
379
 
 
380
    hidden = False
 
381
 
 
382
    def __init__(self):
 
383
        """Construct an instance of this command."""
 
384
        if self.__doc__ == Command.__doc__:
 
385
            warn("No help message set for %r" % self)
 
386
        # List of standard options directly supported
 
387
        self.supported_std_options = []
 
388
        self._operation = cleanup.OperationWithCleanups(self.run)
 
389
    
 
390
    def add_cleanup(self, cleanup_func, *args, **kwargs):
 
391
        """Register a function to call after self.run returns or raises.
 
392
 
 
393
        Functions will be called in LIFO order.
 
394
        """
 
395
        self._operation.add_cleanup(cleanup_func, *args, **kwargs)
 
396
 
 
397
    def cleanup_now(self):
 
398
        """Execute and empty pending cleanup functions immediately.
 
399
 
 
400
        After cleanup_now all registered cleanups are forgotten.  add_cleanup
 
401
        may be called again after cleanup_now; these cleanups will be called
 
402
        after self.run returns or raises (or when cleanup_now is next called).
 
403
 
 
404
        This is useful for releasing expensive or contentious resources (such
 
405
        as write locks) before doing further work that does not require those
 
406
        resources (such as writing results to self.outf).
 
407
        """
 
408
        self._operation.cleanup_now()
 
409
        
 
410
    @deprecated_method(deprecated_in((2, 1, 0)))
 
411
    def _maybe_expand_globs(self, file_list):
 
412
        """Glob expand file_list if the platform does not do that itself.
 
413
 
 
414
        Not used anymore, now that the bzr command-line parser globs on
 
415
        Windows.
 
416
 
 
417
        :return: A possibly empty list of unicode paths.
 
418
 
 
419
        Introduced in bzrlib 0.18.
 
420
        """
 
421
        return file_list
 
422
 
 
423
    def _usage(self):
 
424
        """Return single-line grammar for this command.
 
425
 
 
426
        Only describes arguments, not options.
 
427
        """
 
428
        s = 'bzr ' + self.name() + ' '
 
429
        for aname in self.takes_args:
 
430
            aname = aname.upper()
 
431
            if aname[-1] in ['$', '+']:
 
432
                aname = aname[:-1] + '...'
 
433
            elif aname[-1] == '?':
 
434
                aname = '[' + aname[:-1] + ']'
 
435
            elif aname[-1] == '*':
 
436
                aname = '[' + aname[:-1] + '...]'
 
437
            s += aname + ' '
 
438
        s = s[:-1]      # remove last space
 
439
        return s
 
440
 
 
441
    def get_help_text(self, additional_see_also=None, plain=True,
 
442
                      see_also_as_links=False, verbose=True):
 
443
        """Return a text string with help for this command.
 
444
 
 
445
        :param additional_see_also: Additional help topics to be
 
446
            cross-referenced.
 
447
        :param plain: if False, raw help (reStructuredText) is
 
448
            returned instead of plain text.
 
449
        :param see_also_as_links: if True, convert items in 'See also'
 
450
            list to internal links (used by bzr_man rstx generator)
 
451
        :param verbose: if True, display the full help, otherwise
 
452
            leave out the descriptive sections and just display
 
453
            usage help (e.g. Purpose, Usage, Options) with a
 
454
            message explaining how to obtain full help.
 
455
        """
 
456
        doc = self.help()
 
457
        if doc is None:
 
458
            raise NotImplementedError("sorry, no detailed help yet for %r" % self.name())
 
459
 
 
460
        # Extract the summary (purpose) and sections out from the text
 
461
        purpose,sections,order = self._get_help_parts(doc)
 
462
 
 
463
        # If a custom usage section was provided, use it
 
464
        if sections.has_key('Usage'):
 
465
            usage = sections.pop('Usage')
 
466
        else:
 
467
            usage = self._usage()
 
468
 
 
469
        # The header is the purpose and usage
 
470
        result = ""
 
471
        result += ':Purpose: %s\n' % purpose
 
472
        if usage.find('\n') >= 0:
 
473
            result += ':Usage:\n%s\n' % usage
 
474
        else:
 
475
            result += ':Usage:   %s\n' % usage
 
476
        result += '\n'
 
477
 
 
478
        # Add the options
 
479
        #
 
480
        # XXX: optparse implicitly rewraps the help, and not always perfectly,
 
481
        # so we get <https://bugs.launchpad.net/bzr/+bug/249908>.  -- mbp
 
482
        # 20090319
 
483
        options = option.get_optparser(self.options()).format_option_help()
 
484
        # XXX: According to the spec, ReST option lists actually don't support 
 
485
        # options like --1.9 so that causes syntax errors (in Sphinx at least).
 
486
        # As that pattern always appears in the commands that break, we trap
 
487
        # on that and then format that block of 'format' options as a literal
 
488
        # block.
 
489
        if not plain and options.find('  --1.9  ') != -1:
 
490
            options = options.replace(' format:\n', ' format::\n\n', 1)
 
491
        if options.startswith('Options:'):
 
492
            result += ':' + options
 
493
        elif options.startswith('options:'):
 
494
            # Python 2.4 version of optparse
 
495
            result += ':Options:' + options[len('options:'):]
 
496
        else:
 
497
            result += options
 
498
        result += '\n'
 
499
 
 
500
        if verbose:
 
501
            # Add the description, indenting it 2 spaces
 
502
            # to match the indentation of the options
 
503
            if sections.has_key(None):
 
504
                text = sections.pop(None)
 
505
                text = '\n  '.join(text.splitlines())
 
506
                result += ':%s:\n  %s\n\n' % ('Description',text)
 
507
 
 
508
            # Add the custom sections (e.g. Examples). Note that there's no need
 
509
            # to indent these as they must be indented already in the source.
 
510
            if sections:
 
511
                for label in order:
 
512
                    if sections.has_key(label):
 
513
                        result += ':%s:\n%s\n' % (label,sections[label])
 
514
                result += '\n'
 
515
        else:
 
516
            result += ("See bzr help %s for more details and examples.\n\n"
 
517
                % self.name())
 
518
 
 
519
        # Add the aliases, source (plug-in) and see also links, if any
 
520
        if self.aliases:
 
521
            result += ':Aliases:  '
 
522
            result += ', '.join(self.aliases) + '\n'
 
523
        plugin_name = self.plugin_name()
 
524
        if plugin_name is not None:
 
525
            result += ':From:     plugin "%s"\n' % plugin_name
 
526
        see_also = self.get_see_also(additional_see_also)
 
527
        if see_also:
 
528
            if not plain and see_also_as_links:
 
529
                see_also_links = []
 
530
                for item in see_also:
 
531
                    if item == 'topics':
 
532
                        # topics doesn't have an independent section
 
533
                        # so don't create a real link
 
534
                        see_also_links.append(item)
 
535
                    else:
 
536
                        # Use a reST link for this entry
 
537
                        see_also_links.append("`%s`_" % (item,))
 
538
                see_also = see_also_links
 
539
            result += ':See also: '
 
540
            result += ', '.join(see_also) + '\n'
 
541
 
 
542
        # If this will be rendered as plain text, convert it
 
543
        if plain:
 
544
            import bzrlib.help_topics
 
545
            result = bzrlib.help_topics.help_as_plain_text(result)
 
546
        return result
 
547
 
 
548
    @staticmethod
 
549
    def _get_help_parts(text):
 
550
        """Split help text into a summary and named sections.
 
551
 
 
552
        :return: (summary,sections,order) where summary is the top line and
 
553
            sections is a dictionary of the rest indexed by section name.
 
554
            order is the order the section appear in the text.
 
555
            A section starts with a heading line of the form ":xxx:".
 
556
            Indented text on following lines is the section value.
 
557
            All text found outside a named section is assigned to the
 
558
            default section which is given the key of None.
 
559
        """
 
560
        def save_section(sections, order, label, section):
 
561
            if len(section) > 0:
 
562
                if sections.has_key(label):
 
563
                    sections[label] += '\n' + section
 
564
                else:
 
565
                    order.append(label)
 
566
                    sections[label] = section
 
567
 
 
568
        lines = text.rstrip().splitlines()
 
569
        summary = lines.pop(0)
 
570
        sections = {}
 
571
        order = []
 
572
        label,section = None,''
 
573
        for line in lines:
 
574
            if line.startswith(':') and line.endswith(':') and len(line) > 2:
 
575
                save_section(sections, order, label, section)
 
576
                label,section = line[1:-1],''
 
577
            elif (label is not None) and len(line) > 1 and not line[0].isspace():
 
578
                save_section(sections, order, label, section)
 
579
                label,section = None,line
 
580
            else:
 
581
                if len(section) > 0:
 
582
                    section += '\n' + line
 
583
                else:
 
584
                    section = line
 
585
        save_section(sections, order, label, section)
 
586
        return summary, sections, order
 
587
 
 
588
    def get_help_topic(self):
 
589
        """Return the commands help topic - its name."""
 
590
        return self.name()
 
591
 
 
592
    def get_see_also(self, additional_terms=None):
 
593
        """Return a list of help topics that are related to this command.
 
594
 
 
595
        The list is derived from the content of the _see_also attribute. Any
 
596
        duplicates are removed and the result is in lexical order.
 
597
        :param additional_terms: Additional help topics to cross-reference.
 
598
        :return: A list of help topics.
 
599
        """
 
600
        see_also = set(getattr(self, '_see_also', []))
 
601
        if additional_terms:
 
602
            see_also.update(additional_terms)
 
603
        return sorted(see_also)
 
604
 
 
605
    def options(self):
 
606
        """Return dict of valid options for this command.
 
607
 
 
608
        Maps from long option name to option object."""
 
609
        r = Option.STD_OPTIONS.copy()
 
610
        std_names = r.keys()
 
611
        for o in self.takes_options:
 
612
            if isinstance(o, basestring):
 
613
                o = option.Option.OPTIONS[o]
 
614
            r[o.name] = o
 
615
            if o.name in std_names:
 
616
                self.supported_std_options.append(o.name)
 
617
        return r
 
618
 
 
619
    def _setup_outf(self):
 
620
        """Return a file linked to stdout, which has proper encoding."""
 
621
        self.outf = ui.ui_factory.make_output_stream(
 
622
            encoding_type=self.encoding_type)
 
623
 
 
624
    def run_argv_aliases(self, argv, alias_argv=None):
 
625
        """Parse the command line and run with extra aliases in alias_argv."""
 
626
        if argv is None:
 
627
            warn("Passing None for [] is deprecated from bzrlib 0.10",
 
628
                 DeprecationWarning, stacklevel=2)
 
629
            argv = []
 
630
        args, opts = parse_args(self, argv, alias_argv)
 
631
 
 
632
        # Process the standard options
 
633
        if 'help' in opts:  # e.g. bzr add --help
 
634
            sys.stdout.write(self.get_help_text())
 
635
            return 0
 
636
        if 'usage' in opts:  # e.g. bzr add --usage
 
637
            sys.stdout.write(self.get_help_text(verbose=False))
 
638
            return 0
 
639
        trace.set_verbosity_level(option._verbosity_level)
 
640
        if 'verbose' in self.supported_std_options:
 
641
            opts['verbose'] = trace.is_verbose()
 
642
        elif opts.has_key('verbose'):
 
643
            del opts['verbose']
 
644
        if 'quiet' in self.supported_std_options:
 
645
            opts['quiet'] = trace.is_quiet()
 
646
        elif opts.has_key('quiet'):
 
647
            del opts['quiet']
 
648
 
 
649
        # mix arguments and options into one dictionary
 
650
        cmdargs = _match_argform(self.name(), self.takes_args, args)
 
651
        cmdopts = {}
 
652
        for k, v in opts.items():
 
653
            cmdopts[k.replace('-', '_')] = v
 
654
 
 
655
        all_cmd_args = cmdargs.copy()
 
656
        all_cmd_args.update(cmdopts)
 
657
 
 
658
        self._setup_outf()
 
659
 
 
660
        return self.run_direct(**all_cmd_args)
 
661
 
 
662
    def run_direct(self, *args, **kwargs):
 
663
        """Call run directly with objects (without parsing an argv list)."""
 
664
        return self._operation.run_simple(*args, **kwargs)
 
665
 
 
666
    def run(self):
 
667
        """Actually run the command.
 
668
 
 
669
        This is invoked with the options and arguments bound to
 
670
        keyword parameters.
 
671
 
 
672
        Return 0 or None if the command was successful, or a non-zero
 
673
        shell error code if not.  It's OK for this method to allow
 
674
        an exception to raise up.
 
675
        """
 
676
        raise NotImplementedError('no implementation of command %r'
 
677
                                  % self.name())
 
678
 
 
679
    def help(self):
 
680
        """Return help message for this class."""
 
681
        from inspect import getdoc
 
682
        if self.__doc__ is Command.__doc__:
 
683
            return None
 
684
        return getdoc(self)
 
685
 
 
686
    def name(self):
 
687
        return _unsquish_command_name(self.__class__.__name__)
 
688
 
 
689
    def plugin_name(self):
 
690
        """Get the name of the plugin that provides this command.
 
691
 
 
692
        :return: The name of the plugin or None if the command is builtin.
 
693
        """
 
694
        mod_parts = self.__module__.split('.')
 
695
        if len(mod_parts) >= 3 and mod_parts[1] == 'plugins':
 
696
            return mod_parts[2]
 
697
        else:
 
698
            return None
 
699
 
 
700
 
 
701
class CommandHooks(Hooks):
 
702
    """Hooks related to Command object creation/enumeration."""
 
703
 
 
704
    def __init__(self):
 
705
        """Create the default hooks.
 
706
 
 
707
        These are all empty initially, because by default nothing should get
 
708
        notified.
 
709
        """
 
710
        Hooks.__init__(self)
 
711
        self.create_hook(HookPoint('extend_command',
 
712
            "Called after creating a command object to allow modifications "
 
713
            "such as adding or removing options, docs etc. Called with the "
 
714
            "new bzrlib.commands.Command object.", (1, 13), None))
 
715
        self.create_hook(HookPoint('get_command',
 
716
            "Called when creating a single command. Called with "
 
717
            "(cmd_or_None, command_name). get_command should either return "
 
718
            "the cmd_or_None parameter, or a replacement Command object that "
 
719
            "should be used for the command. Note that the Command.hooks "
 
720
            "hooks are core infrastructure. Many users will prefer to use "
 
721
            "bzrlib.commands.register_command or plugin_cmds.register_lazy.",
 
722
            (1, 17), None))
 
723
        self.create_hook(HookPoint('get_missing_command',
 
724
            "Called when creating a single command if no command could be "
 
725
            "found. Called with (command_name). get_missing_command should "
 
726
            "either return None, or a Command object to be used for the "
 
727
            "command.", (1, 17), None))
 
728
        self.create_hook(HookPoint('list_commands',
 
729
            "Called when enumerating commands. Called with a set of "
 
730
            "cmd_name strings for all the commands found so far. This set "
 
731
            " is safe to mutate - e.g. to remove a command. "
 
732
            "list_commands should return the updated set of command names.",
 
733
            (1, 17), None))
 
734
 
 
735
Command.hooks = CommandHooks()
 
736
 
 
737
 
 
738
def parse_args(command, argv, alias_argv=None):
 
739
    """Parse command line.
 
740
 
 
741
    Arguments and options are parsed at this level before being passed
 
742
    down to specific command handlers.  This routine knows, from a
 
743
    lookup table, something about the available options, what optargs
 
744
    they take, and which commands will accept them.
 
745
    """
 
746
    # TODO: make it a method of the Command?
 
747
    parser = option.get_optparser(command.options())
 
748
    if alias_argv is not None:
 
749
        args = alias_argv + argv
 
750
    else:
 
751
        args = argv
 
752
 
 
753
    options, args = parser.parse_args(args)
 
754
    opts = dict([(k, v) for k, v in options.__dict__.iteritems() if
 
755
                 v is not option.OptionParser.DEFAULT_VALUE])
 
756
    return args, opts
 
757
 
 
758
 
 
759
def _match_argform(cmd, takes_args, args):
 
760
    argdict = {}
 
761
 
 
762
    # step through args and takes_args, allowing appropriate 0-many matches
 
763
    for ap in takes_args:
 
764
        argname = ap[:-1]
 
765
        if ap[-1] == '?':
 
766
            if args:
 
767
                argdict[argname] = args.pop(0)
 
768
        elif ap[-1] == '*': # all remaining arguments
 
769
            if args:
 
770
                argdict[argname + '_list'] = args[:]
 
771
                args = []
 
772
            else:
 
773
                argdict[argname + '_list'] = None
 
774
        elif ap[-1] == '+':
 
775
            if not args:
 
776
                raise errors.BzrCommandError("command %r needs one or more %s"
 
777
                                             % (cmd, argname.upper()))
 
778
            else:
 
779
                argdict[argname + '_list'] = args[:]
 
780
                args = []
 
781
        elif ap[-1] == '$': # all but one
 
782
            if len(args) < 2:
 
783
                raise errors.BzrCommandError("command %r needs one or more %s"
 
784
                                             % (cmd, argname.upper()))
 
785
            argdict[argname + '_list'] = args[:-1]
 
786
            args[:-1] = []
 
787
        else:
 
788
            # just a plain arg
 
789
            argname = ap
 
790
            if not args:
 
791
                raise errors.BzrCommandError("command %r requires argument %s"
 
792
                               % (cmd, argname.upper()))
 
793
            else:
 
794
                argdict[argname] = args.pop(0)
 
795
 
 
796
    if args:
 
797
        raise errors.BzrCommandError("extra argument to command %s: %s"
 
798
                                     % (cmd, args[0]))
 
799
 
 
800
    return argdict
 
801
 
 
802
def apply_coveraged(dirname, the_callable, *args, **kwargs):
 
803
    # Cannot use "import trace", as that would import bzrlib.trace instead of
 
804
    # the standard library's trace.
 
805
    trace = __import__('trace')
 
806
 
 
807
    tracer = trace.Trace(count=1, trace=0)
 
808
    sys.settrace(tracer.globaltrace)
 
809
    threading.settrace(tracer.globaltrace)
 
810
 
 
811
    try:
 
812
        return exception_to_return_code(the_callable, *args, **kwargs)
 
813
    finally:
 
814
        sys.settrace(None)
 
815
        results = tracer.results()
 
816
        results.write_results(show_missing=1, summary=False,
 
817
                              coverdir=dirname)
 
818
 
 
819
 
 
820
def apply_profiled(the_callable, *args, **kwargs):
 
821
    import hotshot
 
822
    import tempfile
 
823
    import hotshot.stats
 
824
    pffileno, pfname = tempfile.mkstemp()
 
825
    try:
 
826
        prof = hotshot.Profile(pfname)
 
827
        try:
 
828
            ret = prof.runcall(exception_to_return_code, the_callable, *args,
 
829
                **kwargs) or 0
 
830
        finally:
 
831
            prof.close()
 
832
        stats = hotshot.stats.load(pfname)
 
833
        stats.strip_dirs()
 
834
        stats.sort_stats('cum')   # 'time'
 
835
        ## XXX: Might like to write to stderr or the trace file instead but
 
836
        ## print_stats seems hardcoded to stdout
 
837
        stats.print_stats(20)
 
838
        return ret
 
839
    finally:
 
840
        os.close(pffileno)
 
841
        os.remove(pfname)
 
842
 
 
843
 
 
844
def exception_to_return_code(the_callable, *args, **kwargs):
 
845
    """UI level helper for profiling and coverage.
 
846
 
 
847
    This transforms exceptions into a return value of 3. As such its only
 
848
    relevant to the UI layer, and should never be called where catching
 
849
    exceptions may be desirable.
 
850
    """
 
851
    try:
 
852
        return the_callable(*args, **kwargs)
 
853
    except (KeyboardInterrupt, Exception), e:
 
854
        # used to handle AssertionError and KeyboardInterrupt
 
855
        # specially here, but hopefully they're handled ok by the logger now
 
856
        exc_info = sys.exc_info()
 
857
        exitcode = trace.report_exception(exc_info, sys.stderr)
 
858
        if os.environ.get('BZR_PDB'):
 
859
            print '**** entering debugger'
 
860
            tb = exc_info[2]
 
861
            import pdb
 
862
            if sys.version_info[:2] < (2, 6):
 
863
                # XXX: we want to do
 
864
                #    pdb.post_mortem(tb)
 
865
                # but because pdb.post_mortem gives bad results for tracebacks
 
866
                # from inside generators, we do it manually.
 
867
                # (http://bugs.python.org/issue4150, fixed in Python 2.6)
 
868
 
 
869
                # Setup pdb on the traceback
 
870
                p = pdb.Pdb()
 
871
                p.reset()
 
872
                p.setup(tb.tb_frame, tb)
 
873
                # Point the debugger at the deepest frame of the stack
 
874
                p.curindex = len(p.stack) - 1
 
875
                p.curframe = p.stack[p.curindex][0]
 
876
                # Start the pdb prompt.
 
877
                p.print_stack_entry(p.stack[p.curindex])
 
878
                p.execRcLines()
 
879
                p.cmdloop()
 
880
            else:
 
881
                pdb.post_mortem(tb)
 
882
        return exitcode
 
883
 
 
884
 
 
885
def apply_lsprofiled(filename, the_callable, *args, **kwargs):
 
886
    from bzrlib.lsprof import profile
 
887
    ret, stats = profile(exception_to_return_code, the_callable, *args, **kwargs)
 
888
    stats.sort()
 
889
    if filename is None:
 
890
        stats.pprint()
 
891
    else:
 
892
        stats.save(filename)
 
893
        trace.note('Profile data written to "%s".', filename)
 
894
    return ret
 
895
 
 
896
 
 
897
def shlex_split_unicode(unsplit):
 
898
    import shlex
 
899
    return [u.decode('utf-8') for u in shlex.split(unsplit.encode('utf-8'))]
 
900
 
 
901
 
 
902
def get_alias(cmd, config=None):
 
903
    """Return an expanded alias, or None if no alias exists.
 
904
 
 
905
    cmd
 
906
        Command to be checked for an alias.
 
907
    config
 
908
        Used to specify an alternative config to use,
 
909
        which is especially useful for testing.
 
910
        If it is unspecified, the global config will be used.
 
911
    """
 
912
    if config is None:
 
913
        import bzrlib.config
 
914
        config = bzrlib.config.GlobalConfig()
 
915
    alias = config.get_alias(cmd)
 
916
    if (alias):
 
917
        return shlex_split_unicode(alias)
 
918
    return None
 
919
 
 
920
 
 
921
def run_bzr(argv):
 
922
    """Execute a command.
 
923
 
 
924
    argv
 
925
       The command-line arguments, without the program name from argv[0]
 
926
       These should already be decoded. All library/test code calling
 
927
       run_bzr should be passing valid strings (don't need decoding).
 
928
 
 
929
    Returns a command status or raises an exception.
 
930
 
 
931
    Special master options: these must come before the command because
 
932
    they control how the command is interpreted.
 
933
 
 
934
    --no-plugins
 
935
        Do not load plugin modules at all
 
936
 
 
937
    --no-aliases
 
938
        Do not allow aliases
 
939
 
 
940
    --builtin
 
941
        Only use builtin commands.  (Plugins are still allowed to change
 
942
        other behaviour.)
 
943
 
 
944
    --profile
 
945
        Run under the Python hotshot profiler.
 
946
 
 
947
    --lsprof
 
948
        Run under the Python lsprof profiler.
 
949
 
 
950
    --coverage
 
951
        Generate line coverage report in the specified directory.
 
952
 
 
953
    --concurrency
 
954
        Specify the number of processes that can be run concurrently (selftest).
 
955
    """
 
956
    argv = list(argv)
 
957
    trace.mutter("bzr arguments: %r", argv)
 
958
 
 
959
    opt_lsprof = opt_profile = opt_no_plugins = opt_builtin =  \
 
960
                opt_no_aliases = False
 
961
    opt_lsprof_file = opt_coverage_dir = None
 
962
 
 
963
    # --no-plugins is handled specially at a very early stage. We need
 
964
    # to load plugins before doing other command parsing so that they
 
965
    # can override commands, but this needs to happen first.
 
966
 
 
967
    argv_copy = []
 
968
    i = 0
 
969
    while i < len(argv):
 
970
        a = argv[i]
 
971
        if a == '--profile':
 
972
            opt_profile = True
 
973
        elif a == '--lsprof':
 
974
            opt_lsprof = True
 
975
        elif a == '--lsprof-file':
 
976
            opt_lsprof = True
 
977
            opt_lsprof_file = argv[i + 1]
 
978
            i += 1
 
979
        elif a == '--no-plugins':
 
980
            opt_no_plugins = True
 
981
        elif a == '--no-aliases':
 
982
            opt_no_aliases = True
 
983
        elif a == '--builtin':
 
984
            opt_builtin = True
 
985
        elif a == '--concurrency':
 
986
            os.environ['BZR_CONCURRENCY'] = argv[i + 1]
 
987
            i += 1
 
988
        elif a == '--coverage':
 
989
            opt_coverage_dir = argv[i + 1]
 
990
            i += 1
 
991
        elif a.startswith('-D'):
 
992
            debug.debug_flags.add(a[2:])
 
993
        else:
 
994
            argv_copy.append(a)
 
995
        i += 1
 
996
 
 
997
    debug.set_debug_flags_from_config()
 
998
 
 
999
    argv = argv_copy
 
1000
    if (not argv):
 
1001
        from bzrlib.builtins import cmd_help
 
1002
        cmd_help().run_argv_aliases([])
 
1003
        return 0
 
1004
 
 
1005
    if argv[0] == '--version':
 
1006
        from bzrlib.builtins import cmd_version
 
1007
        cmd_version().run_argv_aliases([])
 
1008
        return 0
 
1009
 
 
1010
    if not opt_no_plugins:
 
1011
        from bzrlib.plugin import load_plugins
 
1012
        load_plugins()
 
1013
    else:
 
1014
        from bzrlib.plugin import disable_plugins
 
1015
        disable_plugins()
 
1016
 
 
1017
    alias_argv = None
 
1018
 
 
1019
    if not opt_no_aliases:
 
1020
        alias_argv = get_alias(argv[0])
 
1021
        if alias_argv:
 
1022
            user_encoding = osutils.get_user_encoding()
 
1023
            alias_argv = [a.decode(user_encoding) for a in alias_argv]
 
1024
            argv[0] = alias_argv.pop(0)
 
1025
 
 
1026
    cmd = argv.pop(0)
 
1027
    # We want only 'ascii' command names, but the user may have typed
 
1028
    # in a Unicode name. In that case, they should just get a
 
1029
    # 'command not found' error later.
 
1030
 
 
1031
    cmd_obj = get_cmd_object(cmd, plugins_override=not opt_builtin)
 
1032
    run = cmd_obj.run_argv_aliases
 
1033
    run_argv = [argv, alias_argv]
 
1034
 
 
1035
    try:
 
1036
        # We can be called recursively (tests for example), but we don't want
 
1037
        # the verbosity level to propagate.
 
1038
        saved_verbosity_level = option._verbosity_level
 
1039
        option._verbosity_level = 0
 
1040
        if opt_lsprof:
 
1041
            if opt_coverage_dir:
 
1042
                trace.warning(
 
1043
                    '--coverage ignored, because --lsprof is in use.')
 
1044
            ret = apply_lsprofiled(opt_lsprof_file, run, *run_argv)
 
1045
        elif opt_profile:
 
1046
            if opt_coverage_dir:
 
1047
                trace.warning(
 
1048
                    '--coverage ignored, because --profile is in use.')
 
1049
            ret = apply_profiled(run, *run_argv)
 
1050
        elif opt_coverage_dir:
 
1051
            ret = apply_coveraged(opt_coverage_dir, run, *run_argv)
 
1052
        else:
 
1053
            ret = run(*run_argv)
 
1054
        return ret or 0
 
1055
    finally:
 
1056
        # reset, in case we may do other commands later within the same
 
1057
        # process. Commands that want to execute sub-commands must propagate
 
1058
        # --verbose in their own way.
 
1059
        if 'memory' in debug.debug_flags:
 
1060
            trace.debug_memory('Process status after command:', short=False)
 
1061
        option._verbosity_level = saved_verbosity_level
 
1062
 
 
1063
 
 
1064
def display_command(func):
 
1065
    """Decorator that suppresses pipe/interrupt errors."""
 
1066
    def ignore_pipe(*args, **kwargs):
 
1067
        try:
 
1068
            result = func(*args, **kwargs)
 
1069
            sys.stdout.flush()
 
1070
            return result
 
1071
        except IOError, e:
 
1072
            if getattr(e, 'errno', None) is None:
 
1073
                raise
 
1074
            if e.errno != errno.EPIPE:
 
1075
                # Win32 raises IOError with errno=0 on a broken pipe
 
1076
                if sys.platform != 'win32' or (e.errno not in (0, errno.EINVAL)):
 
1077
                    raise
 
1078
            pass
 
1079
        except KeyboardInterrupt:
 
1080
            pass
 
1081
    return ignore_pipe
 
1082
 
 
1083
 
 
1084
def install_bzr_command_hooks():
 
1085
    """Install the hooks to supply bzr's own commands."""
 
1086
    if _list_bzr_commands in Command.hooks["list_commands"]:
 
1087
        return
 
1088
    Command.hooks.install_named_hook("list_commands", _list_bzr_commands,
 
1089
        "bzr commands")
 
1090
    Command.hooks.install_named_hook("get_command", _get_bzr_command,
 
1091
        "bzr commands")
 
1092
    Command.hooks.install_named_hook("get_command", _get_plugin_command,
 
1093
        "bzr plugin commands")
 
1094
    Command.hooks.install_named_hook("get_command", _get_external_command,
 
1095
        "bzr external command lookup")
 
1096
    Command.hooks.install_named_hook("get_missing_command", _try_plugin_provider,
 
1097
        "bzr plugin-provider-db check")
 
1098
 
 
1099
 
 
1100
def main(argv=None):
 
1101
    """Main entry point of command-line interface.
 
1102
 
 
1103
    :param argv: list of unicode command-line arguments similar to sys.argv.
 
1104
        argv[0] is script name usually, it will be ignored.
 
1105
        Don't pass here sys.argv because this list contains plain strings
 
1106
        and not unicode; pass None instead.
 
1107
 
 
1108
    :return: exit code of bzr command.
 
1109
    """
 
1110
    import bzrlib.ui
 
1111
    bzrlib.ui.ui_factory = bzrlib.ui.make_ui_for_terminal(
 
1112
        sys.stdin, sys.stdout, sys.stderr)
 
1113
 
 
1114
    # Is this a final release version? If so, we should suppress warnings
 
1115
    if bzrlib.version_info[3] == 'final':
 
1116
        suppress_deprecation_warnings(override=True)
 
1117
    if argv is None:
 
1118
        argv = osutils.get_unicode_argv()
 
1119
    else:
 
1120
        new_argv = []
 
1121
        try:
 
1122
            # ensure all arguments are unicode strings
 
1123
            for a in argv[1:]:
 
1124
                if isinstance(a, unicode):
 
1125
                    new_argv.append(a)
 
1126
                else:
 
1127
                    new_argv.append(a.decode('ascii'))
 
1128
        except UnicodeDecodeError:
 
1129
            raise errors.BzrError("argv should be list of unicode strings.")
 
1130
        argv = new_argv
 
1131
    ret = run_bzr_catch_errors(argv)
 
1132
    bzrlib.ui.ui_factory.log_transport_activity(
 
1133
        display=('bytes' in debug.debug_flags))
 
1134
    trace.mutter("return code %d", ret)
 
1135
    osutils.report_extension_load_failures()
 
1136
    return ret
 
1137
 
 
1138
 
 
1139
def run_bzr_catch_errors(argv):
 
1140
    """Run a bzr command with parameters as described by argv.
 
1141
 
 
1142
    This function assumed that that UI layer is setup, that symbol deprecations
 
1143
    are already applied, and that unicode decoding has already been performed on argv.
 
1144
    """
 
1145
    install_bzr_command_hooks()
 
1146
    return exception_to_return_code(run_bzr, argv)
 
1147
 
 
1148
 
 
1149
def run_bzr_catch_user_errors(argv):
 
1150
    """Run bzr and report user errors, but let internal errors propagate.
 
1151
 
 
1152
    This is used for the test suite, and might be useful for other programs
 
1153
    that want to wrap the commandline interface.
 
1154
    """
 
1155
    install_bzr_command_hooks()
 
1156
    try:
 
1157
        return run_bzr(argv)
 
1158
    except Exception, e:
 
1159
        if (isinstance(e, (OSError, IOError))
 
1160
            or not getattr(e, 'internal_error', True)):
 
1161
            trace.report_exception(sys.exc_info(), sys.stderr)
 
1162
            return 3
 
1163
        else:
 
1164
            raise
 
1165
 
 
1166
 
 
1167
class HelpCommandIndex(object):
 
1168
    """A index for bzr help that returns commands."""
 
1169
 
 
1170
    def __init__(self):
 
1171
        self.prefix = 'commands/'
 
1172
 
 
1173
    def get_topics(self, topic):
 
1174
        """Search for topic amongst commands.
 
1175
 
 
1176
        :param topic: A topic to search for.
 
1177
        :return: A list which is either empty or contains a single
 
1178
            Command entry.
 
1179
        """
 
1180
        if topic and topic.startswith(self.prefix):
 
1181
            topic = topic[len(self.prefix):]
 
1182
        try:
 
1183
            cmd = _get_cmd_object(topic)
 
1184
        except KeyError:
 
1185
            return []
 
1186
        else:
 
1187
            return [cmd]
 
1188
 
 
1189
 
 
1190
class Provider(object):
 
1191
    '''Generic class to be overriden by plugins'''
 
1192
 
 
1193
    def plugin_for_command(self, cmd_name):
 
1194
        '''Takes a command and returns the information for that plugin
 
1195
 
 
1196
        :return: A dictionary with all the available information
 
1197
        for the requested plugin
 
1198
        '''
 
1199
        raise NotImplementedError
 
1200
 
 
1201
 
 
1202
class ProvidersRegistry(registry.Registry):
 
1203
    '''This registry exists to allow other providers to exist'''
 
1204
 
 
1205
    def __iter__(self):
 
1206
        for key, provider in self.iteritems():
 
1207
            yield provider
 
1208
 
 
1209
command_providers_registry = ProvidersRegistry()
 
1210
 
 
1211
 
 
1212
if __name__ == '__main__':
 
1213
    sys.exit(main(sys.argv))