~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/commands.py

  • Committer: John Arbash Meinel
  • Date: 2009-06-02 19:56:24 UTC
  • mto: This revision was merged to the branch mainline in revision 4469.
  • Revision ID: john@arbash-meinel.com-20090602195624-utljsyz0qgmq63lg
Add a chunks_to_gzip function.
This allows the _record_to_data code to build up a list of chunks,
rather than requiring a single string.
It should be ~ the same performance when using a single string, since
we are only adding a for() loop over the chunks and an if check.
We could possibly just remove the if check and not worry about adding
some empty strings in there.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005-2011 Canonical Ltd
 
1
# Copyright (C) 2006, 2008 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
15
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
16
 
17
17
 
 
18
# TODO: probably should say which arguments are candidates for glob
 
19
# expansion on windows and do that at the command level.
 
20
 
18
21
# TODO: Define arguments by objects, rather than just using names.
19
22
# Those objects can specify the expected type of the argument, which
20
23
# would help with validation and shell completion.  They could also provide
22
25
 
23
26
# TODO: Specific "examples" property on commands for consistent formatting.
24
27
 
 
28
# TODO: "--profile=cum", to change sort order.  Is there any value in leaving
 
29
# the profile output behind so it can be interactively examined?
 
30
 
25
31
import os
26
32
import sys
27
33
 
28
34
from bzrlib.lazy_import import lazy_import
29
35
lazy_import(globals(), """
 
36
import codecs
30
37
import errno
31
38
import threading
 
39
from warnings import warn
32
40
 
33
41
import bzrlib
34
42
from bzrlib import (
35
 
    cleanup,
36
 
    cmdline,
37
43
    debug,
38
44
    errors,
39
 
    i18n,
40
45
    option,
41
46
    osutils,
42
47
    trace,
43
 
    ui,
 
48
    win32utils,
44
49
    )
45
50
""")
46
51
 
47
 
from bzrlib.hooks import Hooks
48
 
from bzrlib.i18n import gettext
49
 
# Compatibility - Option used to be in commands.
 
52
from bzrlib import registry
 
53
# Compatibility
 
54
from bzrlib.hooks import HookPoint, Hooks
50
55
from bzrlib.option import Option
51
 
from bzrlib.plugin import disable_plugins, load_plugins
52
 
from bzrlib import registry
53
 
from bzrlib.symbol_versioning import (
54
 
    deprecated_function,
55
 
    deprecated_in,
56
 
    deprecated_method,
57
 
    )
58
56
 
59
57
 
60
58
class CommandInfo(object):
71
69
 
72
70
 
73
71
class CommandRegistry(registry.Registry):
74
 
    """Special registry mapping command names to command classes.
75
 
    
76
 
    :ivar overridden_registry: Look in this registry for commands being
77
 
        overridden by this registry.  This can be used to tell plugin commands
78
 
        about the builtin they're decorating.
79
 
    """
80
 
 
81
 
    def __init__(self):
82
 
        registry.Registry.__init__(self)
83
 
        self.overridden_registry = None
84
 
        # map from aliases to the real command that implements the name
85
 
        self._alias_dict = {}
86
 
 
87
 
    def get(self, command_name):
88
 
        real_name = self._alias_dict.get(command_name, command_name)
89
 
        return registry.Registry.get(self, real_name)
90
72
 
91
73
    @staticmethod
92
74
    def _get_name(command_name):
108
90
        try:
109
91
            previous = self.get(k_unsquished)
110
92
        except KeyError:
111
 
            previous = None
112
 
            if self.overridden_registry:
113
 
                try:
114
 
                    previous = self.overridden_registry.get(k_unsquished)
115
 
                except KeyError:
116
 
                    pass
 
93
            previous = _builtin_commands().get(k_unsquished)
117
94
        info = CommandInfo.from_command(cmd)
118
95
        try:
119
96
            registry.Registry.register(self, k_unsquished, cmd,
120
97
                                       override_existing=decorate, info=info)
121
98
        except KeyError:
122
 
            trace.warning('Two plugins defined the same command: %r' % k)
123
 
            trace.warning('Not loading the one in %r' %
124
 
                sys.modules[cmd.__module__])
125
 
            trace.warning('Previously this command was registered from %r' %
126
 
                sys.modules[previous.__module__])
127
 
        for a in cmd.aliases:
128
 
            self._alias_dict[a] = k_unsquished
 
99
            trace.log_error('Two plugins defined the same command: %r' % k)
 
100
            trace.log_error('Not loading the one in %r' %
 
101
                            sys.modules[cmd.__module__])
 
102
            trace.log_error('Previously this command was registered from %r' %
 
103
                            sys.modules[previous.__module__])
129
104
        return previous
130
105
 
131
106
    def register_lazy(self, command_name, aliases, module_name):
138
113
        key = self._get_name(command_name)
139
114
        registry.Registry.register_lazy(self, key, module_name, command_name,
140
115
                                        info=CommandInfo(aliases))
141
 
        for a in aliases:
142
 
            self._alias_dict[a] = key
143
116
 
144
117
 
145
118
plugin_cmds = CommandRegistry()
146
 
builtin_command_registry = CommandRegistry()
147
 
plugin_cmds.overridden_registry = builtin_command_registry
148
119
 
149
120
 
150
121
def register_command(cmd, decorate=False):
151
 
    """Register a plugin command.
152
 
 
153
 
    Should generally be avoided in favor of lazy registration. 
154
 
    """
155
122
    global plugin_cmds
156
123
    return plugin_cmds.register(cmd, decorate)
157
124
 
164
131
    return cmd[4:].replace('_','-')
165
132
 
166
133
 
167
 
def _register_builtin_commands():
168
 
    if builtin_command_registry.keys():
169
 
        # only load once
170
 
        return
 
134
def _builtin_commands():
171
135
    import bzrlib.builtins
172
 
    for cmd_class in _scan_module_for_commands(bzrlib.builtins).values():
173
 
        builtin_command_registry.register(cmd_class)
174
 
    bzrlib.builtins._register_lazy_builtins()
175
 
 
176
 
 
177
 
def _scan_module_for_commands(module):
178
136
    r = {}
179
 
    for name, obj in module.__dict__.iteritems():
 
137
    builtins = bzrlib.builtins.__dict__
 
138
    for name in builtins:
180
139
        if name.startswith("cmd_"):
181
140
            real_name = _unsquish_command_name(name)
182
 
            r[real_name] = obj
 
141
            r[real_name] = builtins[name]
183
142
    return r
184
143
 
185
144
 
186
 
def _list_bzr_commands(names):
187
 
    """Find commands from bzr's core and plugins.
188
 
    
189
 
    This is not the public interface, just the default hook called by all_command_names.
190
 
    """
191
 
    # to eliminate duplicates
192
 
    names.update(builtin_command_names())
193
 
    names.update(plugin_command_names())
194
 
    return names
195
 
 
196
 
 
197
 
def all_command_names():
198
 
    """Return a set of all command names."""
199
 
    names = set()
200
 
    for hook in Command.hooks['list_commands']:
201
 
        names = hook(names)
202
 
        if names is None:
203
 
            raise AssertionError(
204
 
                'hook %s returned None' % Command.hooks.get_hook_name(hook))
205
 
    return names
206
 
 
207
 
 
208
145
def builtin_command_names():
209
 
    """Return list of builtin command names.
210
 
    
211
 
    Use of all_command_names() is encouraged rather than builtin_command_names
212
 
    and/or plugin_command_names.
213
 
    """
214
 
    _register_builtin_commands()
215
 
    return builtin_command_registry.keys()
 
146
    """Return list of builtin command names."""
 
147
    return _builtin_commands().keys()
216
148
 
217
149
 
218
150
def plugin_command_names():
219
 
    """Returns command names from commands registered by plugins."""
220
151
    return plugin_cmds.keys()
221
152
 
222
153
 
 
154
def _get_cmd_dict(plugins_override=True):
 
155
    """Return name->class mapping for all commands."""
 
156
    d = _builtin_commands()
 
157
    if plugins_override:
 
158
        d.update(plugin_cmds.iteritems())
 
159
    return d
 
160
 
 
161
 
 
162
def get_all_cmds(plugins_override=True):
 
163
    """Return canonical name and class for all registered commands."""
 
164
    for k, v in _get_cmd_dict(plugins_override=plugins_override).iteritems():
 
165
        yield k,v
 
166
 
 
167
 
223
168
def get_cmd_object(cmd_name, plugins_override=True):
224
 
    """Return the command object for a command.
 
169
    """Return the canonical name and command class for a command.
225
170
 
226
171
    plugins_override
227
172
        If true, plugin commands can override builtins.
228
173
    """
229
174
    try:
230
 
        return _get_cmd_object(cmd_name, plugins_override)
 
175
        cmd = _get_cmd_object(cmd_name, plugins_override)
 
176
        # Allow plugins to extend commands
 
177
        for hook in Command.hooks['extend_command']:
 
178
            hook(cmd)
 
179
        return cmd
231
180
    except KeyError:
232
181
        raise errors.BzrCommandError('unknown command "%s"' % cmd_name)
233
182
 
234
183
 
235
 
def _get_cmd_object(cmd_name, plugins_override=True, check_missing=True):
236
 
    """Get a command object.
 
184
def _get_cmd_object(cmd_name, plugins_override=True):
 
185
    """Worker for get_cmd_object which raises KeyError rather than BzrCommandError."""
 
186
    from bzrlib.externalcommand import ExternalCommand
237
187
 
238
 
    :param cmd_name: The name of the command.
239
 
    :param plugins_override: Allow plugins to override builtins.
240
 
    :param check_missing: Look up commands not found in the regular index via
241
 
        the get_missing_command hook.
242
 
    :return: A Command object instance
243
 
    :raises KeyError: If no command is found.
244
 
    """
245
188
    # We want only 'ascii' command names, but the user may have typed
246
189
    # in a Unicode name. In that case, they should just get a
247
190
    # 'command not found' error later.
248
191
    # In the future, we may actually support Unicode command names.
249
 
    cmd = None
250
 
    # Get a command
251
 
    for hook in Command.hooks['get_command']:
252
 
        cmd = hook(cmd, cmd_name)
253
 
        if cmd is not None and not plugins_override and not cmd.plugin_name():
254
 
            # We've found a non-plugin command, don't permit it to be
255
 
            # overridden.
256
 
            break
257
 
    if cmd is None and check_missing:
258
 
        for hook in Command.hooks['get_missing_command']:
259
 
            cmd = hook(cmd_name)
260
 
            if cmd is not None:
261
 
                break
262
 
    if cmd is None:
263
 
        # No command found.
264
 
        raise KeyError
265
 
    # Allow plugins to extend commands
266
 
    for hook in Command.hooks['extend_command']:
267
 
        hook(cmd)
268
 
    if getattr(cmd, 'invoked_as', None) is None:
269
 
        cmd.invoked_as = cmd_name
270
 
    return cmd
271
 
 
272
 
 
273
 
def _try_plugin_provider(cmd_name):
274
 
    """Probe for a plugin provider having cmd_name."""
275
 
    try:
276
 
        plugin_metadata, provider = probe_for_provider(cmd_name)
277
 
        raise errors.CommandAvailableInPlugin(cmd_name,
278
 
            plugin_metadata, provider)
279
 
    except errors.NoPluginAvailable:
280
 
        pass
281
 
 
282
 
 
283
 
def probe_for_provider(cmd_name):
284
 
    """Look for a provider for cmd_name.
285
 
 
286
 
    :param cmd_name: The command name.
287
 
    :return: plugin_metadata, provider for getting cmd_name.
288
 
    :raises NoPluginAvailable: When no provider can supply the plugin.
289
 
    """
290
 
    # look for providers that provide this command but aren't installed
291
 
    for provider in command_providers_registry:
 
192
 
 
193
    # first look up this command under the specified name
 
194
    if plugins_override:
292
195
        try:
293
 
            return provider.plugin_for_command(cmd_name), provider
294
 
        except errors.NoPluginAvailable:
 
196
            return plugin_cmds.get(cmd_name)()
 
197
        except KeyError:
295
198
            pass
296
 
    raise errors.NoPluginAvailable(cmd_name)
297
 
 
298
 
 
299
 
def _get_bzr_command(cmd_or_None, cmd_name):
300
 
    """Get a command from bzr's core."""
 
199
    cmds = _get_cmd_dict(plugins_override=False)
301
200
    try:
302
 
        cmd_class = builtin_command_registry.get(cmd_name)
 
201
        return cmds[cmd_name]()
303
202
    except KeyError:
304
203
        pass
305
 
    else:
306
 
        return cmd_class()
307
 
    return cmd_or_None
308
 
 
309
 
 
310
 
def _get_external_command(cmd_or_None, cmd_name):
311
 
    """Lookup a command that is a shell script."""
312
 
    # Only do external command lookups when no command is found so far.
313
 
    if cmd_or_None is not None:
314
 
        return cmd_or_None
315
 
    from bzrlib.externalcommand import ExternalCommand
 
204
    if plugins_override:
 
205
        for key in plugin_cmds.keys():
 
206
            info = plugin_cmds.get_info(key)
 
207
            if cmd_name in info.aliases:
 
208
                return plugin_cmds.get(key)()
 
209
    # look for any command which claims this as an alias
 
210
    for real_cmd_name, cmd_class in cmds.iteritems():
 
211
        if cmd_name in cmd_class.aliases:
 
212
            return cmd_class()
 
213
 
316
214
    cmd_obj = ExternalCommand.find_command(cmd_name)
317
215
    if cmd_obj:
318
216
        return cmd_obj
319
217
 
320
 
 
321
 
def _get_plugin_command(cmd_or_None, cmd_name):
322
 
    """Get a command from bzr's plugins."""
323
 
    try:
324
 
        return plugin_cmds.get(cmd_name)()
325
 
    except KeyError:
326
 
        pass
327
 
    for key in plugin_cmds.keys():
328
 
        info = plugin_cmds.get_info(key)
329
 
        if cmd_name in info.aliases:
330
 
            return plugin_cmds.get(key)()
331
 
    return cmd_or_None
 
218
    # look for plugins that provide this command but aren't installed
 
219
    for provider in command_providers_registry:
 
220
        try:
 
221
            plugin_metadata = provider.plugin_for_command(cmd_name)
 
222
        except errors.NoPluginAvailable:
 
223
            pass
 
224
        else:
 
225
            raise errors.CommandAvailableInPlugin(cmd_name,
 
226
                                                  plugin_metadata, provider)
 
227
    raise KeyError
332
228
 
333
229
 
334
230
class Command(object):
349
245
    summary, then a complete description of the command.  A grammar
350
246
    description will be inserted.
351
247
 
352
 
    :cvar aliases: Other accepted names for this command.
353
 
 
354
 
    :cvar takes_args: List of argument forms, marked with whether they are
355
 
        optional, repeated, etc.  Examples::
356
 
 
357
 
            ['to_location', 'from_branch?', 'file*']
358
 
 
359
 
        * 'to_location' is required
360
 
        * 'from_branch' is optional
361
 
        * 'file' can be specified 0 or more times
362
 
 
363
 
    :cvar takes_options: List of options that may be given for this command.
364
 
        These can be either strings, referring to globally-defined options, or
365
 
        option objects.  Retrieve through options().
366
 
 
367
 
    :cvar hidden: If true, this command isn't advertised.  This is typically
 
248
    aliases
 
249
        Other accepted names for this command.
 
250
 
 
251
    takes_args
 
252
        List of argument forms, marked with whether they are optional,
 
253
        repeated, etc.
 
254
 
 
255
                Examples:
 
256
 
 
257
                ['to_location', 'from_branch?', 'file*']
 
258
 
 
259
                'to_location' is required
 
260
                'from_branch' is optional
 
261
                'file' can be specified 0 or more times
 
262
 
 
263
    takes_options
 
264
        List of options that may be given for this command.  These can
 
265
        be either strings, referring to globally-defined options,
 
266
        or option objects.  Retrieve through options().
 
267
 
 
268
    hidden
 
269
        If true, this command isn't advertised.  This is typically
368
270
        for commands intended for expert users.
369
271
 
370
 
    :cvar encoding_type: Command objects will get a 'outf' attribute, which has
371
 
        been setup to properly handle encoding of unicode strings.
372
 
        encoding_type determines what will happen when characters cannot be
373
 
        encoded:
374
 
 
375
 
        * strict - abort if we cannot decode
376
 
        * replace - put in a bogus character (typically '?')
377
 
        * exact - do not encode sys.stdout
378
 
 
379
 
        NOTE: by default on Windows, sys.stdout is opened as a text stream,
380
 
        therefore LF line-endings are converted to CRLF.  When a command uses
381
 
        encoding_type = 'exact', then sys.stdout is forced to be a binary
382
 
        stream, and line-endings will not mangled.
383
 
 
384
 
    :cvar invoked_as:
385
 
        A string indicating the real name under which this command was
386
 
        invoked, before expansion of aliases.
387
 
        (This may be None if the command was constructed and run in-process.)
 
272
    encoding_type
 
273
        Command objects will get a 'outf' attribute, which has been
 
274
        setup to properly handle encoding of unicode strings.
 
275
        encoding_type determines what will happen when characters cannot
 
276
        be encoded
 
277
            strict - abort if we cannot decode
 
278
            replace - put in a bogus character (typically '?')
 
279
            exact - do not encode sys.stdout
 
280
 
 
281
            NOTE: by default on Windows, sys.stdout is opened as a text
 
282
            stream, therefore LF line-endings are converted to CRLF.
 
283
            When a command uses encoding_type = 'exact', then
 
284
            sys.stdout is forced to be a binary stream, and line-endings
 
285
            will not mangled.
388
286
 
389
287
    :cvar hooks: An instance of CommandHooks.
390
 
 
391
 
    :cvar __doc__: The help shown by 'bzr help command' for this command.
392
 
        This is set by assigning explicitly to __doc__ so that -OO can
393
 
        be used::
394
 
 
395
 
            class Foo(Command):
396
 
                __doc__ = "My help goes here"
397
288
    """
398
289
    aliases = []
399
290
    takes_args = []
400
291
    takes_options = []
401
292
    encoding_type = 'strict'
402
 
    invoked_as = None
403
 
    l10n = True
404
293
 
405
294
    hidden = False
406
295
 
407
296
    def __init__(self):
408
297
        """Construct an instance of this command."""
 
298
        if self.__doc__ == Command.__doc__:
 
299
            warn("No help message set for %r" % self)
409
300
        # List of standard options directly supported
410
301
        self.supported_std_options = []
411
 
        self._setup_run()
412
 
 
413
 
    def add_cleanup(self, cleanup_func, *args, **kwargs):
414
 
        """Register a function to call after self.run returns or raises.
415
 
 
416
 
        Functions will be called in LIFO order.
417
 
        """
418
 
        self._operation.add_cleanup(cleanup_func, *args, **kwargs)
419
 
 
420
 
    def cleanup_now(self):
421
 
        """Execute and empty pending cleanup functions immediately.
422
 
 
423
 
        After cleanup_now all registered cleanups are forgotten.  add_cleanup
424
 
        may be called again after cleanup_now; these cleanups will be called
425
 
        after self.run returns or raises (or when cleanup_now is next called).
426
 
 
427
 
        This is useful for releasing expensive or contentious resources (such
428
 
        as write locks) before doing further work that does not require those
429
 
        resources (such as writing results to self.outf). Note though, that
430
 
        as it releases all resources, this may release locks that the command
431
 
        wants to hold, so use should be done with care.
432
 
        """
433
 
        self._operation.cleanup_now()
 
302
 
 
303
    def _maybe_expand_globs(self, file_list):
 
304
        """Glob expand file_list if the platform does not do that itself.
 
305
 
 
306
        :return: A possibly empty list of unicode paths.
 
307
 
 
308
        Introduced in bzrlib 0.18.
 
309
        """
 
310
        if not file_list:
 
311
            file_list = []
 
312
        if sys.platform == 'win32':
 
313
            file_list = win32utils.glob_expand(file_list)
 
314
        return list(file_list)
434
315
 
435
316
    def _usage(self):
436
317
        """Return single-line grammar for this command.
465
346
            usage help (e.g. Purpose, Usage, Options) with a
466
347
            message explaining how to obtain full help.
467
348
        """
468
 
        if self.l10n and not i18n.installed():
469
 
            i18n.install()  # Install i18n only for get_help_text for now.
470
349
        doc = self.help()
471
 
        if doc:
472
 
            # Note: If self.gettext() translates ':Usage:\n', the section will
473
 
            # be shown after "Description" section and we don't want to
474
 
            # translate the usage string.
475
 
            # Though, bzr export-pot don't exports :Usage: section and it must
476
 
            # not be translated.
477
 
            doc = self.gettext(doc)
478
 
        else:
479
 
            doc = gettext("No help for this command.")
 
350
        if doc is None:
 
351
            raise NotImplementedError("sorry, no detailed help yet for %r" % self.name())
480
352
 
481
353
        # Extract the summary (purpose) and sections out from the text
482
354
        purpose,sections,order = self._get_help_parts(doc)
489
361
 
490
362
        # The header is the purpose and usage
491
363
        result = ""
492
 
        result += gettext(':Purpose: %s\n') % (purpose,)
 
364
        result += ':Purpose: %s\n' % purpose
493
365
        if usage.find('\n') >= 0:
494
 
            result += gettext(':Usage:\n%s\n') % (usage,)
 
366
            result += ':Usage:\n%s\n' % usage
495
367
        else:
496
 
            result += gettext(':Usage:   %s\n') % (usage,)
 
368
            result += ':Usage:   %s\n' % usage
497
369
        result += '\n'
498
370
 
499
371
        # Add the options
500
 
        #
501
 
        # XXX: optparse implicitly rewraps the help, and not always perfectly,
502
 
        # so we get <https://bugs.launchpad.net/bzr/+bug/249908>.  -- mbp
503
 
        # 20090319
504
 
        parser = option.get_optparser(self.options())
505
 
        options = parser.format_option_help()
506
 
        # FIXME: According to the spec, ReST option lists actually don't
507
 
        # support options like --1.14 so that causes syntax errors (in Sphinx
508
 
        # at least).  As that pattern always appears in the commands that
509
 
        # break, we trap on that and then format that block of 'format' options
510
 
        # as a literal block. We use the most recent format still listed so we
511
 
        # don't have to do that too often -- vila 20110514
512
 
        if not plain and options.find('  --1.14  ') != -1:
513
 
            options = options.replace(' format:\n', ' format::\n\n', 1)
 
372
        options = option.get_optparser(self.options()).format_option_help()
514
373
        if options.startswith('Options:'):
515
 
            result += gettext(':Options:%s') % (options[len('options:'):],)
 
374
            result += ':' + options
 
375
        elif options.startswith('options:'):
 
376
            # Python 2.4 version of optparse
 
377
            result += ':Options:' + options[len('options:'):]
516
378
        else:
517
379
            result += options
518
380
        result += '\n'
523
385
            if sections.has_key(None):
524
386
                text = sections.pop(None)
525
387
                text = '\n  '.join(text.splitlines())
526
 
                result += gettext(':Description:\n  %s\n\n') % (text,)
 
388
                result += ':%s:\n  %s\n\n' % ('Description',text)
527
389
 
528
390
            # Add the custom sections (e.g. Examples). Note that there's no need
529
391
            # to indent these as they must be indented already in the source.
530
392
            if sections:
531
393
                for label in order:
532
 
                    if label in sections:
533
 
                        result += ':%s:\n%s\n' % (label, sections[label])
 
394
                    if sections.has_key(label):
 
395
                        result += ':%s:\n%s\n' % (label,sections[label])
534
396
                result += '\n'
535
397
        else:
536
 
            result += (gettext("See bzr help %s for more details and examples.\n\n")
 
398
            result += ("See bzr help %s for more details and examples.\n\n"
537
399
                % self.name())
538
400
 
539
401
        # Add the aliases, source (plug-in) and see also links, if any
540
402
        if self.aliases:
541
 
            result += gettext(':Aliases:  ')
 
403
            result += ':Aliases:  '
542
404
            result += ', '.join(self.aliases) + '\n'
543
405
        plugin_name = self.plugin_name()
544
406
        if plugin_name is not None:
545
 
            result += gettext(':From:     plugin "%s"\n') % plugin_name
 
407
            result += ':From:     plugin "%s"\n' % plugin_name
546
408
        see_also = self.get_see_also(additional_see_also)
547
409
        if see_also:
548
410
            if not plain and see_also_as_links:
553
415
                        # so don't create a real link
554
416
                        see_also_links.append(item)
555
417
                    else:
556
 
                        # Use a Sphinx link for this entry
557
 
                        link_text = gettext(":doc:`%s <%s-help>`") % (item, item)
558
 
                        see_also_links.append(link_text)
 
418
                        # Use a reST link for this entry
 
419
                        see_also_links.append("`%s`_" % (item,))
559
420
                see_also = see_also_links
560
 
            result += gettext(':See also: %s') % ', '.join(see_also) + '\n'
 
421
            result += ':See also: '
 
422
            result += ', '.join(see_also) + '\n'
561
423
 
562
424
        # If this will be rendered as plain text, convert it
563
425
        if plain:
638
500
 
639
501
    def _setup_outf(self):
640
502
        """Return a file linked to stdout, which has proper encoding."""
641
 
        self.outf = ui.ui_factory.make_output_stream(
642
 
            encoding_type=self.encoding_type)
 
503
        # Originally I was using self.stdout, but that looks
 
504
        # *way* too much like sys.stdout
 
505
        if self.encoding_type == 'exact':
 
506
            # force sys.stdout to be binary stream on win32
 
507
            if sys.platform == 'win32':
 
508
                fileno = getattr(sys.stdout, 'fileno', None)
 
509
                if fileno:
 
510
                    import msvcrt
 
511
                    msvcrt.setmode(fileno(), os.O_BINARY)
 
512
            self.outf = sys.stdout
 
513
            return
 
514
 
 
515
        output_encoding = osutils.get_terminal_encoding()
 
516
 
 
517
        self.outf = codecs.getwriter(output_encoding)(sys.stdout,
 
518
                        errors=self.encoding_type)
 
519
        # For whatever reason codecs.getwriter() does not advertise its encoding
 
520
        # it just returns the encoding of the wrapped file, which is completely
 
521
        # bogus. So set the attribute, so we can find the correct encoding later.
 
522
        self.outf.encoding = output_encoding
643
523
 
644
524
    def run_argv_aliases(self, argv, alias_argv=None):
645
525
        """Parse the command line and run with extra aliases in alias_argv."""
 
526
        if argv is None:
 
527
            warn("Passing None for [] is deprecated from bzrlib 0.10",
 
528
                 DeprecationWarning, stacklevel=2)
 
529
            argv = []
646
530
        args, opts = parse_args(self, argv, alias_argv)
647
 
        self._setup_outf()
648
531
 
649
532
        # Process the standard options
650
533
        if 'help' in opts:  # e.g. bzr add --help
651
 
            self.outf.write(self.get_help_text())
 
534
            sys.stdout.write(self.get_help_text())
652
535
            return 0
653
536
        if 'usage' in opts:  # e.g. bzr add --usage
654
 
            self.outf.write(self.get_help_text(verbose=False))
 
537
            sys.stdout.write(self.get_help_text(verbose=False))
655
538
            return 0
656
539
        trace.set_verbosity_level(option._verbosity_level)
657
540
        if 'verbose' in self.supported_std_options:
672
555
        all_cmd_args = cmdargs.copy()
673
556
        all_cmd_args.update(cmdopts)
674
557
 
675
 
        try:
676
 
            return self.run(**all_cmd_args)
677
 
        finally:
678
 
            # reset it, so that other commands run in the same process won't
679
 
            # inherit state. Before we reset it, log any activity, so that it
680
 
            # gets properly tracked.
681
 
            ui.ui_factory.log_transport_activity(
682
 
                display=('bytes' in debug.debug_flags))
683
 
            trace.set_verbosity_level(0)
684
 
 
685
 
    def _setup_run(self):
686
 
        """Wrap the defined run method on self with a cleanup.
687
 
 
688
 
        This is called by __init__ to make the Command be able to be run
689
 
        by just calling run(), as it could be before cleanups were added.
690
 
 
691
 
        If a different form of cleanups are in use by your Command subclass,
692
 
        you can override this method.
693
 
        """
694
 
        class_run = self.run
695
 
        def run(*args, **kwargs):
696
 
            self._operation = cleanup.OperationWithCleanups(class_run)
697
 
            try:
698
 
                return self._operation.run_simple(*args, **kwargs)
699
 
            finally:
700
 
                del self._operation
701
 
        self.run = run
 
558
        self._setup_outf()
 
559
 
 
560
        return self.run(**all_cmd_args)
702
561
 
703
562
    def run(self):
704
563
        """Actually run the command.
709
568
        Return 0 or None if the command was successful, or a non-zero
710
569
        shell error code if not.  It's OK for this method to allow
711
570
        an exception to raise up.
712
 
 
713
 
        This method is automatically wrapped by Command.__init__ with a 
714
 
        cleanup operation, stored as self._operation. This can be used
715
 
        via self.add_cleanup to perform automatic cleanups at the end of
716
 
        run().
717
 
 
718
 
        The argument for run are assembled by introspection. So for instance,
719
 
        if your command takes an argument files, you would declare::
720
 
 
721
 
            def run(self, files=None):
722
 
                pass
723
571
        """
724
572
        raise NotImplementedError('no implementation of command %r'
725
573
                                  % self.name())
731
579
            return None
732
580
        return getdoc(self)
733
581
 
734
 
    def gettext(self, message):
735
 
        """Returns the gettext function used to translate this command's help.
736
 
 
737
 
        Commands provided by plugins should override this to use their
738
 
        own i18n system.
739
 
        """
740
 
        return i18n.gettext_per_paragraph(message)
741
 
 
742
582
    def name(self):
743
 
        """Return the canonical name for this command.
744
 
 
745
 
        The name under which it was actually invoked is available in invoked_as.
746
 
        """
747
583
        return _unsquish_command_name(self.__class__.__name__)
748
584
 
749
585
    def plugin_name(self):
767
603
        These are all empty initially, because by default nothing should get
768
604
        notified.
769
605
        """
770
 
        Hooks.__init__(self, "bzrlib.commands", "Command.hooks")
771
 
        self.add_hook('extend_command',
 
606
        Hooks.__init__(self)
 
607
        self.create_hook(HookPoint('extend_command',
772
608
            "Called after creating a command object to allow modifications "
773
609
            "such as adding or removing options, docs etc. Called with the "
774
 
            "new bzrlib.commands.Command object.", (1, 13))
775
 
        self.add_hook('get_command',
776
 
            "Called when creating a single command. Called with "
777
 
            "(cmd_or_None, command_name). get_command should either return "
778
 
            "the cmd_or_None parameter, or a replacement Command object that "
779
 
            "should be used for the command. Note that the Command.hooks "
780
 
            "hooks are core infrastructure. Many users will prefer to use "
781
 
            "bzrlib.commands.register_command or plugin_cmds.register_lazy.",
782
 
            (1, 17))
783
 
        self.add_hook('get_missing_command',
784
 
            "Called when creating a single command if no command could be "
785
 
            "found. Called with (command_name). get_missing_command should "
786
 
            "either return None, or a Command object to be used for the "
787
 
            "command.", (1, 17))
788
 
        self.add_hook('list_commands',
789
 
            "Called when enumerating commands. Called with a set of "
790
 
            "cmd_name strings for all the commands found so far. This set "
791
 
            " is safe to mutate - e.g. to remove a command. "
792
 
            "list_commands should return the updated set of command names.",
793
 
            (1, 17))
 
610
            "new bzrlib.commands.Command object.", (1, 13), None))
794
611
 
795
612
Command.hooks = CommandHooks()
796
613
 
810
627
    else:
811
628
        args = argv
812
629
 
813
 
    # for python 2.5 and later, optparse raises this exception if a non-ascii
814
 
    # option name is given.  See http://bugs.python.org/issue2931
815
 
    try:
816
 
        options, args = parser.parse_args(args)
817
 
    except UnicodeEncodeError,e:
818
 
        raise errors.BzrCommandError('Only ASCII permitted in option names')
819
 
 
 
630
    options, args = parser.parse_args(args)
820
631
    opts = dict([(k, v) for k, v in options.__dict__.iteritems() if
821
632
                 v is not option.OptionParser.DEFAULT_VALUE])
822
633
    return args, opts
950
761
 
951
762
def apply_lsprofiled(filename, the_callable, *args, **kwargs):
952
763
    from bzrlib.lsprof import profile
953
 
    ret, stats = profile(exception_to_return_code, the_callable,
954
 
                         *args, **kwargs)
 
764
    ret, stats = profile(exception_to_return_code, the_callable, *args, **kwargs)
955
765
    stats.sort()
956
766
    if filename is None:
957
767
        stats.pprint()
961
771
    return ret
962
772
 
963
773
 
 
774
def shlex_split_unicode(unsplit):
 
775
    import shlex
 
776
    return [u.decode('utf-8') for u in shlex.split(unsplit.encode('utf-8'))]
 
777
 
 
778
 
964
779
def get_alias(cmd, config=None):
965
780
    """Return an expanded alias, or None if no alias exists.
966
781
 
976
791
        config = bzrlib.config.GlobalConfig()
977
792
    alias = config.get_alias(cmd)
978
793
    if (alias):
979
 
        return cmdline.split(alias)
 
794
        return shlex_split_unicode(alias)
980
795
    return None
981
796
 
982
797
 
983
 
def run_bzr(argv, load_plugins=load_plugins, disable_plugins=disable_plugins):
 
798
def run_bzr(argv):
984
799
    """Execute a command.
985
800
 
986
 
    :param argv: The command-line arguments, without the program name from
987
 
        argv[0] These should already be decoded. All library/test code calling
988
 
        run_bzr should be passing valid strings (don't need decoding).
989
 
    :param load_plugins: What function to call when triggering plugin loading.
990
 
        This function should take no arguments and cause all plugins to be
991
 
        loaded.
992
 
    :param disable_plugins: What function to call when disabling plugin
993
 
        loading. This function should take no arguments and cause all plugin
994
 
        loading to be prohibited (so that code paths in your application that
995
 
        know about some plugins possibly being present will fail to import
996
 
        those plugins even if they are installed.)
997
 
    :return: Returns a command exit code or raises an exception.
 
801
    argv
 
802
       The command-line arguments, without the program name from argv[0]
 
803
       These should already be decoded. All library/test code calling
 
804
       run_bzr should be passing valid strings (don't need decoding).
 
805
 
 
806
    Returns a command status or raises an exception.
998
807
 
999
808
    Special master options: these must come before the command because
1000
809
    they control how the command is interpreted.
1017
826
 
1018
827
    --coverage
1019
828
        Generate line coverage report in the specified directory.
1020
 
 
1021
 
    --concurrency
1022
 
        Specify the number of processes that can be run concurrently (selftest).
1023
829
    """
1024
 
    trace.mutter("bazaar version: " + bzrlib.__version__)
1025
 
    argv = _specified_or_unicode_argv(argv)
 
830
    argv = list(argv)
1026
831
    trace.mutter("bzr arguments: %r", argv)
1027
832
 
1028
 
    opt_lsprof = opt_profile = opt_no_plugins = opt_builtin = \
1029
 
            opt_no_l10n = opt_no_aliases = False
 
833
    opt_lsprof = opt_profile = opt_no_plugins = opt_builtin =  \
 
834
                opt_no_aliases = False
1030
835
    opt_lsprof_file = opt_coverage_dir = None
1031
836
 
1032
837
    # --no-plugins is handled specially at a very early stage. We need
1049
854
            opt_no_plugins = True
1050
855
        elif a == '--no-aliases':
1051
856
            opt_no_aliases = True
1052
 
        elif a == '--no-l10n':
1053
 
            opt_no_l10n = True
1054
857
        elif a == '--builtin':
1055
858
            opt_builtin = True
1056
 
        elif a == '--concurrency':
1057
 
            os.environ['BZR_CONCURRENCY'] = argv[i + 1]
1058
 
            i += 1
1059
859
        elif a == '--coverage':
1060
860
            opt_coverage_dir = argv[i + 1]
1061
861
            i += 1
1062
 
        elif a == '--profile-imports':
1063
 
            pass # already handled in startup script Bug #588277
1064
862
        elif a.startswith('-D'):
1065
863
            debug.debug_flags.add(a[2:])
1066
864
        else:
1069
867
 
1070
868
    debug.set_debug_flags_from_config()
1071
869
 
 
870
    argv = argv_copy
 
871
    if (not argv):
 
872
        from bzrlib.builtins import cmd_help
 
873
        cmd_help().run_argv_aliases([])
 
874
        return 0
 
875
 
 
876
    if argv[0] == '--version':
 
877
        from bzrlib.builtins import cmd_version
 
878
        cmd_version().run_argv_aliases([])
 
879
        return 0
 
880
 
1072
881
    if not opt_no_plugins:
 
882
        from bzrlib.plugin import load_plugins
1073
883
        load_plugins()
1074
884
    else:
 
885
        from bzrlib.plugin import disable_plugins
1075
886
        disable_plugins()
1076
887
 
1077
 
    argv = argv_copy
1078
 
    if (not argv):
1079
 
        get_cmd_object('help').run_argv_aliases([])
1080
 
        return 0
1081
 
 
1082
 
    if argv[0] == '--version':
1083
 
        get_cmd_object('version').run_argv_aliases([])
1084
 
        return 0
1085
 
 
1086
888
    alias_argv = None
1087
889
 
1088
890
    if not opt_no_aliases:
1089
891
        alias_argv = get_alias(argv[0])
1090
892
        if alias_argv:
 
893
            user_encoding = osutils.get_user_encoding()
 
894
            alias_argv = [a.decode(user_encoding) for a in alias_argv]
1091
895
            argv[0] = alias_argv.pop(0)
1092
896
 
1093
897
    cmd = argv.pop(0)
 
898
    # We want only 'ascii' command names, but the user may have typed
 
899
    # in a Unicode name. In that case, they should just get a
 
900
    # 'command not found' error later.
 
901
 
1094
902
    cmd_obj = get_cmd_object(cmd, plugins_override=not opt_builtin)
1095
 
    if opt_no_l10n:
1096
 
        cmd.l10n = False
1097
903
    run = cmd_obj.run_argv_aliases
1098
904
    run_argv = [argv, alias_argv]
1099
905
 
1116
922
            ret = apply_coveraged(opt_coverage_dir, run, *run_argv)
1117
923
        else:
1118
924
            ret = run(*run_argv)
 
925
        if 'memory' in debug.debug_flags:
 
926
            trace.debug_memory('Process status after command:', short=False)
1119
927
        return ret or 0
1120
928
    finally:
1121
929
        # reset, in case we may do other commands later within the same
1122
930
        # process. Commands that want to execute sub-commands must propagate
1123
931
        # --verbose in their own way.
1124
 
        if 'memory' in debug.debug_flags:
1125
 
            trace.debug_memory('Process status after command:', short=False)
1126
932
        option._verbosity_level = saved_verbosity_level
1127
933
 
1128
934
 
1146
952
    return ignore_pipe
1147
953
 
1148
954
 
1149
 
def install_bzr_command_hooks():
1150
 
    """Install the hooks to supply bzr's own commands."""
1151
 
    if _list_bzr_commands in Command.hooks["list_commands"]:
1152
 
        return
1153
 
    Command.hooks.install_named_hook("list_commands", _list_bzr_commands,
1154
 
        "bzr commands")
1155
 
    Command.hooks.install_named_hook("get_command", _get_bzr_command,
1156
 
        "bzr commands")
1157
 
    Command.hooks.install_named_hook("get_command", _get_plugin_command,
1158
 
        "bzr plugin commands")
1159
 
    Command.hooks.install_named_hook("get_command", _get_external_command,
1160
 
        "bzr external command lookup")
1161
 
    Command.hooks.install_named_hook("get_missing_command", _try_plugin_provider,
1162
 
        "bzr plugin-provider-db check")
1163
 
 
1164
 
 
1165
 
 
1166
 
def _specified_or_unicode_argv(argv):
1167
 
    # For internal or testing use, argv can be passed.  Otherwise, get it from
1168
 
    # the process arguments in a unicode-safe way.
 
955
def main(argv=None):
 
956
    """Main entry point of command-line interface.
 
957
 
 
958
    :param argv: list of unicode command-line arguments similar to sys.argv.
 
959
        argv[0] is script name usually, it will be ignored.
 
960
        Don't pass here sys.argv because this list contains plain strings
 
961
        and not unicode; pass None instead.
 
962
 
 
963
    :return: exit code of bzr command.
 
964
    """
 
965
    import bzrlib.ui
 
966
    bzrlib.ui.ui_factory = bzrlib.ui.make_ui_for_terminal(
 
967
        sys.stdin, sys.stdout, sys.stderr)
 
968
 
 
969
    # Is this a final release version? If so, we should suppress warnings
 
970
    if bzrlib.version_info[3] == 'final':
 
971
        from bzrlib import symbol_versioning
 
972
        symbol_versioning.suppress_deprecation_warnings(override=False)
1169
973
    if argv is None:
1170
 
        return osutils.get_unicode_argv()
 
974
        argv = osutils.get_unicode_argv()
1171
975
    else:
1172
976
        new_argv = []
1173
977
        try:
1174
978
            # ensure all arguments are unicode strings
1175
 
            for a in argv:
 
979
            for a in argv[1:]:
1176
980
                if isinstance(a, unicode):
1177
981
                    new_argv.append(a)
1178
982
                else:
1179
983
                    new_argv.append(a.decode('ascii'))
1180
984
        except UnicodeDecodeError:
1181
985
            raise errors.BzrError("argv should be list of unicode strings.")
1182
 
        return new_argv
1183
 
 
1184
 
 
1185
 
def main(argv=None):
1186
 
    """Main entry point of command-line interface.
1187
 
 
1188
 
    Typically `bzrlib.initialize` should be called first.
1189
 
 
1190
 
    :param argv: list of unicode command-line arguments similar to sys.argv.
1191
 
        argv[0] is script name usually, it will be ignored.
1192
 
        Don't pass here sys.argv because this list contains plain strings
1193
 
        and not unicode; pass None instead.
1194
 
 
1195
 
    :return: exit code of bzr command.
1196
 
    """
1197
 
    if argv is not None:
1198
 
        argv = argv[1:]
1199
 
    _register_builtin_commands()
 
986
        argv = new_argv
1200
987
    ret = run_bzr_catch_errors(argv)
1201
988
    trace.mutter("return code %d", ret)
1202
989
    return ret
1208
995
    This function assumed that that UI layer is setup, that symbol deprecations
1209
996
    are already applied, and that unicode decoding has already been performed on argv.
1210
997
    """
1211
 
    # done here so that they're covered for every test run
1212
 
    install_bzr_command_hooks()
1213
998
    return exception_to_return_code(run_bzr, argv)
1214
999
 
1215
1000
 
1219
1004
    This is used for the test suite, and might be useful for other programs
1220
1005
    that want to wrap the commandline interface.
1221
1006
    """
1222
 
    # done here so that they're covered for every test run
1223
 
    install_bzr_command_hooks()
1224
1007
    try:
1225
1008
        return run_bzr(argv)
1226
1009
    except Exception, e:
1248
1031
        if topic and topic.startswith(self.prefix):
1249
1032
            topic = topic[len(self.prefix):]
1250
1033
        try:
1251
 
            cmd = _get_cmd_object(topic, check_missing=False)
 
1034
            cmd = _get_cmd_object(topic)
1252
1035
        except KeyError:
1253
1036
            return []
1254
1037
        else:
1256
1039
 
1257
1040
 
1258
1041
class Provider(object):
1259
 
    """Generic class to be overriden by plugins"""
 
1042
    '''Generic class to be overriden by plugins'''
1260
1043
 
1261
1044
    def plugin_for_command(self, cmd_name):
1262
 
        """Takes a command and returns the information for that plugin
 
1045
        '''Takes a command and returns the information for that plugin
1263
1046
 
1264
1047
        :return: A dictionary with all the available information
1265
 
            for the requested plugin
1266
 
        """
 
1048
        for the requested plugin
 
1049
        '''
1267
1050
        raise NotImplementedError
1268
1051
 
1269
1052
 
1270
1053
class ProvidersRegistry(registry.Registry):
1271
 
    """This registry exists to allow other providers to exist"""
 
1054
    '''This registry exists to allow other providers to exist'''
1272
1055
 
1273
1056
    def __iter__(self):
1274
1057
        for key, provider in self.iteritems():
1275
1058
            yield provider
1276
1059
 
1277
1060
command_providers_registry = ProvidersRegistry()
 
1061
 
 
1062
 
 
1063
if __name__ == '__main__':
 
1064
    sys.exit(main(sys.argv))