~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/commands.py

  • Committer: Robert Collins
  • Date: 2010-05-06 07:48:22 UTC
  • mto: This revision was merged to the branch mainline in revision 5223.
  • Revision ID: robertc@robertcollins.net-20100506074822-0bsgf2j4h8jx0xkk
Added ``bzrlib.tests.matchers`` as a place to put matchers, along with
our first in-tree matcher. See the module docstring for details.
(Robert Collins)

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2006, 2008 Canonical Ltd
 
1
# Copyright (C) 2005-2010 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
15
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
16
 
17
17
 
18
 
# TODO: probably should say which arguments are candidates for glob
19
 
# expansion on windows and do that at the command level.
20
 
 
21
18
# TODO: Define arguments by objects, rather than just using names.
22
19
# Those objects can specify the expected type of the argument, which
23
20
# would help with validation and shell completion.  They could also provide
25
22
 
26
23
# TODO: Specific "examples" property on commands for consistent formatting.
27
24
 
28
 
# TODO: "--profile=cum", to change sort order.  Is there any value in leaving
29
 
# the profile output behind so it can be interactively examined?
30
 
 
31
25
import os
32
26
import sys
33
27
 
40
34
 
41
35
import bzrlib
42
36
from bzrlib import (
 
37
    cleanup,
 
38
    cmdline,
43
39
    debug,
44
40
    errors,
45
41
    option,
46
42
    osutils,
47
43
    trace,
 
44
    ui,
48
45
    win32utils,
49
46
    )
50
47
""")
52
49
from bzrlib.hooks import HookPoint, Hooks
53
50
# Compatibility - Option used to be in commands.
54
51
from bzrlib.option import Option
 
52
from bzrlib.plugin import disable_plugins, load_plugins
55
53
from bzrlib import registry
56
54
from bzrlib.symbol_versioning import (
57
55
    deprecated_function,
58
56
    deprecated_in,
59
 
    suppress_deprecation_warnings,
 
57
    deprecated_method,
60
58
    )
61
59
 
62
60
 
74
72
 
75
73
 
76
74
class CommandRegistry(registry.Registry):
 
75
    """Special registry mapping command names to command classes.
 
76
    
 
77
    :ivar overridden_registry: Look in this registry for commands being
 
78
        overridden by this registry.  This can be used to tell plugin commands
 
79
        about the builtin they're decorating.
 
80
    """
 
81
 
 
82
    def __init__(self):
 
83
        registry.Registry.__init__(self)
 
84
        self.overridden_registry = None
 
85
        # map from aliases to the real command that implements the name
 
86
        self._alias_dict = {}
 
87
 
 
88
    def get(self, command_name):
 
89
        real_name = self._alias_dict.get(command_name, command_name)
 
90
        return registry.Registry.get(self, real_name)
77
91
 
78
92
    @staticmethod
79
93
    def _get_name(command_name):
95
109
        try:
96
110
            previous = self.get(k_unsquished)
97
111
        except KeyError:
98
 
            previous = _builtin_commands().get(k_unsquished)
 
112
            previous = None
 
113
            if self.overridden_registry:
 
114
                try:
 
115
                    previous = self.overridden_registry.get(k_unsquished)
 
116
                except KeyError:
 
117
                    pass
99
118
        info = CommandInfo.from_command(cmd)
100
119
        try:
101
120
            registry.Registry.register(self, k_unsquished, cmd,
102
121
                                       override_existing=decorate, info=info)
103
122
        except KeyError:
104
 
            trace.log_error('Two plugins defined the same command: %r' % k)
105
 
            trace.log_error('Not loading the one in %r' %
106
 
                            sys.modules[cmd.__module__])
107
 
            trace.log_error('Previously this command was registered from %r' %
108
 
                            sys.modules[previous.__module__])
 
123
            trace.warning('Two plugins defined the same command: %r' % k)
 
124
            trace.warning('Not loading the one in %r' %
 
125
                sys.modules[cmd.__module__])
 
126
            trace.warning('Previously this command was registered from %r' %
 
127
                sys.modules[previous.__module__])
 
128
        for a in cmd.aliases:
 
129
            self._alias_dict[a] = k_unsquished
109
130
        return previous
110
131
 
111
132
    def register_lazy(self, command_name, aliases, module_name):
118
139
        key = self._get_name(command_name)
119
140
        registry.Registry.register_lazy(self, key, module_name, command_name,
120
141
                                        info=CommandInfo(aliases))
 
142
        for a in aliases:
 
143
            self._alias_dict[a] = key
121
144
 
122
145
 
123
146
plugin_cmds = CommandRegistry()
 
147
builtin_command_registry = CommandRegistry()
 
148
plugin_cmds.overridden_registry = builtin_command_registry
124
149
 
125
150
 
126
151
def register_command(cmd, decorate=False):
 
152
    """Register a plugin command.
 
153
 
 
154
    Should generally be avoided in favor of lazy registration. 
 
155
    """
127
156
    global plugin_cmds
128
157
    return plugin_cmds.register(cmd, decorate)
129
158
 
136
165
    return cmd[4:].replace('_','-')
137
166
 
138
167
 
 
168
@deprecated_function(deprecated_in((2, 2, 0)))
139
169
def _builtin_commands():
 
170
    """Return a dict of {name: cmd_class} for builtin commands.
 
171
 
 
172
    :deprecated: Use the builtin_command_registry registry instead
 
173
    """
 
174
    # return dict(name: cmd_class)
 
175
    return dict(builtin_command_registry.items())
 
176
 
 
177
 
 
178
def _register_builtin_commands():
 
179
    if builtin_command_registry.keys():
 
180
        # only load once
 
181
        return
140
182
    import bzrlib.builtins
141
 
    return _scan_module_for_commands(bzrlib.builtins)
 
183
    for cmd_class in _scan_module_for_commands(bzrlib.builtins).values():
 
184
        builtin_command_registry.register(cmd_class)
 
185
    bzrlib.builtins._register_lazy_builtins()
142
186
 
143
187
 
144
188
def _scan_module_for_commands(module):
151
195
 
152
196
 
153
197
def _list_bzr_commands(names):
154
 
    """Find commands from bzr's core and plugins."""
 
198
    """Find commands from bzr's core and plugins.
 
199
    
 
200
    This is not the public interface, just the default hook called by all_command_names.
 
201
    """
155
202
    # to eliminate duplicates
156
203
    names.update(builtin_command_names())
157
204
    names.update(plugin_command_names())
175
222
    Use of all_command_names() is encouraged rather than builtin_command_names
176
223
    and/or plugin_command_names.
177
224
    """
178
 
    return _builtin_commands().keys()
 
225
    return builtin_command_registry.keys()
179
226
 
180
227
 
181
228
def plugin_command_names():
183
230
    return plugin_cmds.keys()
184
231
 
185
232
 
186
 
@deprecated_function(deprecated_in((1, 17, 0)))
187
 
def get_all_cmds(plugins_override=False):
188
 
    """Return canonical name and class for most commands.
189
 
    
190
 
    NB: This does not return all commands since the introduction of
191
 
    command hooks, and returning the class is not sufficient to 
192
 
    get correctly setup commands, which is why it is deprecated.
193
 
 
194
 
    Use 'all_command_names' + 'get_cmd_object' instead.
195
 
    """
196
 
    d = _builtin_commands()
197
 
    if plugins_override:
198
 
        d.update(plugin_cmds.iteritems())
199
 
    for k, v in d.iteritems():
200
 
        yield k,v
201
 
 
202
 
 
203
233
def get_cmd_object(cmd_name, plugins_override=True):
204
234
    """Return the command object for a command.
205
235
 
212
242
        raise errors.BzrCommandError('unknown command "%s"' % cmd_name)
213
243
 
214
244
 
215
 
def _get_cmd_object(cmd_name, plugins_override=True):
 
245
def _get_cmd_object(cmd_name, plugins_override=True, check_missing=True):
216
246
    """Get a command object.
217
247
 
218
248
    :param cmd_name: The name of the command.
219
249
    :param plugins_override: Allow plugins to override builtins.
 
250
    :param check_missing: Look up commands not found in the regular index via
 
251
        the get_missing_command hook.
220
252
    :return: A Command object instance
221
253
    :raises KeyError: If no command is found.
222
254
    """
232
264
            # We've found a non-plugin command, don't permit it to be
233
265
            # overridden.
234
266
            break
235
 
    if cmd is None:
 
267
    if cmd is None and check_missing:
236
268
        for hook in Command.hooks['get_missing_command']:
237
269
            cmd = hook(cmd_name)
238
270
            if cmd is not None:
274
306
 
275
307
def _get_bzr_command(cmd_or_None, cmd_name):
276
308
    """Get a command from bzr's core."""
277
 
    cmds = _builtin_commands()
278
309
    try:
279
 
        return cmds[cmd_name]()
 
310
        cmd_class = builtin_command_registry.get(cmd_name)
280
311
    except KeyError:
281
312
        pass
282
 
    # look for any command which claims this as an alias
283
 
    for real_cmd_name, cmd_class in cmds.iteritems():
284
 
        if cmd_name in cmd_class.aliases:
285
 
            return cmd_class()
 
313
    else:
 
314
        return cmd_class()
286
315
    return cmd_or_None
287
316
 
288
317
 
382
411
            warn("No help message set for %r" % self)
383
412
        # List of standard options directly supported
384
413
        self.supported_std_options = []
385
 
 
 
414
        self._setup_run()
 
415
 
 
416
    def add_cleanup(self, cleanup_func, *args, **kwargs):
 
417
        """Register a function to call after self.run returns or raises.
 
418
 
 
419
        Functions will be called in LIFO order.
 
420
        """
 
421
        self._operation.add_cleanup(cleanup_func, *args, **kwargs)
 
422
 
 
423
    def cleanup_now(self):
 
424
        """Execute and empty pending cleanup functions immediately.
 
425
 
 
426
        After cleanup_now all registered cleanups are forgotten.  add_cleanup
 
427
        may be called again after cleanup_now; these cleanups will be called
 
428
        after self.run returns or raises (or when cleanup_now is next called).
 
429
 
 
430
        This is useful for releasing expensive or contentious resources (such
 
431
        as write locks) before doing further work that does not require those
 
432
        resources (such as writing results to self.outf). Note though, that
 
433
        as it releases all resources, this may release locks that the command
 
434
        wants to hold, so use should be done with care.
 
435
        """
 
436
        self._operation.cleanup_now()
 
437
 
 
438
    @deprecated_method(deprecated_in((2, 1, 0)))
386
439
    def _maybe_expand_globs(self, file_list):
387
440
        """Glob expand file_list if the platform does not do that itself.
388
441
 
 
442
        Not used anymore, now that the bzr command-line parser globs on
 
443
        Windows.
 
444
 
389
445
        :return: A possibly empty list of unicode paths.
390
446
 
391
447
        Introduced in bzrlib 0.18.
392
448
        """
393
 
        if not file_list:
394
 
            file_list = []
395
 
        if sys.platform == 'win32':
396
 
            file_list = win32utils.glob_expand(file_list)
397
 
        return list(file_list)
 
449
        return file_list
398
450
 
399
451
    def _usage(self):
400
452
        """Return single-line grammar for this command.
509
561
                        # so don't create a real link
510
562
                        see_also_links.append(item)
511
563
                    else:
512
 
                        # Use a reST link for this entry
513
 
                        see_also_links.append("`%s`_" % (item,))
 
564
                        # Use a Sphinx link for this entry
 
565
                        link_text = ":doc:`%s <%s-help>`" % (item, item)
 
566
                        see_also_links.append(link_text)
514
567
                see_also = see_also_links
515
568
            result += ':See also: '
516
569
            result += ', '.join(see_also) + '\n'
594
647
 
595
648
    def _setup_outf(self):
596
649
        """Return a file linked to stdout, which has proper encoding."""
597
 
        # Originally I was using self.stdout, but that looks
598
 
        # *way* too much like sys.stdout
599
 
        if self.encoding_type == 'exact':
600
 
            # force sys.stdout to be binary stream on win32
601
 
            if sys.platform == 'win32':
602
 
                fileno = getattr(sys.stdout, 'fileno', None)
603
 
                if fileno:
604
 
                    import msvcrt
605
 
                    msvcrt.setmode(fileno(), os.O_BINARY)
606
 
            self.outf = sys.stdout
607
 
            return
608
 
 
609
 
        output_encoding = osutils.get_terminal_encoding()
610
 
 
611
 
        self.outf = codecs.getwriter(output_encoding)(sys.stdout,
612
 
                        errors=self.encoding_type)
613
 
        # For whatever reason codecs.getwriter() does not advertise its encoding
614
 
        # it just returns the encoding of the wrapped file, which is completely
615
 
        # bogus. So set the attribute, so we can find the correct encoding later.
616
 
        self.outf.encoding = output_encoding
 
650
        self.outf = ui.ui_factory.make_output_stream(
 
651
            encoding_type=self.encoding_type)
617
652
 
618
653
    def run_argv_aliases(self, argv, alias_argv=None):
619
654
        """Parse the command line and run with extra aliases in alias_argv."""
620
 
        if argv is None:
621
 
            warn("Passing None for [] is deprecated from bzrlib 0.10",
622
 
                 DeprecationWarning, stacklevel=2)
623
 
            argv = []
624
655
        args, opts = parse_args(self, argv, alias_argv)
625
656
 
626
657
        # Process the standard options
653
684
 
654
685
        return self.run(**all_cmd_args)
655
686
 
 
687
    def _setup_run(self):
 
688
        """Wrap the defined run method on self with a cleanup.
 
689
 
 
690
        This is called by __init__ to make the Command be able to be run
 
691
        by just calling run(), as it could be before cleanups were added.
 
692
 
 
693
        If a different form of cleanups are in use by your Command subclass,
 
694
        you can override this method.
 
695
        """
 
696
        class_run = self.run
 
697
        def run(*args, **kwargs):
 
698
            self._operation = cleanup.OperationWithCleanups(class_run)
 
699
            try:
 
700
                return self._operation.run_simple(*args, **kwargs)
 
701
            finally:
 
702
                del self._operation
 
703
        self.run = run
 
704
 
 
705
    @deprecated_method(deprecated_in((2, 2, 0)))
 
706
    def run_direct(self, *args, **kwargs):
 
707
        """Deprecated thunk from bzrlib 2.1."""
 
708
        return self.run(*args, **kwargs)
 
709
 
656
710
    def run(self):
657
711
        """Actually run the command.
658
712
 
662
716
        Return 0 or None if the command was successful, or a non-zero
663
717
        shell error code if not.  It's OK for this method to allow
664
718
        an exception to raise up.
 
719
 
 
720
        This method is automatically wrapped by Command.__init__ with a 
 
721
        cleanup operation, stored as self._operation. This can be used
 
722
        via self.add_cleanup to perform automatic cleanups at the end of
 
723
        run().
 
724
 
 
725
        The argument for run are assembled by introspection. So for instance,
 
726
        if your command takes an argument files, you would declare::
 
727
 
 
728
            def run(self, files=None):
 
729
                pass
665
730
        """
666
731
        raise NotImplementedError('no implementation of command %r'
667
732
                                  % self.name())
884
949
    return ret
885
950
 
886
951
 
 
952
@deprecated_function(deprecated_in((2, 2, 0)))
887
953
def shlex_split_unicode(unsplit):
888
 
    import shlex
889
 
    return [u.decode('utf-8') for u in shlex.split(unsplit.encode('utf-8'))]
 
954
    return cmdline.split(unsplit)
890
955
 
891
956
 
892
957
def get_alias(cmd, config=None):
904
969
        config = bzrlib.config.GlobalConfig()
905
970
    alias = config.get_alias(cmd)
906
971
    if (alias):
907
 
        return shlex_split_unicode(alias)
 
972
        return cmdline.split(alias)
908
973
    return None
909
974
 
910
975
 
911
 
def run_bzr(argv):
 
976
def run_bzr(argv, load_plugins=load_plugins, disable_plugins=disable_plugins):
912
977
    """Execute a command.
913
978
 
914
 
    argv
915
 
       The command-line arguments, without the program name from argv[0]
916
 
       These should already be decoded. All library/test code calling
917
 
       run_bzr should be passing valid strings (don't need decoding).
918
 
 
919
 
    Returns a command status or raises an exception.
 
979
    :param argv: The command-line arguments, without the program name from
 
980
        argv[0] These should already be decoded. All library/test code calling
 
981
        run_bzr should be passing valid strings (don't need decoding).
 
982
    :param load_plugins: What function to call when triggering plugin loading.
 
983
        This function should take no arguments and cause all plugins to be
 
984
        loaded.
 
985
    :param disable_plugins: What function to call when disabling plugin
 
986
        loading. This function should take no arguments and cause all plugin
 
987
        loading to be prohibited (so that code paths in your application that
 
988
        know about some plugins possibly being present will fail to import
 
989
        those plugins even if they are installed.)
 
990
    :return: Returns a command exit code or raises an exception.
920
991
 
921
992
    Special master options: these must come before the command because
922
993
    they control how the command is interpreted.
939
1010
 
940
1011
    --coverage
941
1012
        Generate line coverage report in the specified directory.
 
1013
 
 
1014
    --concurrency
 
1015
        Specify the number of processes that can be run concurrently (selftest).
942
1016
    """
 
1017
    trace.mutter("bazaar version: " + bzrlib.__version__)
943
1018
    argv = list(argv)
944
1019
    trace.mutter("bzr arguments: %r", argv)
945
1020
 
969
1044
            opt_no_aliases = True
970
1045
        elif a == '--builtin':
971
1046
            opt_builtin = True
 
1047
        elif a == '--concurrency':
 
1048
            os.environ['BZR_CONCURRENCY'] = argv[i + 1]
 
1049
            i += 1
972
1050
        elif a == '--coverage':
973
1051
            opt_coverage_dir = argv[i + 1]
974
1052
            i += 1
980
1058
 
981
1059
    debug.set_debug_flags_from_config()
982
1060
 
 
1061
    if not opt_no_plugins:
 
1062
        load_plugins()
 
1063
    else:
 
1064
        disable_plugins()
 
1065
 
983
1066
    argv = argv_copy
984
1067
    if (not argv):
985
 
        from bzrlib.builtins import cmd_help
986
 
        cmd_help().run_argv_aliases([])
 
1068
        get_cmd_object('help').run_argv_aliases([])
987
1069
        return 0
988
1070
 
989
1071
    if argv[0] == '--version':
990
 
        from bzrlib.builtins import cmd_version
991
 
        cmd_version().run_argv_aliases([])
 
1072
        get_cmd_object('version').run_argv_aliases([])
992
1073
        return 0
993
1074
 
994
 
    if not opt_no_plugins:
995
 
        from bzrlib.plugin import load_plugins
996
 
        load_plugins()
997
 
    else:
998
 
        from bzrlib.plugin import disable_plugins
999
 
        disable_plugins()
1000
 
 
1001
1075
    alias_argv = None
1002
1076
 
1003
1077
    if not opt_no_aliases:
1035
1109
            ret = apply_coveraged(opt_coverage_dir, run, *run_argv)
1036
1110
        else:
1037
1111
            ret = run(*run_argv)
1038
 
        if 'memory' in debug.debug_flags:
1039
 
            trace.debug_memory('Process status after command:', short=False)
1040
1112
        return ret or 0
1041
1113
    finally:
1042
1114
        # reset, in case we may do other commands later within the same
1043
1115
        # process. Commands that want to execute sub-commands must propagate
1044
1116
        # --verbose in their own way.
 
1117
        if 'memory' in debug.debug_flags:
 
1118
            trace.debug_memory('Process status after command:', short=False)
1045
1119
        option._verbosity_level = saved_verbosity_level
1046
1120
 
1047
1121
 
1081
1155
        "bzr plugin-provider-db check")
1082
1156
 
1083
1157
 
1084
 
def main(argv=None):
1085
 
    """Main entry point of command-line interface.
1086
 
 
1087
 
    :param argv: list of unicode command-line arguments similar to sys.argv.
1088
 
        argv[0] is script name usually, it will be ignored.
1089
 
        Don't pass here sys.argv because this list contains plain strings
1090
 
        and not unicode; pass None instead.
1091
 
 
1092
 
    :return: exit code of bzr command.
1093
 
    """
1094
 
    import bzrlib.ui
1095
 
    bzrlib.ui.ui_factory = bzrlib.ui.make_ui_for_terminal(
1096
 
        sys.stdin, sys.stdout, sys.stderr)
1097
 
 
1098
 
    # Is this a final release version? If so, we should suppress warnings
1099
 
    if bzrlib.version_info[3] == 'final':
1100
 
        suppress_deprecation_warnings(override=True)
 
1158
 
 
1159
def _specified_or_unicode_argv(argv):
 
1160
    # For internal or testing use, argv can be passed.  Otherwise, get it from
 
1161
    # the process arguments in a unicode-safe way.
1101
1162
    if argv is None:
1102
 
        argv = osutils.get_unicode_argv()
 
1163
        return osutils.get_unicode_argv()
1103
1164
    else:
1104
1165
        new_argv = []
1105
1166
        try:
1111
1172
                    new_argv.append(a.decode('ascii'))
1112
1173
        except UnicodeDecodeError:
1113
1174
            raise errors.BzrError("argv should be list of unicode strings.")
1114
 
        argv = new_argv
 
1175
        return new_argv
 
1176
 
 
1177
 
 
1178
def main(argv=None):
 
1179
    """Main entry point of command-line interface.
 
1180
 
 
1181
    Typically `bzrlib.initialize` should be called first.
 
1182
 
 
1183
    :param argv: list of unicode command-line arguments similar to sys.argv.
 
1184
        argv[0] is script name usually, it will be ignored.
 
1185
        Don't pass here sys.argv because this list contains plain strings
 
1186
        and not unicode; pass None instead.
 
1187
 
 
1188
    :return: exit code of bzr command.
 
1189
    """
 
1190
    argv = _specified_or_unicode_argv(argv)
 
1191
    _register_builtin_commands()
1115
1192
    ret = run_bzr_catch_errors(argv)
 
1193
    bzrlib.ui.ui_factory.log_transport_activity(
 
1194
        display=('bytes' in debug.debug_flags))
1116
1195
    trace.mutter("return code %d", ret)
1117
1196
    return ret
1118
1197
 
1123
1202
    This function assumed that that UI layer is setup, that symbol deprecations
1124
1203
    are already applied, and that unicode decoding has already been performed on argv.
1125
1204
    """
 
1205
    # done here so that they're covered for every test run
1126
1206
    install_bzr_command_hooks()
1127
1207
    return exception_to_return_code(run_bzr, argv)
1128
1208
 
1133
1213
    This is used for the test suite, and might be useful for other programs
1134
1214
    that want to wrap the commandline interface.
1135
1215
    """
 
1216
    # done here so that they're covered for every test run
1136
1217
    install_bzr_command_hooks()
1137
1218
    try:
1138
1219
        return run_bzr(argv)
1161
1242
        if topic and topic.startswith(self.prefix):
1162
1243
            topic = topic[len(self.prefix):]
1163
1244
        try:
1164
 
            cmd = _get_cmd_object(topic)
 
1245
            cmd = _get_cmd_object(topic, check_missing=False)
1165
1246
        except KeyError:
1166
1247
            return []
1167
1248
        else:
1188
1269
            yield provider
1189
1270
 
1190
1271
command_providers_registry = ProvidersRegistry()
1191
 
 
1192
 
 
1193
 
if __name__ == '__main__':
1194
 
    sys.exit(main(sys.argv))