← Back to branch summary

~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/trace.py

  • Committer: John Arbash Meinel
  • Date: 2010-05-11 10:45:26 UTC
  • mto: This revision was merged to the branch mainline in revision 5225.
  • Revision ID: john@arbash-meinel.com-20100511104526-zxnstcxta22hzw2n
Implement a compiled extension for parsing the text key out of a CHKInventory value.

Related to bug #562666. This seems to shave 5-10% out of the time spent doing a complete
branch of bzr.dev/launchpad/etc.

Show diffs side-by-side

added added

removed removed

Lines of Context:
bzrlib/trace.py
1
 
# Copyright (C) 2005, 2006, 2007, 2008 Canonical Ltd
 
1
# Copyright (C) 2005-2010 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
14
14
# along with this program; if not, write to the Free Software
15
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
16
 
17
 
"""Messages and logging for bazaar-ng.
 
17
"""Messages and logging.
18
18
 
19
19
Messages are supplied by callers as a string-formatting template, plus values
20
20
to be inserted into it.  The actual %-formatting is deferred to the log
33
33
 
34
34
Output to stderr depends on the mode chosen by the user.  By default, messages
35
35
of info and above are sent out, which results in progress messages such as the
36
 
list of files processed by add and commit.  In quiet mode, only warnings and
37
 
above are shown.  In debug mode, stderr gets debug messages too.
 
36
list of files processed by add and commit.  In debug mode, stderr gets debug messages too.
38
37
 
39
38
Errors that terminate an operation are generally passed back as exceptions;
40
39
others may be just emitted as messages.
59
58
import logging
60
59
import os
61
60
import sys
62
 
import re
63
61
import time
64
62
 
65
63
from bzrlib.lazy_import import lazy_import
72
70
 
73
71
import bzrlib
74
72
 
 
73
from bzrlib.symbol_versioning import (
 
74
    deprecated_function,
 
75
    deprecated_in,
 
76
    )
 
77
 
75
78
lazy_import(globals(), """
76
79
from bzrlib import (
77
80
    debug,
79
82
    osutils,
80
83
    plugin,
81
84
    symbol_versioning,
 
85
    ui,
82
86
    )
83
87
""")
84
88
 
107
111
 
108
112
 
109
113
def note(*args, **kwargs):
 
114
    """Output a note to the user.
 
115
 
 
116
    Takes the same parameters as logging.info.
 
117
 
 
118
    :return: None
 
119
    """
110
120
    # FIXME note always emits utf-8, regardless of the terminal encoding
111
121
    #
112
122
    # FIXME: clearing the ui and then going through the abstract logging
123
133
    _bzr_logger.warning(*args, **kwargs)
124
134
 
125
135
 
126
 
# configure convenient aliases for output routines
127
 
#
128
 
# TODO: deprecate them, have one name for each.
129
 
info = note
130
 
log_error = _bzr_logger.error
131
 
error =     _bzr_logger.error
132
 
 
133
 
 
134
 
_last_mutter_flush_time = None
 
136
@deprecated_function(deprecated_in((2, 1, 0)))
 
137
def info(*args, **kwargs):
 
138
    """Deprecated: use trace.note instead."""
 
139
    note(*args, **kwargs)
 
140
 
 
141
 
 
142
@deprecated_function(deprecated_in((2, 1, 0)))
 
143
def log_error(*args, **kwargs):
 
144
    """Deprecated: use bzrlib.trace.show_error instead"""
 
145
    _bzr_logger.error(*args, **kwargs)
 
146
 
 
147
 
 
148
@deprecated_function(deprecated_in((2, 1, 0)))
 
149
def error(*args, **kwargs):
 
150
    """Deprecated: use bzrlib.trace.show_error instead"""
 
151
    _bzr_logger.error(*args, **kwargs)
 
152
 
 
153
 
 
154
def show_error(*args, **kwargs):
 
155
    """Show an error message to the user.
 
156
 
 
157
    Don't use this for exceptions, use report_exception instead.
 
158
    """
 
159
    _bzr_logger.error(*args, **kwargs)
 
160
 
135
161
 
136
162
def mutter(fmt, *args):
137
 
    global _last_mutter_flush_time
138
163
    if _trace_file is None:
139
164
        return
 
165
    # XXX: Don't check this every time; instead anyone who closes the file
 
166
    # ought to deregister it.  We can tolerate None.
140
167
    if (getattr(_trace_file, 'closed', None) is not None) and _trace_file.closed:
141
168
        return
142
169
 
159
186
    timestamp = '%0.3f  ' % (now - _bzr_log_start_time,)
160
187
    out = timestamp + out + '\n'
161
188
    _trace_file.write(out)
162
 
    # We flush if we haven't flushed for a few seconds. We don't want to flush
163
 
    # on every mutter, but when a command takes a while, it can be nice to see
164
 
    # updates in the debug log.
165
 
    if (_last_mutter_flush_time is None
166
 
        or (now - _last_mutter_flush_time) > 2.0):
167
 
        flush = getattr(_trace_file, 'flush', None)
168
 
        if flush is not None:
169
 
            flush()
170
 
        _last_mutter_flush_time = now
 
189
    # there's no explicit flushing; the file is typically line buffered.
171
190
 
172
191
 
173
192
def mutter_callsite(stacklevel, fmt, *args):
225
244
    This sets the global _bzr_log_filename.
226
245
    """
227
246
    global _bzr_log_filename
 
247
 
 
248
    def _open_or_create_log_file(filename):
 
249
        """Open existing log file, or create with ownership and permissions
 
250
 
 
251
        It inherits the ownership and permissions (masked by umask) from
 
252
        the containing directory to cope better with being run under sudo
 
253
        with $HOME still set to the user's homedir.
 
254
        """
 
255
        flags = os.O_WRONLY | os.O_APPEND | osutils.O_TEXT
 
256
        while True:
 
257
            try:
 
258
                fd = os.open(filename, flags)
 
259
                break
 
260
            except OSError, e:
 
261
                if e.errno != errno.ENOENT:
 
262
                    raise
 
263
            try:
 
264
                fd = os.open(filename, flags | os.O_CREAT | os.O_EXCL, 0666)
 
265
            except OSError, e:
 
266
                if e.errno != errno.EEXIST:
 
267
                    raise
 
268
            else:
 
269
                osutils.copy_ownership_from_path(filename)
 
270
                break
 
271
        return os.fdopen(fd, 'at', 0) # unbuffered
 
272
 
 
273
 
228
274
    _bzr_log_filename = _get_bzr_log_filename()
229
275
    _rollover_trace_maybe(_bzr_log_filename)
230
276
    try:
231
 
        bzr_log_file = open(_bzr_log_filename, 'at', 1) # line buffered
232
 
        # bzr_log_file.tell() on windows always return 0 until some writing done
 
277
        bzr_log_file = _open_or_create_log_file(_bzr_log_filename)
233
278
        bzr_log_file.write('\n')
234
279
        if bzr_log_file.tell() <= 2:
235
280
            bzr_log_file.write("this is a debug log for diagnosing/reporting problems in bzr\n")
236
281
            bzr_log_file.write("you can delete or truncate this file, or include sections in\n")
237
282
            bzr_log_file.write("bug reports to https://bugs.launchpad.net/bzr/+filebug\n\n")
 
283
 
238
284
        return bzr_log_file
239
 
    except IOError, e:
240
 
        warning("failed to open trace file: %s" % (e))
 
285
 
 
286
    except EnvironmentError, e:
 
287
        # If we are failing to open the log, then most likely logging has not
 
288
        # been set up yet. So we just write to stderr rather than using
 
289
        # 'warning()'. If we using warning(), users get the unhelpful 'no
 
290
        # handlers registered for "bzr"' when something goes wrong on the
 
291
        # server. (bug #503886)
 
292
        sys.stderr.write("failed to open trace file: %s\n" % (e,))
241
293
    # TODO: What should happen if we fail to open the trace file?  Maybe the
242
294
    # objects should be pointed at /dev/null or the equivalent?  Currently
243
295
    # returns None which will cause failures later.
347
399
    global _verbosity_level
348
400
    _verbosity_level = level
349
401
    _update_logging_level(level < 0)
 
402
    ui.ui_factory.be_quiet(level < 0)
350
403
 
351
404
 
352
405
def get_verbosity_level():
358
411
 
359
412
 
360
413
def be_quiet(quiet=True):
361
 
    # Perhaps this could be deprecated now ...
362
414
    if quiet:
363
415
        set_verbosity_level(-1)
364
416
    else:
422
474
 
423
475
    :return: The appropriate exit code for this error.
424
476
    """
425
 
    exc_type, exc_object, exc_tb = exc_info
426
477
    # Log the full traceback to ~/.bzr.log
427
478
    log_exception_quietly()
 
479
    if 'error' in debug.debug_flags:
 
480
        print_exception(exc_info, err_file)
 
481
        return errors.EXIT_ERROR
 
482
    exc_type, exc_object, exc_tb = exc_info
428
483
    if (isinstance(exc_object, IOError)
429
484
        and getattr(exc_object, 'errno', None) == errno.EPIPE):
430
485
        err_file.write("bzr: broken pipe\n")
432
487
    elif isinstance(exc_object, KeyboardInterrupt):
433
488
        err_file.write("bzr: interrupted\n")
434
489
        return errors.EXIT_ERROR
 
490
    elif isinstance(exc_object, MemoryError):
 
491
        err_file.write("bzr: out of memory\n")
 
492
        return errors.EXIT_ERROR
435
493
    elif isinstance(exc_object, ImportError) \
436
494
        and str(exc_object).startswith("No module named "):
437
495
        report_user_error(exc_info, err_file,
468
526
    :param advice: Extra advice to the user to be printed following the
469
527
        exception.
470
528
    """
471
 
    if 'error' in debug.debug_flags:
472
 
        print_exception(exc_info, err_file)
473
 
        return
474
529
    err_file.write("bzr: ERROR: %s\n" % (exc_info[1],))
475
530
    if advice:
476
531
        err_file.write("%s\n" % (advice,))
478
533
 
479
534
def report_bug(exc_info, err_file):
480
535
    """Report an exception that probably indicates a bug in bzr"""
481
 
    print_exception(exc_info, err_file)
482
 
    err_file.write('\n')
483
 
    err_file.write('bzr %s on python %s (%s)\n' % \
484
 
                       (bzrlib.__version__,
485
 
                        bzrlib._format_version_tuple(sys.version_info),
486
 
                        sys.platform))
487
 
    err_file.write('arguments: %r\n' % sys.argv)
488
 
    err_file.write(
489
 
        'encoding: %r, fsenc: %r, lang: %r\n' % (
490
 
            osutils.get_user_encoding(), sys.getfilesystemencoding(),
491
 
            os.environ.get('LANG')))
492
 
    err_file.write("plugins:\n")
493
 
    for name, a_plugin in sorted(plugin.plugins().items()):
494
 
        err_file.write("  %-20s %s [%s]\n" %
495
 
            (name, a_plugin.path(), a_plugin.__version__))
496
 
    err_file.write(
497
 
"""\
498
 
*** Bazaar has encountered an internal error.
499
 
    Please report a bug at https://bugs.launchpad.net/bzr/+filebug
500
 
    including this traceback, and a description of what you
501
 
    were doing when the error occurred.
502
 
""")
 
536
    from bzrlib.crash import report_bug
 
537
    report_bug(exc_info, err_file)
 
538
 
 
539
 
 
540
def _flush_stdout_stderr():
 
541
    # installed into an atexit hook by bzrlib.initialize()
 
542
    try:
 
543
        sys.stdout.flush()
 
544
        sys.stderr.flush()
 
545
    except IOError, e:
 
546
        import errno
 
547
        if e.errno in [errno.EINVAL, errno.EPIPE]:
 
548
            pass
 
549
        else:
 
550
            raise
 
551
 
 
552
 
 
553
def _flush_trace():
 
554
    # run from atexit hook
 
555
    global _trace_file
 
556
    if _trace_file:
 
557
        _trace_file.flush()