~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/trace.py

  • Committer: Martin Albisetti
  • Date: 2008-05-06 00:21:18 UTC
  • mto: (3431.1.1 integration)
  • mto: This revision was merged to the branch mainline in revision 3432.
  • Revision ID: argentina@gmail.com-20080506002118-7w9ywklw4khddf3g
Added spanish index

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005-2010 Canonical Ltd
 
1
# Copyright (C) 2005, 2006, 2007, 2008 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
 
"""Messages and logging.
 
17
"""Messages and logging for bazaar-ng.
18
18
 
19
19
Messages are supplied by callers as a string-formatting template, plus values
20
20
to be inserted into it.  The actual %-formatting is deferred to the log
33
33
 
34
34
Output to stderr depends on the mode chosen by the user.  By default, messages
35
35
of info and above are sent out, which results in progress messages such as the
36
 
list of files processed by add and commit.  In debug mode, stderr gets debug messages too.
 
36
list of files processed by add and commit.  In quiet mode, only warnings and
 
37
above are shown.  In debug mode, stderr gets debug messages too.
37
38
 
38
39
Errors that terminate an operation are generally passed back as exceptions;
39
40
others may be just emitted as messages.
58
59
import logging
59
60
import os
60
61
import sys
 
62
import re
61
63
import time
62
64
 
63
65
from bzrlib.lazy_import import lazy_import
70
72
 
71
73
import bzrlib
72
74
 
73
 
from bzrlib.symbol_versioning import (
74
 
    deprecated_function,
75
 
    deprecated_in,
76
 
    )
77
 
 
78
75
lazy_import(globals(), """
79
76
from bzrlib import (
80
77
    debug,
82
79
    osutils,
83
80
    plugin,
84
81
    symbol_versioning,
85
 
    ui,
86
82
    )
87
83
""")
88
84
 
111
107
 
112
108
 
113
109
def note(*args, **kwargs):
114
 
    """Output a note to the user.
115
 
 
116
 
    Takes the same parameters as logging.info.
117
 
 
118
 
    :return: None
119
 
    """
120
110
    # FIXME note always emits utf-8, regardless of the terminal encoding
121
111
    #
122
112
    # FIXME: clearing the ui and then going through the abstract logging
133
123
    _bzr_logger.warning(*args, **kwargs)
134
124
 
135
125
 
136
 
@deprecated_function(deprecated_in((2, 1, 0)))
137
 
def info(*args, **kwargs):
138
 
    """Deprecated: use trace.note instead."""
139
 
    note(*args, **kwargs)
140
 
 
141
 
 
142
 
@deprecated_function(deprecated_in((2, 1, 0)))
143
 
def log_error(*args, **kwargs):
144
 
    """Deprecated: use bzrlib.trace.show_error instead"""
145
 
    _bzr_logger.error(*args, **kwargs)
146
 
 
147
 
 
148
 
@deprecated_function(deprecated_in((2, 1, 0)))
149
 
def error(*args, **kwargs):
150
 
    """Deprecated: use bzrlib.trace.show_error instead"""
151
 
    _bzr_logger.error(*args, **kwargs)
152
 
 
153
 
 
154
 
def show_error(*args, **kwargs):
155
 
    """Show an error message to the user.
156
 
 
157
 
    Don't use this for exceptions, use report_exception instead.
158
 
    """
159
 
    _bzr_logger.error(*args, **kwargs)
 
126
# configure convenient aliases for output routines
 
127
#
 
128
# TODO: deprecate them, have one name for each.
 
129
info = note
 
130
log_error = _bzr_logger.error
 
131
error =     _bzr_logger.error
160
132
 
161
133
 
162
134
def mutter(fmt, *args):
163
135
    if _trace_file is None:
164
136
        return
165
 
    # XXX: Don't check this every time; instead anyone who closes the file
166
 
    # ought to deregister it.  We can tolerate None.
167
137
    if (getattr(_trace_file, 'closed', None) is not None) and _trace_file.closed:
168
138
        return
169
139
 
182
152
        out = fmt % tuple(real_args)
183
153
    else:
184
154
        out = fmt
185
 
    now = time.time()
186
 
    timestamp = '%0.3f  ' % (now - _bzr_log_start_time,)
 
155
    timestamp = '%0.3f  ' % (time.time() - _bzr_log_start_time,)
187
156
    out = timestamp + out + '\n'
188
157
    _trace_file.write(out)
189
 
    # there's no explicit flushing; the file is typically line buffered.
 
158
    # no need to flush here, the trace file is now linebuffered when it's
 
159
    # opened.
190
160
 
191
161
 
192
162
def mutter_callsite(stacklevel, fmt, *args):
198
168
    :param args: A list of substitution variables.
199
169
    """
200
170
    outf = StringIO()
201
 
    if stacklevel is None:
202
 
        limit = None
203
 
    else:
204
 
        limit = stacklevel + 1
205
 
    traceback.print_stack(limit=limit, file=outf)
 
171
    traceback.print_stack(limit=stacklevel + 1, file=outf)
206
172
    formatted_lines = outf.getvalue().splitlines()
207
173
    formatted_stack = '\n'.join(formatted_lines[:-2])
208
174
    mutter(fmt + "\nCalled from:\n%s", *(args + (formatted_stack,)))
235
201
 
236
202
 
237
203
def _open_bzr_log():
238
 
    """Open the .bzr.log trace file.
 
204
    """Open the .bzr.log trace file.  
239
205
 
240
206
    If the log is more than a particular length, the old file is renamed to
241
207
    .bzr.log.old and a new file is started.  Otherwise, we append to the
244
210
    This sets the global _bzr_log_filename.
245
211
    """
246
212
    global _bzr_log_filename
247
 
 
248
 
    def _open_or_create_log_file(filename):
249
 
        """Open existing log file, or create with ownership and permissions
250
 
 
251
 
        It inherits the ownership and permissions (masked by umask) from
252
 
        the containing directory to cope better with being run under sudo
253
 
        with $HOME still set to the user's homedir.
254
 
        """
255
 
        flags = os.O_WRONLY | os.O_APPEND | osutils.O_TEXT
256
 
        while True:
257
 
            try:
258
 
                fd = os.open(filename, flags)
259
 
                break
260
 
            except OSError, e:
261
 
                if e.errno != errno.ENOENT:
262
 
                    raise
263
 
            try:
264
 
                fd = os.open(filename, flags | os.O_CREAT | os.O_EXCL, 0666)
265
 
            except OSError, e:
266
 
                if e.errno != errno.EEXIST:
267
 
                    raise
268
 
            else:
269
 
                osutils.copy_ownership_from_path(filename)
270
 
                break
271
 
        return os.fdopen(fd, 'at', 0) # unbuffered
272
 
 
273
 
 
274
213
    _bzr_log_filename = _get_bzr_log_filename()
275
214
    _rollover_trace_maybe(_bzr_log_filename)
276
215
    try:
277
 
        bzr_log_file = _open_or_create_log_file(_bzr_log_filename)
 
216
        bzr_log_file = open(_bzr_log_filename, 'at', 1) # line buffered
 
217
        # bzr_log_file.tell() on windows always return 0 until some writing done
278
218
        bzr_log_file.write('\n')
279
219
        if bzr_log_file.tell() <= 2:
280
220
            bzr_log_file.write("this is a debug log for diagnosing/reporting problems in bzr\n")
281
221
            bzr_log_file.write("you can delete or truncate this file, or include sections in\n")
282
222
            bzr_log_file.write("bug reports to https://bugs.launchpad.net/bzr/+filebug\n\n")
283
 
 
284
223
        return bzr_log_file
285
 
 
286
 
    except EnvironmentError, e:
287
 
        # If we are failing to open the log, then most likely logging has not
288
 
        # been set up yet. So we just write to stderr rather than using
289
 
        # 'warning()'. If we using warning(), users get the unhelpful 'no
290
 
        # handlers registered for "bzr"' when something goes wrong on the
291
 
        # server. (bug #503886)
292
 
        sys.stderr.write("failed to open trace file: %s\n" % (e,))
 
224
    except IOError, e:
 
225
        warning("failed to open trace file: %s" % (e))
293
226
    # TODO: What should happen if we fail to open the trace file?  Maybe the
294
227
    # objects should be pointed at /dev/null or the equivalent?  Currently
295
228
    # returns None which will cause failures later.
296
 
    return None
297
229
 
298
230
 
299
231
def enable_default_logging():
300
232
    """Configure default logging: messages to stderr and debug to .bzr.log
301
 
 
 
233
    
302
234
    This should only be called once per process.
303
235
 
304
236
    Non-command-line programs embedding bzrlib do not need to call this.  They
305
237
    can instead either pass a file to _push_log_file, or act directly on
306
238
    logging.getLogger("bzr").
307
 
 
 
239
    
308
240
    Output can be redirected away by calling _push_log_file.
309
 
 
310
 
    :return: A memento from push_log_file for restoring the log state.
311
241
    """
312
 
    start_time = osutils.format_local_date(_bzr_log_start_time,
313
 
                                           timezone='local')
314
242
    # create encoded wrapper around stderr
315
243
    bzr_log_file = _open_bzr_log()
316
 
    if bzr_log_file is not None:
317
 
        bzr_log_file.write(start_time.encode('utf-8') + '\n')
318
 
    memento = push_log_file(bzr_log_file,
 
244
    push_log_file(bzr_log_file,
319
245
        r'[%(process)5d] %(asctime)s.%(msecs)03d %(levelname)s: %(message)s',
320
246
        r'%Y-%m-%d %H:%M:%S')
321
247
    # after hooking output into bzr_log, we also need to attach a stderr
322
248
    # handler, writing only at level info and with encoding
323
 
    term_encoding = osutils.get_terminal_encoding()
324
 
    writer_factory = codecs.getwriter(term_encoding)
 
249
    writer_factory = codecs.getwriter(osutils.get_terminal_encoding())
325
250
    encoded_stderr = writer_factory(sys.stderr, errors='replace')
326
251
    stderr_handler = logging.StreamHandler(encoded_stderr)
327
252
    stderr_handler.setLevel(logging.INFO)
328
253
    logging.getLogger('bzr').addHandler(stderr_handler)
329
 
    return memento
330
254
 
331
255
 
332
256
def push_log_file(to_file, log_format=None, date_format=None):
334
258
 
335
259
    :param to_file: A file-like object to which messages will be sent.
336
260
 
337
 
    :returns: A memento that should be passed to _pop_log_file to restore the
 
261
    :returns: A memento that should be passed to _pop_log_file to restore the 
338
262
    previously active logging.
339
263
    """
340
264
    global _trace_file
368
292
def pop_log_file((magic, old_handlers, new_handler, old_trace_file, new_trace_file)):
369
293
    """Undo changes to logging/tracing done by _push_log_file.
370
294
 
371
 
    This flushes, but does not close the trace file (so that anything that was
372
 
    in it is output.
373
 
 
 
295
    This flushes, but does not close the trace file.
 
296
    
374
297
    Takes the memento returned from _push_log_file."""
 
298
    assert magic == 'log_memento'
375
299
    global _trace_file
376
300
    _trace_file = old_trace_file
377
301
    bzr_logger = logging.getLogger('bzr')
378
302
    bzr_logger.removeHandler(new_handler)
379
 
    # must be closed, otherwise logging will try to close it at exit, and the
 
303
    # must be closed, otherwise logging will try to close it atexit, and the
380
304
    # file will likely already be closed underneath.
381
305
    new_handler.close()
382
306
    bzr_logger.handlers = old_handlers
383
 
    if new_trace_file is not None:
384
 
        new_trace_file.flush()
 
307
    new_trace_file.flush()
 
308
 
 
309
 
 
310
@symbol_versioning.deprecated_function(symbol_versioning.one_two)
 
311
def enable_test_log(to_file):
 
312
    """Redirect logging to a temporary file for a test
 
313
    
 
314
    :returns: an opaque reference that should be passed to disable_test_log
 
315
    after the test completes.
 
316
    """
 
317
    return push_log_file(to_file)
 
318
 
 
319
 
 
320
@symbol_versioning.deprecated_function(symbol_versioning.one_two)
 
321
def disable_test_log(memento):
 
322
    return pop_log_file(memento)
385
323
 
386
324
 
387
325
def log_exception_quietly():
388
326
    """Log the last exception to the trace file only.
389
327
 
390
 
    Used for exceptions that occur internally and that may be
391
 
    interesting to developers but not to users.  For example,
 
328
    Used for exceptions that occur internally and that may be 
 
329
    interesting to developers but not to users.  For example, 
392
330
    errors loading plugins.
393
331
    """
394
332
    mutter(traceback.format_exc())
402
340
    global _verbosity_level
403
341
    _verbosity_level = level
404
342
    _update_logging_level(level < 0)
405
 
    ui.ui_factory.be_quiet(level < 0)
406
343
 
407
344
 
408
345
def get_verbosity_level():
414
351
 
415
352
 
416
353
def be_quiet(quiet=True):
 
354
    # Perhaps this could be deprecated now ...
417
355
    if quiet:
418
356
        set_verbosity_level(-1)
419
357
    else:
438
376
    return _verbosity_level > 0
439
377
 
440
378
 
441
 
def debug_memory(message='', short=True):
442
 
    """Write out a memory dump."""
443
 
    if sys.platform == 'win32':
444
 
        from bzrlib import win32utils
445
 
        win32utils.debug_memory_win32api(message=message, short=short)
446
 
    else:
447
 
        _debug_memory_proc(message=message, short=short)
448
 
 
449
 
 
450
 
_short_fields = ('VmPeak', 'VmSize', 'VmRSS')
451
 
 
452
 
def _debug_memory_proc(message='', short=True):
453
 
    try:
454
 
        status_file = file('/proc/%s/status' % os.getpid(), 'rb')
455
 
    except IOError:
456
 
        return
457
 
    try:
458
 
        status = status_file.read()
459
 
    finally:
460
 
        status_file.close()
461
 
    if message:
462
 
        note(message)
463
 
    for line in status.splitlines():
464
 
        if not short:
465
 
            note(line)
466
 
        else:
467
 
            for field in _short_fields:
468
 
                if line.startswith(field):
469
 
                    note(line)
470
 
                    break
 
379
@symbol_versioning.deprecated_function(symbol_versioning.one_two)
 
380
def disable_default_logging():
 
381
    """Turn off default log handlers.
 
382
 
 
383
    Don't call this method, use _push_log_file and _pop_log_file instead.
 
384
    """
 
385
    pass
471
386
 
472
387
 
473
388
def report_exception(exc_info, err_file):
477
392
 
478
393
    :return: The appropriate exit code for this error.
479
394
    """
 
395
    exc_type, exc_object, exc_tb = exc_info
480
396
    # Log the full traceback to ~/.bzr.log
481
397
    log_exception_quietly()
482
 
    if 'error' in debug.debug_flags:
483
 
        print_exception(exc_info, err_file)
484
 
        return errors.EXIT_ERROR
485
 
    exc_type, exc_object, exc_tb = exc_info
486
398
    if (isinstance(exc_object, IOError)
487
399
        and getattr(exc_object, 'errno', None) == errno.EPIPE):
488
400
        err_file.write("bzr: broken pipe\n")
490
402
    elif isinstance(exc_object, KeyboardInterrupt):
491
403
        err_file.write("bzr: interrupted\n")
492
404
        return errors.EXIT_ERROR
493
 
    elif isinstance(exc_object, MemoryError):
494
 
        err_file.write("bzr: out of memory\n")
495
 
        return errors.EXIT_ERROR
496
 
    elif isinstance(exc_object, ImportError) \
497
 
        and str(exc_object).startswith("No module named "):
498
 
        report_user_error(exc_info, err_file,
499
 
            'You may need to install this Python library separately.')
500
 
        return errors.EXIT_ERROR
501
405
    elif not getattr(exc_object, 'internal_error', True):
502
406
        report_user_error(exc_info, err_file)
503
407
        return errors.EXIT_ERROR
504
 
    elif isinstance(exc_object, (OSError, IOError)) or (
505
 
        # GZ 2010-05-20: Like (exc_type is pywintypes.error) but avoid import
506
 
        exc_type.__name__ == "error" and exc_type.__module__ == "pywintypes"):
 
408
    elif isinstance(exc_object, (OSError, IOError)):
507
409
        # Might be nice to catch all of these and show them as something more
508
410
        # specific, but there are too many cases at the moment.
509
411
        report_user_error(exc_info, err_file)
513
415
        return errors.EXIT_INTERNAL_ERROR
514
416
 
515
417
 
516
 
def print_exception(exc_info, err_file):
517
 
    exc_type, exc_object, exc_tb = exc_info
518
 
    err_file.write("bzr: ERROR: %s.%s: %s\n" % (
519
 
        exc_type.__module__, exc_type.__name__, exc_object))
520
 
    err_file.write('\n')
521
 
    traceback.print_exception(exc_type, exc_object, exc_tb, file=err_file)
522
 
 
523
 
 
524
418
# TODO: Should these be specially encoding the output?
525
 
def report_user_error(exc_info, err_file, advice=None):
 
419
def report_user_error(exc_info, err_file):
526
420
    """Report to err_file an error that's not an internal error.
527
421
 
528
422
    These don't get a traceback unless -Derror was given.
529
 
 
530
 
    :param exc_info: 3-tuple from sys.exc_info()
531
 
    :param advice: Extra advice to the user to be printed following the
532
 
        exception.
533
423
    """
 
424
    if 'error' in debug.debug_flags:
 
425
        report_bug(exc_info, err_file)
 
426
        return
534
427
    err_file.write("bzr: ERROR: %s\n" % (exc_info[1],))
535
 
    if advice:
536
 
        err_file.write("%s\n" % (advice,))
537
428
 
538
429
 
539
430
def report_bug(exc_info, err_file):
540
431
    """Report an exception that probably indicates a bug in bzr"""
541
 
    from bzrlib.crash import report_bug
542
 
    report_bug(exc_info, err_file)
543
 
 
544
 
 
545
 
def _flush_stdout_stderr():
546
 
    # called from the bzrlib library finalizer returned by bzrlib.initialize()
547
 
    try:
548
 
        sys.stdout.flush()
549
 
        sys.stderr.flush()
550
 
    except IOError, e:
551
 
        import errno
552
 
        if e.errno in [errno.EINVAL, errno.EPIPE]:
553
 
            pass
554
 
        else:
555
 
            raise
556
 
 
557
 
 
558
 
def _flush_trace():
559
 
    # called from the bzrlib library finalizer returned by bzrlib.initialize()
560
 
    global _trace_file
561
 
    if _trace_file:
562
 
        _trace_file.flush()
563
 
 
564
 
 
565
 
class Config(object):
566
 
    """Configuration of message tracing in bzrlib.
567
 
 
568
 
    This implements the context manager protocol and should manage any global
569
 
    variables still used. The default config used is DefaultConfig, but
570
 
    embedded uses of bzrlib may wish to use a custom manager.
571
 
    """
572
 
 
573
 
    def __enter__(self):
574
 
        return self # This is bound to the 'as' clause in a with statement.
575
 
 
576
 
    def __exit__(self, exc_type, exc_val, exc_tb):
577
 
        return False # propogate exceptions.
578
 
 
579
 
 
580
 
class DefaultConfig(Config):
581
 
    """A default configuration for tracing of messages in bzrlib.
582
 
 
583
 
    This implements the context manager protocol.
584
 
    """
585
 
 
586
 
    def __enter__(self):
587
 
        self._original_filename = _bzr_log_filename
588
 
        self._original_state = enable_default_logging()
589
 
        return self # This is bound to the 'as' clause in a with statement.
590
 
 
591
 
    def __exit__(self, exc_type, exc_val, exc_tb):
592
 
        pop_log_file(self._original_state)
593
 
        global _bzr_log_filename
594
 
        _bzr_log_filename = self._original_filename
595
 
        return False # propogate exceptions.
 
432
    exc_type, exc_object, exc_tb = exc_info
 
433
    err_file.write("bzr: ERROR: %s.%s: %s\n" % (
 
434
        exc_type.__module__, exc_type.__name__, exc_object))
 
435
    err_file.write('\n')
 
436
    traceback.print_exception(exc_type, exc_object, exc_tb, file=err_file)
 
437
    err_file.write('\n')
 
438
    err_file.write('bzr %s on python %s (%s)\n' % \
 
439
                       (bzrlib.__version__,
 
440
                        bzrlib._format_version_tuple(sys.version_info),
 
441
                        sys.platform))
 
442
    err_file.write('arguments: %r\n' % sys.argv)
 
443
    err_file.write(
 
444
        'encoding: %r, fsenc: %r, lang: %r\n' % (
 
445
            osutils.get_user_encoding(), sys.getfilesystemencoding(),
 
446
            os.environ.get('LANG')))
 
447
    err_file.write("plugins:\n")
 
448
    for name, a_plugin in sorted(plugin.plugins().items()):
 
449
        err_file.write("  %-20s %s [%s]\n" %
 
450
            (name, a_plugin.path(), a_plugin.__version__))
 
451
    err_file.write(
 
452
"""\
 
453
*** Bazaar has encountered an internal error.
 
454
    Please report a bug at https://bugs.launchpad.net/bzr/+filebug
 
455
    including this traceback, and a description of what you
 
456
    were doing when the error occurred.
 
457
""")