~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/progress.py

  • Committer: Aaron Bentley
  • Date: 2007-03-07 23:15:10 UTC
  • mto: (1551.19.24 Aaron's mergeable stuff)
  • mto: This revision was merged to the branch mainline in revision 2325.
  • Revision ID: abentley@panoramicfeedback.com-20070307231510-jae63zsli83db3eb
Make ChangeReporter private

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005, 2006, 2008, 2009 Canonical Ltd
 
1
# Copyright (C) 2005 Aaron Bentley <aaron.bentley@utoronto.ca>
 
2
# Copyright (C) 2005, 2006 Canonical Ltd
2
3
#
3
4
# This program is free software; you can redistribute it and/or modify
4
5
# it under the terms of the GNU General Public License as published by
12
13
#
13
14
# You should have received a copy of the GNU General Public License
14
15
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
 
 
17
 
 
18
 
"""Progress indicators.
19
 
 
20
 
The usual way to use this is via bzrlib.ui.ui_factory.nested_progress_bar which
21
 
will manage a conceptual stack of nested activities.
 
16
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
17
 
 
18
 
 
19
"""Simple text-mode progress indicator.
 
20
 
 
21
To display an indicator, create a ProgressBar object.  Call it,
 
22
passing Progress objects indicating the current state.  When done,
 
23
call clear().
 
24
 
 
25
Progress is suppressed when output is not sent to a terminal, so as
 
26
not to clutter log files.
22
27
"""
23
28
 
 
29
# TODO: should be a global option e.g. --silent that disables progress
 
30
# indicators, preferably without needing to adjust all code that
 
31
# potentially calls them.
 
32
 
 
33
# TODO: If not on a tty perhaps just print '......' for the benefit of IDEs, etc
 
34
 
 
35
# TODO: Optionally show elapsed time instead/as well as ETA; nicer
 
36
# when the rate is unpredictable
24
37
 
25
38
import sys
26
39
import time
27
40
import os
28
 
import warnings
29
 
 
30
 
 
 
41
 
 
42
from bzrlib.lazy_import import lazy_import
 
43
lazy_import(globals(), """
31
44
from bzrlib import (
32
45
    errors,
33
 
    osutils,
34
 
    trace,
35
 
    ui,
36
46
    )
 
47
""")
 
48
 
37
49
from bzrlib.trace import mutter
38
 
from bzrlib.symbol_versioning import (
39
 
    deprecated_in,
40
 
    deprecated_method,
41
 
    )
42
50
 
43
51
 
44
52
def _supports_progress(f):
45
 
    """Detect if we can use pretty progress bars on the output stream f.
46
 
 
47
 
    If this returns true we expect that a human may be looking at that
48
 
    output, and that we can repaint a line to update it.
49
 
    """
50
53
    isatty = getattr(f, 'isatty', None)
51
54
    if isatty is None:
52
55
        return False
58
61
    return True
59
62
 
60
63
 
61
 
class ProgressTask(object):
62
 
    """Model component of a progress indicator.
63
 
 
64
 
    Most code that needs to indicate progress should update one of these,
65
 
    and it will in turn update the display, if one is present.
66
 
 
67
 
    Code updating the task may also set fields as hints about how to display
68
 
    it: show_pct, show_spinner, show_eta, show_count, show_bar.  UIs
69
 
    will not necessarily respect all these fields.
70
 
    """
71
 
 
72
 
    def __init__(self, parent_task=None, ui_factory=None):
73
 
        """Construct a new progress task.
74
 
 
75
 
        Normally you should not call this directly but rather through
76
 
        `ui_factory.nested_progress_bar`.
77
 
        """
78
 
        self._parent_task = parent_task
79
 
        self._last_update = 0
80
 
        self.total_cnt = None
81
 
        self.current_cnt = None
82
 
        self.msg = ''
83
 
        self.ui_factory = ui_factory
84
 
        self.show_pct = False
85
 
        self.show_spinner = True
86
 
        self.show_eta = False,
87
 
        self.show_count = True
88
 
        self.show_bar = True
89
 
 
90
 
    def __repr__(self):
91
 
        return '%s(%r/%r, msg=%r)' % (
92
 
            self.__class__.__name__,
93
 
            self.current_cnt,
94
 
            self.total_cnt,
95
 
            self.msg)
96
 
 
97
 
    def update(self, msg, current_cnt=None, total_cnt=None):
98
 
        self.msg = msg
99
 
        self.current_cnt = current_cnt
100
 
        if total_cnt:
101
 
            self.total_cnt = total_cnt
102
 
        self.ui_factory._progress_updated(self)
103
 
 
104
 
    def tick(self):
105
 
        self.update(self.msg)
106
 
 
107
 
    def finished(self):
108
 
        self.ui_factory._progress_finished(self)
109
 
 
110
 
    def make_sub_task(self):
111
 
        return ProgressTask(self, self.ui_factory)
112
 
 
113
 
    def _overall_completion_fraction(self, child_fraction=0.0):
114
 
        """Return fractional completion of this task and its parents
115
 
 
116
 
        Returns None if no completion can be computed."""
117
 
        if self.current_cnt is not None and self.total_cnt:
118
 
            own_fraction = (float(self.current_cnt) + child_fraction) / self.total_cnt
119
 
        else:
120
 
            # if this task has no estimation, it just passes on directly
121
 
            # whatever the child has measured...
122
 
            own_fraction = child_fraction
123
 
        if self._parent_task is None:
124
 
            return own_fraction
125
 
        else:
126
 
            if own_fraction is None:
127
 
                own_fraction = 0.0
128
 
            return self._parent_task._overall_completion_fraction(own_fraction)
129
 
 
130
 
    def note(self, fmt_string, *args):
131
 
        """Record a note without disrupting the progress bar."""
132
 
        # XXX: shouldn't be here; put it in mutter or the ui instead
133
 
        if args:
134
 
            self.ui_factory.note(fmt_string % args)
135
 
        else:
136
 
            self.ui_factory.note(fmt_string)
137
 
 
138
 
    def clear(self):
139
 
        # XXX: shouldn't be here; put it in mutter or the ui instead
140
 
        self.ui_factory.clear_term()
 
64
_progress_bar_types = {}
141
65
 
142
66
 
143
67
def ProgressBar(to_file=None, **kwargs):
150
74
        if _supports_progress(to_file):
151
75
            return TTYProgressBar(to_file=to_file, **kwargs)
152
76
        else:
153
 
            return DummyProgress(to_file=to_file, **kwargs)
 
77
            return DotsProgressBar(to_file=to_file, **kwargs)
154
78
    else:
155
79
        # Minor sanitation to prevent spurious errors
156
80
        requested_bar_type = requested_bar_type.lower().strip()
162
86
                                                _progress_bar_types.keys())
163
87
        return _progress_bar_types[requested_bar_type](to_file=to_file, **kwargs)
164
88
 
165
 
 
 
89
 
166
90
class ProgressBarStack(object):
167
 
    """A stack of progress bars.
168
 
 
169
 
    This class is deprecated: instead, ask the ui factory for a new progress
170
 
    task and finish it when it's done.
171
 
    """
172
 
 
173
 
    @deprecated_method(deprecated_in((1, 12, 0)))
 
91
    """A stack of progress bars."""
 
92
 
174
93
    def __init__(self,
175
94
                 to_file=None,
176
95
                 show_pct=False,
227
146
    def return_pb(self, bar):
228
147
        """Return bar after its been used."""
229
148
        if bar is not self._stack[-1]:
230
 
            warnings.warn("%r is not currently active" % (bar,))
231
 
        else:
232
 
            self._stack.pop()
233
 
 
234
 
 
 
149
            raise errors.MissingProgressBarFinish()
 
150
        self._stack.pop()
 
151
 
 
152
 
235
153
class _BaseProgressBar(object):
236
154
 
237
155
    def __init__(self,
270
188
    def finished(self):
271
189
        """Return this bar to its progress stack."""
272
190
        self.clear()
 
191
        assert self._stack is not None
273
192
        self._stack.return_pb(self)
274
193
 
275
194
    def note(self, fmt_string, *args, **kwargs):
287
206
 
288
207
    This can be used as the default argument for methods that
289
208
    take an optional progress indicator."""
290
 
 
291
209
    def tick(self):
292
210
        pass
293
211
 
299
217
 
300
218
    def clear(self):
301
219
        pass
302
 
 
 
220
        
303
221
    def note(self, fmt_string, *args, **kwargs):
304
222
        """See _BaseProgressBar.note()."""
305
223
 
307
225
        return DummyProgress(**kwargs)
308
226
 
309
227
 
 
228
_progress_bar_types['dummy'] = DummyProgress
 
229
_progress_bar_types['none'] = DummyProgress
 
230
 
 
231
 
310
232
class DotsProgressBar(_BaseProgressBar):
311
233
 
312
234
    def __init__(self, **kwargs):
313
235
        _BaseProgressBar.__init__(self, **kwargs)
314
236
        self.last_msg = None
315
237
        self.need_nl = False
316
 
 
 
238
        
317
239
    def tick(self):
318
240
        self.update()
319
 
 
 
241
        
320
242
    def update(self, msg=None, current_cnt=None, total_cnt=None):
321
243
        if msg and msg != self.last_msg:
322
244
            if self.need_nl:
325
247
            self.last_msg = msg
326
248
        self.need_nl = True
327
249
        self.to_file.write('.')
328
 
 
 
250
        
329
251
    def clear(self):
330
252
        if self.need_nl:
331
253
            self.to_file.write('\n')
332
254
        self.need_nl = False
333
 
 
 
255
        
334
256
    def child_update(self, message, current, total):
335
257
        self.tick()
336
258
 
337
259
 
338
 
 
339
 
 
 
260
_progress_bar_types['dots'] = DotsProgressBar
 
261
 
 
262
    
340
263
class TTYProgressBar(_BaseProgressBar):
341
264
    """Progress bar display object.
342
265
 
369
292
        self._max_last_updates = 10
370
293
        self.child_fraction = 0
371
294
        self._have_output = False
 
295
    
372
296
 
373
297
    def throttle(self, old_msg):
374
298
        """Return True if the bar was updated too recently"""
389
313
        self.last_updates = self.last_updates[-self._max_last_updates:]
390
314
        self.last_update = now
391
315
        return False
392
 
 
 
316
        
393
317
    def tick(self):
394
 
        self.update(self.last_msg, self.last_cnt, self.last_total,
 
318
        self.update(self.last_msg, self.last_cnt, self.last_total, 
395
319
                    self.child_fraction)
396
320
 
397
321
    def child_update(self, message, current, total):
401
325
                pass
402
326
            elif self.last_cnt + child_fraction <= self.last_total:
403
327
                self.child_fraction = child_fraction
 
328
            else:
 
329
                mutter('not updating child fraction')
404
330
        if self.last_msg is None:
405
331
            self.last_msg = ''
406
332
        self.tick()
407
333
 
408
 
    def update(self, msg, current_cnt=None, total_cnt=None,
409
 
            child_fraction=0):
410
 
        """Update and redraw progress bar.
411
 
        """
 
334
    def update(self, msg, current_cnt=None, total_cnt=None, 
 
335
               child_fraction=0):
 
336
        """Update and redraw progress bar."""
412
337
        if msg is None:
413
338
            msg = self.last_msg
414
339
 
417
342
 
418
343
        if current_cnt < 0:
419
344
            current_cnt = 0
420
 
 
 
345
            
421
346
        if current_cnt > total_cnt:
422
347
            total_cnt = current_cnt
423
 
 
424
 
        ## # optional corner case optimisation
 
348
        
 
349
        ## # optional corner case optimisation 
425
350
        ## # currently does not seem to fire so costs more than saved.
426
351
        ## # trivial optimal case:
427
352
        ## # NB if callers are doing a clear and restore with
434
359
        ##     self.child_fraction == child_fraction):
435
360
        ##     return
436
361
 
437
 
        if msg is None:
438
 
            msg = ''
439
 
 
440
362
        old_msg = self.last_msg
441
363
        # save these for the tick() function
442
364
        self.last_msg = msg
444
366
        self.last_total = total_cnt
445
367
        self.child_fraction = child_fraction
446
368
 
447
 
        # each function call takes 20ms/4000 = 0.005 ms,
 
369
        # each function call takes 20ms/4000 = 0.005 ms, 
448
370
        # but multiple that by 4000 calls -> starts to cost.
449
371
        # so anything to make this function call faster
450
372
        # will improve base 'diff' time by up to 0.1 seconds.
452
374
            return
453
375
 
454
376
        if self.show_eta and self.start_time and self.last_total:
455
 
            eta = get_eta(self.start_time, self.last_cnt + self.child_fraction,
 
377
            eta = get_eta(self.start_time, self.last_cnt + self.child_fraction, 
456
378
                    self.last_total, last_updates = self.last_updates)
457
379
            eta_str = " " + str_tdelta(eta)
458
380
        else:
459
381
            eta_str = ""
460
382
 
461
383
        if self.show_spinner:
462
 
            spin_str = self.SPIN_CHARS[self.spin_pos % 4] + ' '
 
384
            spin_str = self.SPIN_CHARS[self.spin_pos % 4] + ' '            
463
385
        else:
464
386
            spin_str = ''
465
387
 
482
404
            # make both fields the same size
483
405
            t = '%i' % (self.last_total)
484
406
            c = '%*i' % (len(t), self.last_cnt)
485
 
            count_str = ' ' + c + '/' + t
 
407
            count_str = ' ' + c + '/' + t 
486
408
 
487
409
        if self.show_bar:
488
410
            # progress bar, if present, soaks up all remaining space
491
413
 
492
414
            if self.last_total:
493
415
                # number of markers highlighted in bar
494
 
                markers = int(round(float(cols) *
 
416
                markers = int(round(float(cols) * 
495
417
                              (self.last_cnt + self.child_fraction) / self.last_total))
496
418
                bar_str = '[' + ('=' * markers).ljust(cols) + '] '
497
419
            elif False:
499
421
                # so just show an expanded spinning thingy
500
422
                m = self.spin_pos % cols
501
423
                ms = (' ' * m + '*').ljust(cols)
502
 
 
 
424
                
503
425
                bar_str = '[' + ms + '] '
504
426
            else:
505
427
                bar_str = ''
506
428
        else:
507
429
            bar_str = ''
508
430
 
509
 
        m = spin_str + bar_str + self.last_msg + count_str \
510
 
            + pct_str + eta_str
 
431
        m = spin_str + bar_str + self.last_msg + count_str + pct_str + eta_str
511
432
        self.to_file.write('\r%-*.*s' % (self.width - 1, self.width - 1, m))
512
433
        self._have_output = True
513
434
        #self.to_file.flush()
514
 
 
515
 
    def clear(self):
 
435
            
 
436
    def clear(self):        
516
437
        if self._have_output:
517
438
            self.to_file.write('\r%s\r' % (' ' * (self.width - 1)))
518
439
        self._have_output = False
519
 
        #self.to_file.flush()
520
 
 
521
 
 
 
440
        #self.to_file.flush()        
 
441
 
 
442
 
 
443
_progress_bar_types['tty'] = TTYProgressBar
522
444
 
523
445
 
524
446
class ChildProgress(_BaseProgressBar):
534
456
 
535
457
    def update(self, msg, current_cnt=None, total_cnt=None):
536
458
        self.current = current_cnt
537
 
        if total_cnt is not None:
538
 
            self.total = total_cnt
 
459
        self.total = total_cnt
539
460
        self.message = msg
540
461
        self.child_fraction = 0
541
462
        self.tick()
564
485
    def note(self, *args, **kwargs):
565
486
        self.parent.note(*args, **kwargs)
566
487
 
567
 
 
568
 
class InstrumentedProgress(TTYProgressBar):
569
 
    """TTYProgress variant that tracks outcomes"""
570
 
 
571
 
    def __init__(self, *args, **kwargs):
572
 
        self.always_throttled = True
573
 
        self.never_throttle = False
574
 
        TTYProgressBar.__init__(self, *args, **kwargs)
575
 
 
576
 
    def throttle(self, old_message):
577
 
        if self.never_throttle:
578
 
            result =  False
579
 
        else:
580
 
            result = TTYProgressBar.throttle(self, old_message)
581
 
        if result is False:
582
 
            self.always_throttled = False
583
 
 
584
 
 
 
488
 
585
489
def str_tdelta(delt):
586
490
    if delt is None:
587
491
        return "-:--:--"
608
512
 
609
513
    if elapsed < 2.0:                   # not enough time to estimate
610
514
        return None
611
 
 
 
515
    
612
516
    total_duration = float(elapsed) * float(total) / float(current)
613
517
 
 
518
    assert total_duration >= elapsed
 
519
 
614
520
    if last_updates and len(last_updates) >= n_recent:
615
521
        avg = sum(last_updates) / float(len(last_updates))
616
522
        time_left = avg * (total - current)
637
543
            self.cur_phase = 0
638
544
        else:
639
545
            self.cur_phase += 1
 
546
        assert self.cur_phase < self.total 
640
547
        self.pb.update(self.message, self.cur_phase, self.total)
641
548
 
642
549
 
643
 
_progress_bar_types = {}
644
 
_progress_bar_types['dummy'] = DummyProgress
645
 
_progress_bar_types['none'] = DummyProgress
646
 
_progress_bar_types['tty'] = TTYProgressBar
647
 
_progress_bar_types['dots'] = DotsProgressBar
 
550
def run_tests():
 
551
    import doctest
 
552
    result = doctest.testmod()
 
553
    if result[1] > 0:
 
554
        if result[0] == 0:
 
555
            print "All tests passed"
 
556
    else:
 
557
        print "No tests to run"
 
558
 
 
559
 
 
560
def demo():
 
561
    sleep = time.sleep
 
562
    
 
563
    print 'dumb-terminal test:'
 
564
    pb = DotsProgressBar()
 
565
    for i in range(100):
 
566
        pb.update('Leoparden', i, 99)
 
567
        sleep(0.1)
 
568
    sleep(1.5)
 
569
    pb.clear()
 
570
    sleep(1.5)
 
571
    
 
572
    print 'smart-terminal test:'
 
573
    pb = ProgressBar(show_pct=True, show_bar=True, show_spinner=False)
 
574
    for i in range(100):
 
575
        pb.update('Elephanten', i, 99)
 
576
        sleep(0.1)
 
577
    sleep(2)
 
578
    pb.clear()
 
579
    sleep(1)
 
580
 
 
581
    print 'done!'
 
582
 
 
583
if __name__ == "__main__":
 
584
    demo()