~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/progress.py

  • Committer: Robert Collins
  • Date: 2007-07-19 06:34:09 UTC
  • mto: (2592.3.46 repository)
  • mto: This revision was merged to the branch mainline in revision 2651.
  • Revision ID: robertc@robertcollins.net-20070719063409-stu9sckrxp8wp3mo
LIBRARY API BREAKS:

  * KnitIndex.get_parents now returns tuples. (Robert Collins)

INTERNALS:

  * Unused functions on the private interface KnitIndex have been removed.
    (Robert Collins)

  * New ``knit.KnitGraphIndex`` which provides a ``KnitIndex`` layered on top
    of a ``index.GraphIndex``. (Robert Collins)

  * New ``knit.KnitVersionedFile.iter_parents`` method that allows querying
    the parents of many knit nodes at once, reducing round trips to the 
    underlying index. (Robert Collins)

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2005, 2006, 2008, 2009 Canonical Ltd
 
1
# Copyright (C) 2005 Aaron Bentley <aaron.bentley@utoronto.ca>
 
2
# Copyright (C) 2005, 2006 Canonical Ltd
2
3
#
3
4
# This program is free software; you can redistribute it and/or modify
4
5
# it under the terms of the GNU General Public License as published by
12
13
#
13
14
# You should have received a copy of the GNU General Public License
14
15
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
 
 
17
 
 
18
 
"""Progress indicators.
19
 
 
20
 
The usual way to use this is via bzrlib.ui.ui_factory.nested_progress_bar which
21
 
will manage a conceptual stack of nested activities.
 
16
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
17
 
 
18
 
 
19
"""Simple text-mode progress indicator.
 
20
 
 
21
To display an indicator, create a ProgressBar object.  Call it,
 
22
passing Progress objects indicating the current state.  When done,
 
23
call clear().
 
24
 
 
25
Progress is suppressed when output is not sent to a terminal, so as
 
26
not to clutter log files.
22
27
"""
23
28
 
 
29
# TODO: should be a global option e.g. --silent that disables progress
 
30
# indicators, preferably without needing to adjust all code that
 
31
# potentially calls them.
 
32
 
 
33
# TODO: If not on a tty perhaps just print '......' for the benefit of IDEs, etc
 
34
 
 
35
# TODO: Optionally show elapsed time instead/as well as ETA; nicer
 
36
# when the rate is unpredictable
24
37
 
25
38
import sys
26
39
import time
27
40
import os
28
 
import warnings
29
 
 
30
 
 
 
41
 
 
42
from bzrlib.lazy_import import lazy_import
 
43
lazy_import(globals(), """
31
44
from bzrlib import (
32
45
    errors,
33
 
    osutils,
34
 
    trace,
35
 
    ui,
36
46
    )
 
47
""")
 
48
 
37
49
from bzrlib.trace import mutter
38
 
from bzrlib.symbol_versioning import (
39
 
    deprecated_in,
40
 
    deprecated_method,
41
 
    )
42
50
 
43
51
 
44
52
def _supports_progress(f):
45
53
    """Detect if we can use pretty progress bars on the output stream f.
46
54
 
47
 
    If this returns true we expect that a human may be looking at that
 
55
    If this returns true we expect that a human may be looking at that 
48
56
    output, and that we can repaint a line to update it.
49
57
    """
50
58
    isatty = getattr(f, 'isatty', None)
58
66
    return True
59
67
 
60
68
 
61
 
class ProgressTask(object):
62
 
    """Model component of a progress indicator.
63
 
 
64
 
    Most code that needs to indicate progress should update one of these,
65
 
    and it will in turn update the display, if one is present.
66
 
 
67
 
    Code updating the task may also set fields as hints about how to display
68
 
    it: show_pct, show_spinner, show_eta, show_count, show_bar.  UIs
69
 
    will not necessarily respect all these fields.
70
 
    """
71
 
 
72
 
    def __init__(self, parent_task=None, ui_factory=None):
73
 
        """Construct a new progress task.
74
 
 
75
 
        Normally you should not call this directly but rather through
76
 
        `ui_factory.nested_progress_bar`.
77
 
        """
78
 
        self._parent_task = parent_task
79
 
        self._last_update = 0
80
 
        self.total_cnt = None
81
 
        self.current_cnt = None
82
 
        self.msg = ''
83
 
        self.ui_factory = ui_factory
84
 
        self.show_pct = False
85
 
        self.show_spinner = True
86
 
        self.show_eta = False,
87
 
        self.show_count = True
88
 
        self.show_bar = True
89
 
 
90
 
    def __repr__(self):
91
 
        return '%s(%r/%r, msg=%r)' % (
92
 
            self.__class__.__name__,
93
 
            self.current_cnt,
94
 
            self.total_cnt,
95
 
            self.msg)
96
 
 
97
 
    def update(self, msg, current_cnt=None, total_cnt=None):
98
 
        self.msg = msg
99
 
        self.current_cnt = current_cnt
100
 
        if total_cnt:
101
 
            self.total_cnt = total_cnt
102
 
        self.ui_factory._progress_updated(self)
103
 
 
104
 
    def tick(self):
105
 
        self.update(self.msg)
106
 
 
107
 
    def finished(self):
108
 
        self.ui_factory._progress_finished(self)
109
 
 
110
 
    def make_sub_task(self):
111
 
        return ProgressTask(self, self.ui_factory)
112
 
 
113
 
    def _overall_completion_fraction(self, child_fraction=0.0):
114
 
        """Return fractional completion of this task and its parents
115
 
 
116
 
        Returns None if no completion can be computed."""
117
 
        if self.current_cnt is not None and self.total_cnt:
118
 
            own_fraction = (float(self.current_cnt) + child_fraction) / self.total_cnt
119
 
        else:
120
 
            # if this task has no estimation, it just passes on directly
121
 
            # whatever the child has measured...
122
 
            own_fraction = child_fraction
123
 
        if self._parent_task is None:
124
 
            return own_fraction
125
 
        else:
126
 
            if own_fraction is None:
127
 
                own_fraction = 0.0
128
 
            return self._parent_task._overall_completion_fraction(own_fraction)
129
 
 
130
 
    def note(self, fmt_string, *args):
131
 
        """Record a note without disrupting the progress bar."""
132
 
        # XXX: shouldn't be here; put it in mutter or the ui instead
133
 
        if args:
134
 
            self.ui_factory.note(fmt_string % args)
135
 
        else:
136
 
            self.ui_factory.note(fmt_string)
137
 
 
138
 
    def clear(self):
139
 
        # XXX: shouldn't be here; put it in mutter or the ui instead
140
 
        self.ui_factory.clear_term()
 
69
_progress_bar_types = {}
141
70
 
142
71
 
143
72
def ProgressBar(to_file=None, **kwargs):
162
91
                                                _progress_bar_types.keys())
163
92
        return _progress_bar_types[requested_bar_type](to_file=to_file, **kwargs)
164
93
 
165
 
 
 
94
 
166
95
class ProgressBarStack(object):
167
 
    """A stack of progress bars.
168
 
 
169
 
    This class is deprecated: instead, ask the ui factory for a new progress
170
 
    task and finish it when it's done.
171
 
    """
172
 
 
173
 
    @deprecated_method(deprecated_in((1, 12, 0)))
 
96
    """A stack of progress bars."""
 
97
 
174
98
    def __init__(self,
175
99
                 to_file=None,
176
100
                 show_pct=False,
227
151
    def return_pb(self, bar):
228
152
        """Return bar after its been used."""
229
153
        if bar is not self._stack[-1]:
230
 
            warnings.warn("%r is not currently active" % (bar,))
231
 
        else:
232
 
            self._stack.pop()
233
 
 
234
 
 
 
154
            raise errors.MissingProgressBarFinish()
 
155
        self._stack.pop()
 
156
 
 
157
 
235
158
class _BaseProgressBar(object):
236
159
 
237
160
    def __init__(self,
270
193
    def finished(self):
271
194
        """Return this bar to its progress stack."""
272
195
        self.clear()
 
196
        assert self._stack is not None
273
197
        self._stack.return_pb(self)
274
198
 
275
199
    def note(self, fmt_string, *args, **kwargs):
287
211
 
288
212
    This can be used as the default argument for methods that
289
213
    take an optional progress indicator."""
290
 
 
291
214
    def tick(self):
292
215
        pass
293
216
 
299
222
 
300
223
    def clear(self):
301
224
        pass
302
 
 
 
225
        
303
226
    def note(self, fmt_string, *args, **kwargs):
304
227
        """See _BaseProgressBar.note()."""
305
228
 
307
230
        return DummyProgress(**kwargs)
308
231
 
309
232
 
 
233
_progress_bar_types['dummy'] = DummyProgress
 
234
_progress_bar_types['none'] = DummyProgress
 
235
 
 
236
 
310
237
class DotsProgressBar(_BaseProgressBar):
311
238
 
312
239
    def __init__(self, **kwargs):
313
240
        _BaseProgressBar.__init__(self, **kwargs)
314
241
        self.last_msg = None
315
242
        self.need_nl = False
316
 
 
 
243
        
317
244
    def tick(self):
318
245
        self.update()
319
 
 
 
246
        
320
247
    def update(self, msg=None, current_cnt=None, total_cnt=None):
321
248
        if msg and msg != self.last_msg:
322
249
            if self.need_nl:
325
252
            self.last_msg = msg
326
253
        self.need_nl = True
327
254
        self.to_file.write('.')
328
 
 
 
255
        
329
256
    def clear(self):
330
257
        if self.need_nl:
331
258
            self.to_file.write('\n')
332
259
        self.need_nl = False
333
 
 
 
260
        
334
261
    def child_update(self, message, current, total):
335
262
        self.tick()
336
263
 
337
264
 
338
 
 
339
 
 
 
265
_progress_bar_types['dots'] = DotsProgressBar
 
266
 
 
267
    
340
268
class TTYProgressBar(_BaseProgressBar):
341
269
    """Progress bar display object.
342
270
 
369
297
        self._max_last_updates = 10
370
298
        self.child_fraction = 0
371
299
        self._have_output = False
 
300
    
372
301
 
373
302
    def throttle(self, old_msg):
374
303
        """Return True if the bar was updated too recently"""
389
318
        self.last_updates = self.last_updates[-self._max_last_updates:]
390
319
        self.last_update = now
391
320
        return False
392
 
 
 
321
        
393
322
    def tick(self):
394
 
        self.update(self.last_msg, self.last_cnt, self.last_total,
 
323
        self.update(self.last_msg, self.last_cnt, self.last_total, 
395
324
                    self.child_fraction)
396
325
 
397
326
    def child_update(self, message, current, total):
401
330
                pass
402
331
            elif self.last_cnt + child_fraction <= self.last_total:
403
332
                self.child_fraction = child_fraction
 
333
            else:
 
334
                mutter('not updating child fraction')
404
335
        if self.last_msg is None:
405
336
            self.last_msg = ''
406
337
        self.tick()
407
338
 
408
 
    def update(self, msg, current_cnt=None, total_cnt=None,
409
 
            child_fraction=0):
410
 
        """Update and redraw progress bar.
411
 
        """
 
339
    def update(self, msg, current_cnt=None, total_cnt=None, 
 
340
               child_fraction=0):
 
341
        """Update and redraw progress bar."""
412
342
        if msg is None:
413
343
            msg = self.last_msg
414
344
 
417
347
 
418
348
        if current_cnt < 0:
419
349
            current_cnt = 0
420
 
 
 
350
            
421
351
        if current_cnt > total_cnt:
422
352
            total_cnt = current_cnt
423
 
 
424
 
        ## # optional corner case optimisation
 
353
        
 
354
        ## # optional corner case optimisation 
425
355
        ## # currently does not seem to fire so costs more than saved.
426
356
        ## # trivial optimal case:
427
357
        ## # NB if callers are doing a clear and restore with
434
364
        ##     self.child_fraction == child_fraction):
435
365
        ##     return
436
366
 
437
 
        if msg is None:
438
 
            msg = ''
439
 
 
440
367
        old_msg = self.last_msg
441
368
        # save these for the tick() function
442
369
        self.last_msg = msg
444
371
        self.last_total = total_cnt
445
372
        self.child_fraction = child_fraction
446
373
 
447
 
        # each function call takes 20ms/4000 = 0.005 ms,
 
374
        # each function call takes 20ms/4000 = 0.005 ms, 
448
375
        # but multiple that by 4000 calls -> starts to cost.
449
376
        # so anything to make this function call faster
450
377
        # will improve base 'diff' time by up to 0.1 seconds.
452
379
            return
453
380
 
454
381
        if self.show_eta and self.start_time and self.last_total:
455
 
            eta = get_eta(self.start_time, self.last_cnt + self.child_fraction,
 
382
            eta = get_eta(self.start_time, self.last_cnt + self.child_fraction, 
456
383
                    self.last_total, last_updates = self.last_updates)
457
384
            eta_str = " " + str_tdelta(eta)
458
385
        else:
459
386
            eta_str = ""
460
387
 
461
388
        if self.show_spinner:
462
 
            spin_str = self.SPIN_CHARS[self.spin_pos % 4] + ' '
 
389
            spin_str = self.SPIN_CHARS[self.spin_pos % 4] + ' '            
463
390
        else:
464
391
            spin_str = ''
465
392
 
482
409
            # make both fields the same size
483
410
            t = '%i' % (self.last_total)
484
411
            c = '%*i' % (len(t), self.last_cnt)
485
 
            count_str = ' ' + c + '/' + t
 
412
            count_str = ' ' + c + '/' + t 
486
413
 
487
414
        if self.show_bar:
488
415
            # progress bar, if present, soaks up all remaining space
491
418
 
492
419
            if self.last_total:
493
420
                # number of markers highlighted in bar
494
 
                markers = int(round(float(cols) *
 
421
                markers = int(round(float(cols) * 
495
422
                              (self.last_cnt + self.child_fraction) / self.last_total))
496
423
                bar_str = '[' + ('=' * markers).ljust(cols) + '] '
497
424
            elif False:
499
426
                # so just show an expanded spinning thingy
500
427
                m = self.spin_pos % cols
501
428
                ms = (' ' * m + '*').ljust(cols)
502
 
 
 
429
                
503
430
                bar_str = '[' + ms + '] '
504
431
            else:
505
432
                bar_str = ''
506
433
        else:
507
434
            bar_str = ''
508
435
 
509
 
        m = spin_str + bar_str + self.last_msg + count_str \
510
 
            + pct_str + eta_str
 
436
        m = spin_str + bar_str + self.last_msg + count_str + pct_str + eta_str
511
437
        self.to_file.write('\r%-*.*s' % (self.width - 1, self.width - 1, m))
512
438
        self._have_output = True
513
439
        #self.to_file.flush()
514
 
 
515
 
    def clear(self):
 
440
            
 
441
    def clear(self):        
516
442
        if self._have_output:
517
443
            self.to_file.write('\r%s\r' % (' ' * (self.width - 1)))
518
444
        self._have_output = False
519
 
        #self.to_file.flush()
520
 
 
521
 
 
 
445
        #self.to_file.flush()        
 
446
 
 
447
 
 
448
_progress_bar_types['tty'] = TTYProgressBar
522
449
 
523
450
 
524
451
class ChildProgress(_BaseProgressBar):
534
461
 
535
462
    def update(self, msg, current_cnt=None, total_cnt=None):
536
463
        self.current = current_cnt
537
 
        if total_cnt is not None:
538
 
            self.total = total_cnt
 
464
        self.total = total_cnt
539
465
        self.message = msg
540
466
        self.child_fraction = 0
541
467
        self.tick()
564
490
    def note(self, *args, **kwargs):
565
491
        self.parent.note(*args, **kwargs)
566
492
 
567
 
 
568
 
class InstrumentedProgress(TTYProgressBar):
569
 
    """TTYProgress variant that tracks outcomes"""
570
 
 
571
 
    def __init__(self, *args, **kwargs):
572
 
        self.always_throttled = True
573
 
        self.never_throttle = False
574
 
        TTYProgressBar.__init__(self, *args, **kwargs)
575
 
 
576
 
    def throttle(self, old_message):
577
 
        if self.never_throttle:
578
 
            result =  False
579
 
        else:
580
 
            result = TTYProgressBar.throttle(self, old_message)
581
 
        if result is False:
582
 
            self.always_throttled = False
583
 
 
584
 
 
 
493
 
585
494
def str_tdelta(delt):
586
495
    if delt is None:
587
496
        return "-:--:--"
608
517
 
609
518
    if elapsed < 2.0:                   # not enough time to estimate
610
519
        return None
611
 
 
 
520
    
612
521
    total_duration = float(elapsed) * float(total) / float(current)
613
522
 
 
523
    assert total_duration >= elapsed
 
524
 
614
525
    if last_updates and len(last_updates) >= n_recent:
615
526
        avg = sum(last_updates) / float(len(last_updates))
616
527
        time_left = avg * (total - current)
637
548
            self.cur_phase = 0
638
549
        else:
639
550
            self.cur_phase += 1
 
551
        assert self.cur_phase < self.total 
640
552
        self.pb.update(self.message, self.cur_phase, self.total)
641
553
 
642
554
 
643
 
_progress_bar_types = {}
644
 
_progress_bar_types['dummy'] = DummyProgress
645
 
_progress_bar_types['none'] = DummyProgress
646
 
_progress_bar_types['tty'] = TTYProgressBar
647
 
_progress_bar_types['dots'] = DotsProgressBar
 
555
def run_tests():
 
556
    import doctest
 
557
    result = doctest.testmod()
 
558
    if result[1] > 0:
 
559
        if result[0] == 0:
 
560
            print "All tests passed"
 
561
    else:
 
562
        print "No tests to run"
 
563
 
 
564
 
 
565
def demo():
 
566
    sleep = time.sleep
 
567
    
 
568
    print 'dumb-terminal test:'
 
569
    pb = DotsProgressBar()
 
570
    for i in range(100):
 
571
        pb.update('Leoparden', i, 99)
 
572
        sleep(0.1)
 
573
    sleep(1.5)
 
574
    pb.clear()
 
575
    sleep(1.5)
 
576
    
 
577
    print 'smart-terminal test:'
 
578
    pb = ProgressBar(show_pct=True, show_bar=True, show_spinner=False)
 
579
    for i in range(100):
 
580
        pb.update('Elephanten', i, 99)
 
581
        sleep(0.1)
 
582
    sleep(2)
 
583
    pb.clear()
 
584
    sleep(1)
 
585
 
 
586
    print 'done!'
 
587
 
 
588
if __name__ == "__main__":
 
589
    demo()