~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/progress.py

Added more docs

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
1
# Copyright (C) 2005 Aaron Bentley <aaron.bentley@utoronto.ca>
2
 
# Copyright (C) 2005, 2006 Canonical <canonical.com>
 
2
# Copyright (C) 2005 Canonical <canonical.com>
3
3
#
4
4
#    This program is free software; you can redistribute it and/or modify
5
5
#    it under the terms of the GNU General Public License as published by
42
42
from collections import deque
43
43
 
44
44
 
45
 
import bzrlib.errors as errors
46
 
from bzrlib.trace import mutter 
47
 
 
48
 
 
49
45
def _supports_progress(f):
50
46
    if not hasattr(f, 'isatty'):
51
47
        return False
58
54
 
59
55
 
60
56
 
61
 
def ProgressBar(to_file=None, **kwargs):
 
57
def ProgressBar(to_file=sys.stderr, **kwargs):
62
58
    """Abstract factory"""
63
 
    if to_file is None:
64
 
        to_file = sys.stderr
65
59
    if _supports_progress(to_file):
66
60
        return TTYProgressBar(to_file=to_file, **kwargs)
67
61
    else:
68
62
        return DotsProgressBar(to_file=to_file, **kwargs)
69
63
    
70
 
 
71
 
class ProgressBarStack(object):
72
 
    """A stack of progress bars."""
73
 
 
74
 
    def __init__(self,
75
 
                 to_file=None,
76
 
                 show_pct=False,
77
 
                 show_spinner=True,
78
 
                 show_eta=False,
79
 
                 show_bar=True,
80
 
                 show_count=True,
81
 
                 to_messages_file=None,
82
 
                 klass=None):
83
 
        """Setup the stack with the parameters the progress bars should have."""
84
 
        if to_file is None:
85
 
            to_file = sys.stderr
86
 
        if to_messages_file is None:
87
 
            to_messages_file = sys.stdout
88
 
        self._to_file = to_file
89
 
        self._show_pct = show_pct
90
 
        self._show_spinner = show_spinner
91
 
        self._show_eta = show_eta
92
 
        self._show_bar = show_bar
93
 
        self._show_count = show_count
94
 
        self._to_messages_file = to_messages_file
95
 
        self._stack = []
96
 
        self._klass = klass or TTYProgressBar
97
 
 
98
 
    def top(self):
99
 
        if len(self._stack) != 0:
100
 
            return self._stack[-1]
101
 
        else:
102
 
            return None
103
 
 
104
 
    def bottom(self):
105
 
        if len(self._stack) != 0:
106
 
            return self._stack[0]
107
 
        else:
108
 
            return None
109
 
 
110
 
    def get_nested(self):
111
 
        """Return a nested progress bar."""
112
 
        if len(self._stack) == 0:
113
 
            func = self._klass
114
 
        else:
115
 
            func = self.top().child_progress
116
 
        new_bar = func(to_file=self._to_file,
117
 
                       show_pct=self._show_pct,
118
 
                       show_spinner=self._show_spinner,
119
 
                       show_eta=self._show_eta,
120
 
                       show_bar=self._show_bar,
121
 
                       show_count=self._show_count,
122
 
                       to_messages_file=self._to_messages_file,
123
 
                       _stack=self)
124
 
        self._stack.append(new_bar)
125
 
        return new_bar
126
 
 
127
 
    def return_pb(self, bar):
128
 
        """Return bar after its been used."""
129
 
        if bar is not self._stack[-1]:
130
 
            raise errors.MissingProgressBarFinish()
131
 
        self._stack.pop()
132
 
 
133
 
 
 
64
    
134
65
class _BaseProgressBar(object):
135
 
 
136
66
    def __init__(self,
137
 
                 to_file=None,
 
67
                 to_file=sys.stderr,
138
68
                 show_pct=False,
139
69
                 show_spinner=False,
140
70
                 show_eta=True,
141
71
                 show_bar=True,
142
 
                 show_count=True,
143
 
                 to_messages_file=None,
144
 
                 _stack=None):
 
72
                 show_count=True):
145
73
        object.__init__(self)
146
 
        if to_file is None:
147
 
            to_file = sys.stderr
148
 
        if to_messages_file is None:
149
 
            to_messages_file = sys.stdout
150
74
        self.to_file = to_file
151
 
        self.to_messages_file = to_messages_file
 
75
 
152
76
        self.last_msg = None
153
77
        self.last_cnt = None
154
78
        self.last_total = None
157
81
        self.show_eta = show_eta
158
82
        self.show_bar = show_bar
159
83
        self.show_count = show_count
160
 
        self._stack = _stack
161
 
        # seed throttler
162
 
        self.MIN_PAUSE = 0.1 # seconds
163
 
        now = time.clock()
164
 
        # starting now
165
 
        self.start_time = now
166
 
        # next update should not throttle
167
 
        self.last_update = now - self.MIN_PAUSE - 1
168
 
 
169
 
    def finished(self):
170
 
        """Return this bar to its progress stack."""
171
 
        self.clear()
172
 
        assert self._stack is not None
173
 
        self._stack.return_pb(self)
174
 
 
175
 
    def note(self, fmt_string, *args, **kwargs):
176
 
        """Record a note without disrupting the progress bar."""
177
 
        self.clear()
178
 
        self.to_messages_file.write(fmt_string % args)
179
 
        self.to_messages_file.write('\n')
180
 
 
181
 
    def child_progress(self, **kwargs):
182
 
        return ChildProgress(**kwargs)
 
84
 
183
85
 
184
86
 
185
87
class DummyProgress(_BaseProgressBar):
193
95
    def update(self, msg=None, current=None, total=None):
194
96
        pass
195
97
 
196
 
    def child_update(self, message, current, total):
197
 
        pass
198
 
 
199
98
    def clear(self):
200
99
        pass
201
100
        
202
 
    def note(self, fmt_string, *args, **kwargs):
203
 
        """See _BaseProgressBar.note()."""
204
 
 
205
 
    def child_progress(self, **kwargs):
206
 
        return DummyProgress(**kwargs)
207
 
 
208
 
 
 
101
    
209
102
class DotsProgressBar(_BaseProgressBar):
210
 
 
211
103
    def __init__(self, **kwargs):
212
104
        _BaseProgressBar.__init__(self, **kwargs)
213
105
        self.last_msg = None
220
112
        if msg and msg != self.last_msg:
221
113
            if self.need_nl:
222
114
                self.to_file.write('\n')
 
115
            
223
116
            self.to_file.write(msg + ': ')
224
117
            self.last_msg = msg
225
118
        self.need_nl = True
228
121
    def clear(self):
229
122
        if self.need_nl:
230
123
            self.to_file.write('\n')
231
 
        self.need_nl = False
232
124
        
233
 
    def child_update(self, message, current, total):
234
 
        self.tick()
235
 
 
236
125
    
237
126
class TTYProgressBar(_BaseProgressBar):
238
127
    """Progress bar display object.
255
144
    The output file should be in line-buffered or unbuffered mode.
256
145
    """
257
146
    SPIN_CHARS = r'/-\|'
 
147
    MIN_PAUSE = 0.1 # seconds
258
148
 
259
149
 
260
150
    def __init__(self, **kwargs):
263
153
        self.spin_pos = 0
264
154
        self.width = terminal_width()
265
155
        self.start_time = None
 
156
        self.last_update = None
266
157
        self.last_updates = deque()
267
 
        self.child_fraction = 0
268
158
    
269
159
 
270
160
    def throttle(self):
271
161
        """Return True if the bar was updated too recently"""
272
 
        # time.time consistently takes 40/4000 ms = 0.01 ms.
273
 
        # but every single update to the pb invokes it.
274
 
        # so we use time.clock which takes 20/4000 ms = 0.005ms
275
 
        # on the downside, time.clock() appears to have approximately
276
 
        # 10ms granularity, so we treat a zero-time change as 'throttled.'
277
 
        
278
 
        now = time.clock()
279
 
        interval = now - self.last_update
280
 
        # if interval > 0
281
 
        if interval < self.MIN_PAUSE:
282
 
            return True
 
162
        now = time.time()
 
163
        if self.start_time is None:
 
164
            self.start_time = self.last_update = now
 
165
            return False
 
166
        else:
 
167
            interval = now - self.last_update
 
168
            if interval > 0 and interval < self.MIN_PAUSE:
 
169
                return True
283
170
 
284
171
        self.last_updates.append(now - self.last_update)
285
172
        self.last_update = now
286
173
        return False
287
174
        
 
175
 
288
176
    def tick(self):
289
 
        self.update(self.last_msg, self.last_cnt, self.last_total, 
290
 
                    self.child_fraction)
291
 
 
292
 
    def child_update(self, message, current, total):
293
 
        if current is not None and total != 0:
294
 
            child_fraction = float(current) / total
295
 
            if self.last_cnt is None:
296
 
                pass
297
 
            elif self.last_cnt + child_fraction <= self.last_total:
298
 
                self.child_fraction = child_fraction
299
 
            else:
300
 
                mutter('not updating child fraction')
301
 
        if self.last_msg is None:
302
 
            self.last_msg = ''
303
 
        self.tick()
304
 
 
305
 
    def update(self, msg, current_cnt=None, total_cnt=None, 
306
 
               child_fraction=0):
 
177
        self.update(self.last_msg, self.last_cnt, self.last_total)
 
178
                 
 
179
 
 
180
 
 
181
    def update(self, msg, current_cnt=None, total_cnt=None):
307
182
        """Update and redraw progress bar."""
308
 
        if msg is None:
309
 
            msg = self.last_msg
310
 
 
311
 
        if total_cnt is None:
312
 
            total_cnt = self.last_total
313
183
 
314
184
        if current_cnt < 0:
315
185
            current_cnt = 0
316
186
            
317
187
        if current_cnt > total_cnt:
318
188
            total_cnt = current_cnt
319
 
        
320
 
        ## # optional corner case optimisation 
321
 
        ## # currently does not seem to fire so costs more than saved.
322
 
        ## # trivial optimal case:
323
 
        ## # NB if callers are doing a clear and restore with
324
 
        ## # the saved values, this will prevent that:
325
 
        ## # in that case add a restore method that calls
326
 
        ## # _do_update or some such
327
 
        ## if (self.last_msg == msg and
328
 
        ##     self.last_cnt == current_cnt and
329
 
        ##     self.last_total == total_cnt and
330
 
        ##     self.child_fraction == child_fraction):
331
 
        ##     return
332
189
 
333
 
        old_msg = self.last_msg
334
190
        # save these for the tick() function
335
191
        self.last_msg = msg
336
192
        self.last_cnt = current_cnt
337
193
        self.last_total = total_cnt
338
 
        self.child_fraction = child_fraction
339
 
 
340
 
        # each function call takes 20ms/4000 = 0.005 ms, 
341
 
        # but multiple that by 4000 calls -> starts to cost.
342
 
        # so anything to make this function call faster
343
 
        # will improve base 'diff' time by up to 0.1 seconds.
344
 
        if old_msg == self.last_msg and self.throttle():
345
 
            return
346
 
 
347
 
        if self.show_eta and self.start_time and self.last_total:
348
 
            eta = get_eta(self.start_time, self.last_cnt + self.child_fraction, 
349
 
                    self.last_total, last_updates = self.last_updates)
 
194
            
 
195
        if self.throttle():
 
196
            return 
 
197
        
 
198
        if self.show_eta and self.start_time and total_cnt:
 
199
            eta = get_eta(self.start_time, current_cnt, total_cnt,
 
200
                    last_updates = self.last_updates)
350
201
            eta_str = " " + str_tdelta(eta)
351
202
        else:
352
203
            eta_str = ""
359
210
        # always update this; it's also used for the bar
360
211
        self.spin_pos += 1
361
212
 
362
 
        if self.show_pct and self.last_total and self.last_cnt:
363
 
            pct = 100.0 * ((self.last_cnt + self.child_fraction) / self.last_total)
 
213
        if self.show_pct and total_cnt and current_cnt:
 
214
            pct = 100.0 * current_cnt / total_cnt
364
215
            pct_str = ' (%5.1f%%)' % pct
365
216
        else:
366
217
            pct_str = ''
367
218
 
368
219
        if not self.show_count:
369
220
            count_str = ''
370
 
        elif self.last_cnt is None:
 
221
        elif current_cnt is None:
371
222
            count_str = ''
372
 
        elif self.last_total is None:
373
 
            count_str = ' %i' % (self.last_cnt)
 
223
        elif total_cnt is None:
 
224
            count_str = ' %i' % (current_cnt)
374
225
        else:
375
226
            # make both fields the same size
376
 
            t = '%i' % (self.last_total)
377
 
            c = '%*i' % (len(t), self.last_cnt)
 
227
            t = '%i' % (total_cnt)
 
228
            c = '%*i' % (len(t), current_cnt)
378
229
            count_str = ' ' + c + '/' + t 
379
230
 
380
231
        if self.show_bar:
381
232
            # progress bar, if present, soaks up all remaining space
382
 
            cols = self.width - 1 - len(self.last_msg) - len(spin_str) - len(pct_str) \
 
233
            cols = self.width - 1 - len(msg) - len(spin_str) - len(pct_str) \
383
234
                   - len(eta_str) - len(count_str) - 3
384
235
 
385
 
            if self.last_total:
 
236
            if total_cnt:
386
237
                # number of markers highlighted in bar
387
 
                markers = int(round(float(cols) * 
388
 
                              (self.last_cnt + self.child_fraction) / self.last_total))
 
238
                markers = int(round(float(cols) * current_cnt / total_cnt))
389
239
                bar_str = '[' + ('=' * markers).ljust(cols) + '] '
390
240
            elif False:
391
241
                # don't know total, so can't show completion.
399
249
        else:
400
250
            bar_str = ''
401
251
 
402
 
        m = spin_str + bar_str + self.last_msg + count_str + pct_str + eta_str
 
252
        m = spin_str + bar_str + msg + count_str + pct_str + eta_str
403
253
 
404
254
        assert len(m) < self.width
405
255
        self.to_file.write('\r' + m.ljust(self.width - 1))
406
256
        #self.to_file.flush()
407
257
            
 
258
 
408
259
    def clear(self):        
409
260
        self.to_file.write('\r%s\r' % (' ' * (self.width - 1)))
410
261
        #self.to_file.flush()        
411
 
 
412
 
 
413
 
class ChildProgress(_BaseProgressBar):
414
 
    """A progress indicator that pushes its data to the parent"""
415
 
 
416
 
    def __init__(self, _stack, **kwargs):
417
 
        _BaseProgressBar.__init__(self, _stack=_stack, **kwargs)
418
 
        self.parent = _stack.top()
419
 
        self.current = None
420
 
        self.total = None
421
 
        self.child_fraction = 0
422
 
        self.message = None
423
 
 
424
 
    def update(self, msg, current_cnt=None, total_cnt=None):
425
 
        self.current = current_cnt
426
 
        self.total = total_cnt
427
 
        self.message = msg
428
 
        self.child_fraction = 0
429
 
        self.tick()
430
 
 
431
 
    def child_update(self, message, current, total):
432
 
        if current is None or total == 0:
433
 
            self.child_fraction = 0
434
 
        else:
435
 
            self.child_fraction = float(current) / total
436
 
        self.tick()
437
 
 
438
 
    def tick(self):
439
 
        if self.current is None:
440
 
            count = None
441
 
        else:
442
 
            count = self.current+self.child_fraction
443
 
            if count > self.total:
444
 
                if __debug__:
445
 
                    mutter('clamping count of %d to %d' % (count, self.total))
446
 
                count = self.total
447
 
        self.parent.child_update(self.message, count, self.total)
448
 
 
449
 
    def clear(self):
450
 
        pass
451
 
 
452
 
    def note(self, *args, **kwargs):
453
 
        self.parent.note(*args, **kwargs)
454
 
 
455
 
 
 
262
    
 
263
 
 
264
        
456
265
def str_tdelta(delt):
457
266
    if delt is None:
458
267
        return "-:--:--"
475
284
    if current > total:
476
285
        return None                     # wtf?
477
286
 
478
 
    elapsed = time.clock() - start_time
 
287
    elapsed = time.time() - start_time
479
288
 
480
289
    if elapsed < 2.0:                   # not enough time to estimate
481
290
        return None
498
307
    return total_duration - elapsed
499
308
 
500
309
 
501
 
class ProgressPhase(object):
502
 
    """Update progress object with the current phase"""
503
 
    def __init__(self, message, total, pb):
504
 
        object.__init__(self)
505
 
        self.pb = pb
506
 
        self.message = message
507
 
        self.total = total
508
 
        self.cur_phase = None
509
 
 
510
 
    def next_phase(self):
511
 
        if self.cur_phase is None:
512
 
            self.cur_phase = 0
513
 
        else:
514
 
            self.cur_phase += 1
515
 
        assert self.cur_phase < self.total 
516
 
        self.pb.update(self.message, self.cur_phase, self.total)
517
 
 
518
 
 
519
310
def run_tests():
520
311
    import doctest
521
312
    result = doctest.testmod()