~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/tests/test_progress.py

(vila) Fix test failures blocking package builds. (Vincent Ladeuil)

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2006, 2007 Canonical Ltd
 
1
# Copyright (C) 2006-2011 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
 
 
17
 
import os
18
 
from StringIO import StringIO
19
 
 
20
 
from bzrlib import errors
 
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
16
 
 
17
 
 
18
from cStringIO import StringIO
 
19
 
 
20
from bzrlib import (
 
21
    tests,
 
22
    )
21
23
from bzrlib.progress import (
22
 
        DummyProgress,
23
 
        ChildProgress,
24
 
        TTYProgressBar,
25
 
        DotsProgressBar,
26
 
        ProgressBarStack,
27
 
        InstrumentedProgress,
28
 
        )
29
 
from bzrlib.tests import TestCase
30
 
 
31
 
 
32
 
class FakeStack:
33
 
 
34
 
    def __init__(self, top):
35
 
        self.__top = top
36
 
 
37
 
    def top(self):
38
 
        return self.__top
39
 
 
40
 
 
41
 
class _TTYStringIO(StringIO):
42
 
    """A helper class which makes a StringIO look like a terminal"""
43
 
 
44
 
    def isatty(self):
45
 
        return True
46
 
 
47
 
 
48
 
class _NonTTYStringIO(StringIO):
49
 
    """Helper that implements isatty() but returns False"""
50
 
 
51
 
    def isatty(self):
52
 
        return False
53
 
 
54
 
 
55
 
class TestProgress(TestCase):
56
 
 
57
 
    def setUp(self):
58
 
        q = DummyProgress()
59
 
        self.top = ChildProgress(_stack=FakeStack(q))
60
 
 
61
 
    def test_propogation(self):
62
 
        self.top.update('foobles', 1, 2)
63
 
        self.assertEqual(self.top.message, 'foobles')
64
 
        self.assertEqual(self.top.current, 1)
65
 
        self.assertEqual(self.top.total, 2)
66
 
        self.assertEqual(self.top.child_fraction, 0)
67
 
        child = ChildProgress(_stack=FakeStack(self.top))
68
 
        child.update('baubles', 2, 4)
69
 
        self.assertEqual(self.top.message, 'foobles')
70
 
        self.assertEqual(self.top.current, 1)
71
 
        self.assertEqual(self.top.total, 2)
72
 
        self.assertEqual(self.top.child_fraction, 0.5)
73
 
        grandchild = ChildProgress(_stack=FakeStack(child))
74
 
        grandchild.update('barbells', 1, 2)
75
 
        self.assertEqual(self.top.child_fraction, 0.625)
76
 
        self.assertEqual(child.child_fraction, 0.5)
77
 
        child.update('baubles', 3, 4)
78
 
        self.assertEqual(child.child_fraction, 0)
79
 
        self.assertEqual(self.top.child_fraction, 0.75)
80
 
        grandchild.update('barbells', 1, 2)
81
 
        self.assertEqual(self.top.child_fraction, 0.875)
82
 
        grandchild.update('barbells', 2, 2)
83
 
        self.assertEqual(self.top.child_fraction, 1)
84
 
        child.update('baubles', 4, 4)
85
 
        self.assertEqual(self.top.child_fraction, 1)
86
 
        #test clamping
87
 
        grandchild.update('barbells', 2, 2)
88
 
        self.assertEqual(self.top.child_fraction, 1)
89
 
 
90
 
    def test_implementations(self):
91
 
        for implementation in (TTYProgressBar, DotsProgressBar, 
92
 
                               DummyProgress):
93
 
            self.check_parent_handling(implementation)
94
 
 
95
 
    def check_parent_handling(self, parentclass):
96
 
        top = parentclass(to_file=StringIO())
97
 
        top.update('foobles', 1, 2)
98
 
        child = ChildProgress(_stack=FakeStack(top))
99
 
        child.update('baubles', 4, 4)
100
 
        top.update('lala', 2, 2)
101
 
        child.update('baubles', 4, 4)
102
 
 
103
 
    def test_stacking(self):
104
 
        self.check_stack(TTYProgressBar, ChildProgress)
105
 
        self.check_stack(DotsProgressBar, ChildProgress)
106
 
        self.check_stack(DummyProgress, DummyProgress)
107
 
 
108
 
    def check_stack(self, parent_class, child_class):
109
 
        stack = ProgressBarStack(klass=parent_class, to_file=StringIO())
110
 
        parent = stack.get_nested()
111
 
        try:
112
 
            self.assertIs(parent.__class__, parent_class)
113
 
            child = stack.get_nested()
114
 
            try:
115
 
                self.assertIs(child.__class__, child_class)
116
 
            finally:
117
 
                child.finished()
118
 
        finally:
119
 
            parent.finished()
120
 
 
121
 
    def test_throttling(self):
122
 
        pb = InstrumentedProgress(to_file=StringIO())
123
 
        # instantaneous updates should be squelched
124
 
        pb.update('me', 1, 1)
125
 
        self.assertTrue(pb.always_throttled)
126
 
        pb = InstrumentedProgress(to_file=StringIO())
127
 
        # It's like an instant sleep(1)!
128
 
        pb.start_time -= 1
129
 
        # Updates after a second should not be squelched
130
 
        pb.update('me', 1, 1)
131
 
        self.assertFalse(pb.always_throttled)
 
24
    ProgressTask,
 
25
    )
 
26
from bzrlib.ui.text import (
 
27
    TextProgressView,
 
28
    )
 
29
 
 
30
 
 
31
class TestTextProgressView(tests.TestCase):
 
32
    """Tests for text display of progress bars.
 
33
 
 
34
    These try to exercise the progressview independently of its construction,
 
35
    which is arranged by the TextUIFactory.
 
36
    """
 
37
    # The ProgressTask now connects directly to the ProgressView, so we can
 
38
    # check them independently of the factory or of the determination of what
 
39
    # view to use.
 
40
 
 
41
    def make_view_only(self, out, width=79):
 
42
        view = TextProgressView(out)
 
43
        view._avail_width = lambda: width
 
44
        return view
 
45
 
 
46
    def make_view(self):
 
47
        out = StringIO()
 
48
        return out, self.make_view_only(out)
 
49
 
 
50
    def make_task(self, parent_task, view, msg, curr, total):
 
51
        # would normally be done by UIFactory; is done here so that we don't
 
52
        # have to have one.
 
53
        task = ProgressTask(parent_task, progress_view=view)
 
54
        task.msg = msg
 
55
        task.current_cnt = curr
 
56
        task.total_cnt = total
 
57
        return task
132
58
 
133
59
    def test_clear(self):
134
 
        sio = StringIO()
135
 
        pb = TTYProgressBar(to_file=sio, show_eta=False)
136
 
        pb.width = 20 # Just make it easier to test
137
 
        # This should not output anything
138
 
        pb.clear()
139
 
        # These two should not be displayed because
140
 
        # of throttling
141
 
        pb.update('foo', 1, 3)
142
 
        pb.update('bar', 2, 3)
143
 
        # So pb.clear() has nothing to do
144
 
        pb.clear()
145
 
 
146
 
        # Make sure the next update isn't throttled
147
 
        pb.start_time -= 1
148
 
        pb.update('baz', 3, 3)
149
 
        pb.clear()
150
 
 
151
 
        self.assertEqual('\r[=========] baz 3/3'
152
 
                         '\r                   \r',
153
 
                         sio.getvalue())
154
 
 
155
 
    def test_no_eta(self):
156
 
        # An old version of the progress bar would
157
 
        # store every update if show_eta was false
158
 
        # because the eta routine was where it was
159
 
        # cleaned out
160
 
        pb = InstrumentedProgress(to_file=StringIO(), show_eta=False)
161
 
        # Just make sure this first few are throttled
162
 
        pb.start_time += 5
163
 
 
164
 
        # These messages are throttled, and don't contribute
165
 
        for count in xrange(100):
166
 
            pb.update('x', count, 300)
167
 
        self.assertEqual(0, len(pb.last_updates))
168
 
 
169
 
        # Unthrottle by time
170
 
        pb.start_time -= 10
171
 
 
172
 
        # These happen too fast, so only one gets through
173
 
        for count in xrange(100):
174
 
            pb.update('x', count+100, 200)
175
 
        self.assertEqual(1, len(pb.last_updates))
176
 
 
177
 
        pb.MIN_PAUSE = 0.0
178
 
 
179
 
        # But all of these go through, don't let the
180
 
        # last_update list grow without bound
181
 
        for count in xrange(100):
182
 
            pb.update('x', count+100, 200)
183
 
 
184
 
        self.assertEqual(pb._max_last_updates, len(pb.last_updates))
185
 
 
186
 
 
187
 
class TestProgressTypes(TestCase):
188
 
    """Test that the right ProgressBar gets instantiated at the right time."""
189
 
 
190
 
    def get_nested(self, outf, term, env_progress=None):
191
 
        """Setup so that ProgressBar thinks we are in the supplied terminal."""
192
 
        orig_term = os.environ.get('TERM')
193
 
        orig_progress = os.environ.get('BZR_PROGRESS_BAR')
194
 
        os.environ['TERM'] = term
195
 
        if env_progress is not None:
196
 
            os.environ['BZR_PROGRESS_BAR'] = env_progress
197
 
        elif orig_progress is not None:
198
 
            del os.environ['BZR_PROGRESS_BAR']
199
 
 
200
 
        def reset():
201
 
            if orig_term is None:
202
 
                del os.environ['TERM']
203
 
            else:
204
 
                os.environ['TERM'] = orig_term
205
 
            # We may have never created BZR_PROGRESS_BAR
206
 
            # So we can't just delete like we can 'TERM' (which is always set)
207
 
            if orig_progress is None:
208
 
                if 'BZR_PROGRESS_BAR' in os.environ:
209
 
                    del os.environ['BZR_PROGRESS_BAR']
210
 
            else:
211
 
                os.environ['BZR_PROGRESS_BAR'] = orig_progress
212
 
 
213
 
        self.addCleanup(reset)
214
 
 
215
 
        stack = ProgressBarStack(to_file=outf)
216
 
        pb = stack.get_nested()
217
 
        pb.start_time -= 1 # Make sure it is ready to write
218
 
        pb.width = 20 # And it is of reasonable size
219
 
        return pb
220
 
 
221
 
    def test_tty_progress(self):
222
 
        # Make sure the ProgressBarStack thinks it is
223
 
        # writing out to a terminal, and thus uses a TTYProgressBar
224
 
        out = _TTYStringIO()
225
 
        pb = self.get_nested(out, 'xterm')
226
 
        self.assertIsInstance(pb, TTYProgressBar)
227
 
        try:
228
 
            pb.update('foo', 1, 2)
229
 
            pb.update('bar', 2, 2)
230
 
        finally:
231
 
            pb.finished()
232
 
 
233
 
        self.assertEqual('\r/ [====   ] foo 1/2'
234
 
                         '\r- [=======] bar 2/2'
235
 
                         '\r                   \r',
236
 
                         out.getvalue())
237
 
 
238
 
    def test_noninteractive_progress(self):
239
 
        out = _NonTTYStringIO()
240
 
        pb = self.get_nested(out, 'xterm')
241
 
        self.assertIsInstance(pb, DummyProgress)
242
 
        try:
243
 
            pb.update('foo', 1, 2)
244
 
            pb.update('bar', 2, 2)
245
 
        finally:
246
 
            pb.finished()
247
 
        self.assertEqual('', out.getvalue())
248
 
 
249
 
    def test_dots_progress(self):
250
 
        # make sure we get the right progress bar when not on a terminal
251
 
        out = _NonTTYStringIO()
252
 
        pb = self.get_nested(out, 'xterm', 'dots')
253
 
        self.assertIsInstance(pb, DotsProgressBar)
254
 
        try:
255
 
            pb.update('foo', 1, 2)
256
 
            pb.update('bar', 2, 2)
257
 
        finally:
258
 
            pb.finished()
259
 
        self.assertEqual('foo: .'
260
 
                         '\nbar: .'
261
 
                         '\n',
262
 
                         out.getvalue())
263
 
 
264
 
    def test_no_isatty_progress(self):
265
 
        # Make sure ProgressBarStack handles a plain StringIO()
266
 
        import cStringIO
267
 
        out = cStringIO.StringIO()
268
 
        pb = self.get_nested(out, 'xterm')
269
 
        pb.finished()
270
 
        self.assertIsInstance(pb, DummyProgress)
271
 
 
272
 
    def test_dumb_progress(self):
273
 
        # using a terminal that can't do cursor movement
274
 
        out = _TTYStringIO()
275
 
        pb = self.get_nested(out, 'dumb')
276
 
        pb.finished()
277
 
        self.assertIsInstance(pb, DummyProgress)
278
 
 
279
 
    def test_progress_env_tty(self):
280
 
        # The environ variable BZR_PROGRESS_BAR controls what type of
281
 
        # progress bar we will get, even if it wouldn't usually be that type
282
 
        import cStringIO
283
 
 
284
 
        # Usually, this would be a DotsProgressBar
285
 
        out = cStringIO.StringIO()
286
 
        pb = self.get_nested(out, 'dumb', 'tty')
287
 
        pb.finished()
288
 
        # Even though we are not a tty, the env_var will override
289
 
        self.assertIsInstance(pb, TTYProgressBar)
290
 
 
291
 
    def test_progress_env_none(self):
292
 
        # Even though we are in a valid tty, no progress
293
 
        out = _TTYStringIO()
294
 
        pb = self.get_nested(out, 'xterm', 'none')
295
 
        pb.finished()
296
 
        self.assertIsInstance(pb, DummyProgress)
297
 
 
298
 
    def test_progress_env_invalid(self):
299
 
        out = _TTYStringIO()
300
 
        self.assertRaises(errors.InvalidProgressBarType, self.get_nested,
301
 
            out, 'xterm', 'nonexistant')
 
60
        # <https://bugs.launchpad.net/bzr/+bug/611127> clear must actually
 
61
        # send spaces to clear the line
 
62
        out, view = self.make_view()
 
63
        task = self.make_task(None, view, 'reticulating splines', 5, 20)
 
64
        view.show_progress(task)
 
65
        self.assertEqual(
 
66
'\r/ reticulating splines 5/20                                                    \r'
 
67
            , out.getvalue())
 
68
        view.clear()
 
69
        self.assertEqual(
 
70
'\r/ reticulating splines 5/20                                                    \r'
 
71
            + '\r' + 79 * ' ' + '\r',
 
72
            out.getvalue())
 
73
 
 
74
    def test_render_progress_no_bar(self):
 
75
        """The default view now has a spinner but no bar."""
 
76
        out, view = self.make_view()
 
77
        # view.enable_bar = False
 
78
        task = self.make_task(None, view, 'reticulating splines', 5, 20)
 
79
        view.show_progress(task)
 
80
        self.assertEqual(
 
81
'\r/ reticulating splines 5/20                                                    \r'
 
82
            , out.getvalue())
 
83
 
 
84
    def test_render_progress_easy(self):
 
85
        """Just one task and one quarter done"""
 
86
        out, view = self.make_view()
 
87
        view.enable_bar = True
 
88
        task = self.make_task(None, view, 'reticulating splines', 5, 20)
 
89
        view.show_progress(task)
 
90
        self.assertEqual(
 
91
'\r[####/               ] reticulating splines 5/20                               \r'
 
92
            , out.getvalue())
 
93
 
 
94
    def test_render_progress_nested(self):
 
95
        """Tasks proportionally contribute to overall progress"""
 
96
        out, view = self.make_view()
 
97
        task = self.make_task(None, view, 'reticulating splines', 0, 2)
 
98
        task2 = self.make_task(task, view, 'stage2', 1, 2)
 
99
        view.show_progress(task2)
 
100
        view.enable_bar = True
 
101
        # so we're in the first half of the main task, and half way through
 
102
        # that
 
103
        self.assertEqual(
 
104
'[####-               ] reticulating splines:stage2 1/2                         '
 
105
            , view._render_line())
 
106
        # if the nested task is complete, then we're all the way through the
 
107
        # first half of the overall work
 
108
        task2.update('stage2', 2, 2)
 
109
        self.assertEqual(
 
110
'[#########\          ] reticulating splines:stage2 2/2                         '
 
111
            , view._render_line())
 
112
 
 
113
    def test_render_progress_sub_nested(self):
 
114
        """Intermediate tasks don't mess up calculation."""
 
115
        out, view = self.make_view()
 
116
        view.enable_bar = True
 
117
        task_a = ProgressTask(None, progress_view=view)
 
118
        task_a.update('a', 0, 2)
 
119
        task_b = ProgressTask(task_a, progress_view=view)
 
120
        task_b.update('b')
 
121
        task_c = ProgressTask(task_b, progress_view=view)
 
122
        task_c.update('c', 1, 2)
 
123
        # the top-level task is in its first half; the middle one has no
 
124
        # progress indication, just a label; and the bottom one is half done,
 
125
        # so the overall fraction is 1/4
 
126
        self.assertEqual(
 
127
'[####|               ] a:b:c 1/2                                               '
 
128
            , view._render_line())
 
129
 
 
130
    def test_render_truncated(self):
 
131
        # when the bar is too long for the terminal, we prefer not to truncate
 
132
        # the counters because they might be interesting, and because
 
133
        # truncating the numbers might be misleading
 
134
        out, view = self.make_view()
 
135
        task_a = ProgressTask(None, progress_view=view)
 
136
        task_a.update('start_' + 'a' * 200 + '_end', 2000, 5000)
 
137
        line = view._render_line()
 
138
        self.assertEqual(
 
139
'- start_aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa.. 2000/5000',
 
140
           line) 
 
141
        self.assertEqual(len(line), 79)
 
142
 
 
143
 
 
144
    def test_render_with_activity(self):
 
145
        # if the progress view has activity, it's shown before the spinner
 
146
        out, view = self.make_view()
 
147
        task_a = ProgressTask(None, progress_view=view)
 
148
        view._last_transport_msg = '   123kB   100kB/s '
 
149
        line = view._render_line()
 
150
        self.assertEqual(
 
151
'   123kB   100kB/s /                                                           ',
 
152
           line) 
 
153
        self.assertEqual(len(line), 79)
 
154
 
 
155
        task_a.update('start_' + 'a' * 200 + '_end', 2000, 5000)
 
156
        view._last_transport_msg = '   123kB   100kB/s '
 
157
        line = view._render_line()
 
158
        self.assertEqual(
 
159
'   123kB   100kB/s \\ start_aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa.. 2000/5000',
 
160
           line) 
 
161
        self.assertEqual(len(line), 79)
 
162
 
 
163
    def test_render_progress_unicode_enc_utf8(self):
 
164
        out = tests.StringIOWrapper()
 
165
        out.encoding = "utf-8"
 
166
        view = self.make_view_only(out, 20)
 
167
        task = self.make_task(None, view, u"\xa7", 0, 1)
 
168
        view.show_progress(task)
 
169
        self.assertEqual('\r/ \xc2\xa7 0/1            \r',
 
170
            out.getvalue())
 
171
 
 
172
    def test_render_progress_unicode_enc_missing(self):
 
173
        out = StringIO()
 
174
        self.assertRaises(AttributeError, getattr, out, "encoding")
 
175
        view = self.make_view_only(out, 20)
 
176
        task = self.make_task(None, view, u"\xa7", 0, 1)
 
177
        view.show_progress(task)
 
178
        self.assertEqual('\r/ ? 0/1             \r',
 
179
            out.getvalue())
 
180
 
 
181
    def test_render_progress_unicode_enc_none(self):
 
182
        out = tests.StringIOWrapper()
 
183
        out.encoding = None
 
184
        view = self.make_view_only(out, 20)
 
185
        task = self.make_task(None, view, u"\xa7", 0, 1)
 
186
        view.show_progress(task)
 
187
        self.assertEqual('\r/ ? 0/1             \r',
 
188
            out.getvalue())