~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/tests/test_progress.py

  • Committer: Canonical.com Patch Queue Manager
  • Date: 2008-09-03 22:30:56 UTC
  • mfrom: (3644.2.13 index_builder_cleanup)
  • Revision ID: pqm@pqm.ubuntu.com-20080903223056-b108iytb38xkznci
(jam) Streamline BTreeBuilder.add_node et al to make btree creation
        faster.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2006-2011 Canonical Ltd
 
1
# Copyright (C) 2006, 2007 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
 
 
17
 
 
18
 
from cStringIO import StringIO
19
 
 
20
 
from bzrlib import (
21
 
    tests,
22
 
    )
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
16
 
 
17
import os
 
18
from StringIO import StringIO
 
19
 
 
20
from bzrlib import errors
23
21
from bzrlib.progress import (
24
 
    ProgressTask,
25
 
    )
26
 
from bzrlib.ui.text import (
27
 
    TextProgressView,
28
 
    )
29
 
 
30
 
 
31
 
class TestTextProgressView(tests.TestCase):
32
 
    """Tests for text display of progress bars.
33
 
 
34
 
    These try to exercise the progressview independently of its construction,
35
 
    which is arranged by the TextUIFactory.
36
 
    """
37
 
    # The ProgressTask now connects directly to the ProgressView, so we can
38
 
    # check them independently of the factory or of the determination of what
39
 
    # view to use.
40
 
 
41
 
    def make_view_only(self, out, width=79):
42
 
        view = TextProgressView(out)
43
 
        view._avail_width = lambda: width
44
 
        return view
45
 
 
46
 
    def make_view(self):
47
 
        out = StringIO()
48
 
        return out, self.make_view_only(out)
49
 
 
50
 
    def make_task(self, parent_task, view, msg, curr, total):
51
 
        # would normally be done by UIFactory; is done here so that we don't
52
 
        # have to have one.
53
 
        task = ProgressTask(parent_task, progress_view=view)
54
 
        task.msg = msg
55
 
        task.current_cnt = curr
56
 
        task.total_cnt = total
57
 
        return task
 
22
        DummyProgress,
 
23
        ChildProgress,
 
24
        TTYProgressBar,
 
25
        DotsProgressBar,
 
26
        ProgressBarStack,
 
27
        InstrumentedProgress,
 
28
        )
 
29
from bzrlib.tests import TestCase
 
30
 
 
31
 
 
32
class FakeStack:
 
33
 
 
34
    def __init__(self, top):
 
35
        self.__top = top
 
36
 
 
37
    def top(self):
 
38
        return self.__top
 
39
 
 
40
 
 
41
class _TTYStringIO(StringIO):
 
42
    """A helper class which makes a StringIO look like a terminal"""
 
43
 
 
44
    def isatty(self):
 
45
        return True
 
46
 
 
47
 
 
48
class _NonTTYStringIO(StringIO):
 
49
    """Helper that implements isatty() but returns False"""
 
50
 
 
51
    def isatty(self):
 
52
        return False
 
53
 
 
54
 
 
55
class TestProgress(TestCase):
 
56
 
 
57
    def setUp(self):
 
58
        q = DummyProgress()
 
59
        self.top = ChildProgress(_stack=FakeStack(q))
 
60
 
 
61
    def test_propogation(self):
 
62
        self.top.update('foobles', 1, 2)
 
63
        self.assertEqual(self.top.message, 'foobles')
 
64
        self.assertEqual(self.top.current, 1)
 
65
        self.assertEqual(self.top.total, 2)
 
66
        self.assertEqual(self.top.child_fraction, 0)
 
67
        child = ChildProgress(_stack=FakeStack(self.top))
 
68
        child.update('baubles', 2, 4)
 
69
        self.assertEqual(self.top.message, 'foobles')
 
70
        self.assertEqual(self.top.current, 1)
 
71
        self.assertEqual(self.top.total, 2)
 
72
        self.assertEqual(self.top.child_fraction, 0.5)
 
73
        grandchild = ChildProgress(_stack=FakeStack(child))
 
74
        grandchild.update('barbells', 1, 2)
 
75
        self.assertEqual(self.top.child_fraction, 0.625)
 
76
        self.assertEqual(child.child_fraction, 0.5)
 
77
        child.update('baubles', 3, 4)
 
78
        self.assertEqual(child.child_fraction, 0)
 
79
        self.assertEqual(self.top.child_fraction, 0.75)
 
80
        grandchild.update('barbells', 1, 2)
 
81
        self.assertEqual(self.top.child_fraction, 0.875)
 
82
        grandchild.update('barbells', 2, 2)
 
83
        self.assertEqual(self.top.child_fraction, 1)
 
84
        child.update('baubles', 4, 4)
 
85
        self.assertEqual(self.top.child_fraction, 1)
 
86
        #test clamping
 
87
        grandchild.update('barbells', 2, 2)
 
88
        self.assertEqual(self.top.child_fraction, 1)
 
89
 
 
90
    def test_implementations(self):
 
91
        for implementation in (TTYProgressBar, DotsProgressBar, 
 
92
                               DummyProgress):
 
93
            self.check_parent_handling(implementation)
 
94
 
 
95
    def check_parent_handling(self, parentclass):
 
96
        top = parentclass(to_file=StringIO())
 
97
        top.update('foobles', 1, 2)
 
98
        child = ChildProgress(_stack=FakeStack(top))
 
99
        child.update('baubles', 4, 4)
 
100
        top.update('lala', 2, 2)
 
101
        child.update('baubles', 4, 4)
 
102
 
 
103
    def test_stacking(self):
 
104
        self.check_stack(TTYProgressBar, ChildProgress)
 
105
        self.check_stack(DotsProgressBar, ChildProgress)
 
106
        self.check_stack(DummyProgress, DummyProgress)
 
107
 
 
108
    def check_stack(self, parent_class, child_class):
 
109
        stack = ProgressBarStack(klass=parent_class, to_file=StringIO())
 
110
        parent = stack.get_nested()
 
111
        try:
 
112
            self.assertIs(parent.__class__, parent_class)
 
113
            child = stack.get_nested()
 
114
            try:
 
115
                self.assertIs(child.__class__, child_class)
 
116
            finally:
 
117
                child.finished()
 
118
        finally:
 
119
            parent.finished()
 
120
 
 
121
    def test_throttling(self):
 
122
        pb = InstrumentedProgress(to_file=StringIO())
 
123
        # instantaneous updates should be squelched
 
124
        pb.update('me', 1, 1)
 
125
        self.assertTrue(pb.always_throttled)
 
126
        pb = InstrumentedProgress(to_file=StringIO())
 
127
        # It's like an instant sleep(1)!
 
128
        pb.start_time -= 1
 
129
        # Updates after a second should not be squelched
 
130
        pb.update('me', 1, 1)
 
131
        self.assertFalse(pb.always_throttled)
58
132
 
59
133
    def test_clear(self):
60
 
        # <https://bugs.launchpad.net/bzr/+bug/611127> clear must actually
61
 
        # send spaces to clear the line
62
 
        out, view = self.make_view()
63
 
        task = self.make_task(None, view, 'reticulating splines', 5, 20)
64
 
        view.show_progress(task)
65
 
        self.assertEqual(
66
 
'\r/ reticulating splines 5/20                                                    \r'
67
 
            , out.getvalue())
68
 
        view.clear()
69
 
        self.assertEqual(
70
 
'\r/ reticulating splines 5/20                                                    \r'
71
 
            + '\r' + 79 * ' ' + '\r',
72
 
            out.getvalue())
73
 
 
74
 
    def test_render_progress_no_bar(self):
75
 
        """The default view now has a spinner but no bar."""
76
 
        out, view = self.make_view()
77
 
        # view.enable_bar = False
78
 
        task = self.make_task(None, view, 'reticulating splines', 5, 20)
79
 
        view.show_progress(task)
80
 
        self.assertEqual(
81
 
'\r/ reticulating splines 5/20                                                    \r'
82
 
            , out.getvalue())
83
 
 
84
 
    def test_render_progress_easy(self):
85
 
        """Just one task and one quarter done"""
86
 
        out, view = self.make_view()
87
 
        view.enable_bar = True
88
 
        task = self.make_task(None, view, 'reticulating splines', 5, 20)
89
 
        view.show_progress(task)
90
 
        self.assertEqual(
91
 
'\r[####/               ] reticulating splines 5/20                               \r'
92
 
            , out.getvalue())
93
 
 
94
 
    def test_render_progress_nested(self):
95
 
        """Tasks proportionally contribute to overall progress"""
96
 
        out, view = self.make_view()
97
 
        task = self.make_task(None, view, 'reticulating splines', 0, 2)
98
 
        task2 = self.make_task(task, view, 'stage2', 1, 2)
99
 
        view.show_progress(task2)
100
 
        view.enable_bar = True
101
 
        # so we're in the first half of the main task, and half way through
102
 
        # that
103
 
        self.assertEqual(
104
 
'[####-               ] reticulating splines:stage2 1/2                         '
105
 
            , view._render_line())
106
 
        # if the nested task is complete, then we're all the way through the
107
 
        # first half of the overall work
108
 
        task2.update('stage2', 2, 2)
109
 
        self.assertEqual(
110
 
'[#########\          ] reticulating splines:stage2 2/2                         '
111
 
            , view._render_line())
112
 
 
113
 
    def test_render_progress_sub_nested(self):
114
 
        """Intermediate tasks don't mess up calculation."""
115
 
        out, view = self.make_view()
116
 
        view.enable_bar = True
117
 
        task_a = ProgressTask(None, progress_view=view)
118
 
        task_a.update('a', 0, 2)
119
 
        task_b = ProgressTask(task_a, progress_view=view)
120
 
        task_b.update('b')
121
 
        task_c = ProgressTask(task_b, progress_view=view)
122
 
        task_c.update('c', 1, 2)
123
 
        # the top-level task is in its first half; the middle one has no
124
 
        # progress indication, just a label; and the bottom one is half done,
125
 
        # so the overall fraction is 1/4
126
 
        self.assertEqual(
127
 
'[####|               ] a:b:c 1/2                                               '
128
 
            , view._render_line())
129
 
 
130
 
    def test_render_truncated(self):
131
 
        # when the bar is too long for the terminal, we prefer not to truncate
132
 
        # the counters because they might be interesting, and because
133
 
        # truncating the numbers might be misleading
134
 
        out, view = self.make_view()
135
 
        task_a = ProgressTask(None, progress_view=view)
136
 
        task_a.update('start_' + 'a' * 200 + '_end', 2000, 5000)
137
 
        line = view._render_line()
138
 
        self.assertEqual(
139
 
'- start_aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa.. 2000/5000',
140
 
           line) 
141
 
        self.assertEqual(len(line), 79)
142
 
 
143
 
 
144
 
    def test_render_with_activity(self):
145
 
        # if the progress view has activity, it's shown before the spinner
146
 
        out, view = self.make_view()
147
 
        task_a = ProgressTask(None, progress_view=view)
148
 
        view._last_transport_msg = '   123kB   100kB/s '
149
 
        line = view._render_line()
150
 
        self.assertEqual(
151
 
'   123kB   100kB/s /                                                           ',
152
 
           line) 
153
 
        self.assertEqual(len(line), 79)
154
 
 
155
 
        task_a.update('start_' + 'a' * 200 + '_end', 2000, 5000)
156
 
        view._last_transport_msg = '   123kB   100kB/s '
157
 
        line = view._render_line()
158
 
        self.assertEqual(
159
 
'   123kB   100kB/s \\ start_aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa.. 2000/5000',
160
 
           line) 
161
 
        self.assertEqual(len(line), 79)
162
 
 
163
 
    def test_render_progress_unicode_enc_utf8(self):
164
 
        out = tests.StringIOWrapper()
165
 
        out.encoding = "utf-8"
166
 
        view = self.make_view_only(out, 20)
167
 
        task = self.make_task(None, view, u"\xa7", 0, 1)
168
 
        view.show_progress(task)
169
 
        self.assertEqual('\r/ \xc2\xa7 0/1            \r',
170
 
            out.getvalue())
171
 
 
172
 
    def test_render_progress_unicode_enc_missing(self):
173
 
        out = StringIO()
174
 
        self.assertRaises(AttributeError, getattr, out, "encoding")
175
 
        view = self.make_view_only(out, 20)
176
 
        task = self.make_task(None, view, u"\xa7", 0, 1)
177
 
        view.show_progress(task)
178
 
        self.assertEqual('\r/ ? 0/1             \r',
179
 
            out.getvalue())
180
 
 
181
 
    def test_render_progress_unicode_enc_none(self):
182
 
        out = tests.StringIOWrapper()
183
 
        out.encoding = None
184
 
        view = self.make_view_only(out, 20)
185
 
        task = self.make_task(None, view, u"\xa7", 0, 1)
186
 
        view.show_progress(task)
187
 
        self.assertEqual('\r/ ? 0/1             \r',
188
 
            out.getvalue())
 
134
        sio = StringIO()
 
135
        pb = TTYProgressBar(to_file=sio, show_eta=False)
 
136
        pb.width = 20 # Just make it easier to test
 
137
        # This should not output anything
 
138
        pb.clear()
 
139
        # These two should not be displayed because
 
140
        # of throttling
 
141
        pb.update('foo', 1, 3)
 
142
        pb.update('bar', 2, 3)
 
143
        # So pb.clear() has nothing to do
 
144
        pb.clear()
 
145
 
 
146
        # Make sure the next update isn't throttled
 
147
        pb.start_time -= 1
 
148
        pb.update('baz', 3, 3)
 
149
        pb.clear()
 
150
 
 
151
        self.assertEqual('\r[=========] baz 3/3'
 
152
                         '\r                   \r',
 
153
                         sio.getvalue())
 
154
 
 
155
    def test_no_eta(self):
 
156
        # An old version of the progress bar would
 
157
        # store every update if show_eta was false
 
158
        # because the eta routine was where it was
 
159
        # cleaned out
 
160
        pb = InstrumentedProgress(to_file=StringIO(), show_eta=False)
 
161
        # Just make sure this first few are throttled
 
162
        pb.start_time += 5
 
163
 
 
164
        # These messages are throttled, and don't contribute
 
165
        for count in xrange(100):
 
166
            pb.update('x', count, 300)
 
167
        self.assertEqual(0, len(pb.last_updates))
 
168
 
 
169
        # Unthrottle by time
 
170
        pb.start_time -= 10
 
171
 
 
172
        # These happen too fast, so only one gets through
 
173
        for count in xrange(100):
 
174
            pb.update('x', count+100, 200)
 
175
        self.assertEqual(1, len(pb.last_updates))
 
176
 
 
177
        pb.MIN_PAUSE = 0.0
 
178
 
 
179
        # But all of these go through, don't let the
 
180
        # last_update list grow without bound
 
181
        for count in xrange(100):
 
182
            pb.update('x', count+100, 200)
 
183
 
 
184
        self.assertEqual(pb._max_last_updates, len(pb.last_updates))
 
185
 
 
186
 
 
187
class TestProgressTypes(TestCase):
 
188
    """Test that the right ProgressBar gets instantiated at the right time."""
 
189
 
 
190
    def get_nested(self, outf, term, env_progress=None):
 
191
        """Setup so that ProgressBar thinks we are in the supplied terminal."""
 
192
        orig_term = os.environ.get('TERM')
 
193
        orig_progress = os.environ.get('BZR_PROGRESS_BAR')
 
194
        os.environ['TERM'] = term
 
195
        if env_progress is not None:
 
196
            os.environ['BZR_PROGRESS_BAR'] = env_progress
 
197
        elif orig_progress is not None:
 
198
            del os.environ['BZR_PROGRESS_BAR']
 
199
 
 
200
        def reset():
 
201
            if orig_term is None:
 
202
                del os.environ['TERM']
 
203
            else:
 
204
                os.environ['TERM'] = orig_term
 
205
            # We may have never created BZR_PROGRESS_BAR
 
206
            # So we can't just delete like we can 'TERM' (which is always set)
 
207
            if orig_progress is None:
 
208
                if 'BZR_PROGRESS_BAR' in os.environ:
 
209
                    del os.environ['BZR_PROGRESS_BAR']
 
210
            else:
 
211
                os.environ['BZR_PROGRESS_BAR'] = orig_progress
 
212
 
 
213
        self.addCleanup(reset)
 
214
 
 
215
        stack = ProgressBarStack(to_file=outf)
 
216
        pb = stack.get_nested()
 
217
        pb.start_time -= 1 # Make sure it is ready to write
 
218
        pb.width = 20 # And it is of reasonable size
 
219
        return pb
 
220
 
 
221
    def test_tty_progress(self):
 
222
        # Make sure the ProgressBarStack thinks it is
 
223
        # writing out to a terminal, and thus uses a TTYProgressBar
 
224
        out = _TTYStringIO()
 
225
        pb = self.get_nested(out, 'xterm')
 
226
        self.assertIsInstance(pb, TTYProgressBar)
 
227
        try:
 
228
            pb.update('foo', 1, 2)
 
229
            pb.update('bar', 2, 2)
 
230
        finally:
 
231
            pb.finished()
 
232
 
 
233
        self.assertEqual('\r/ [====   ] foo 1/2'
 
234
                         '\r- [=======] bar 2/2'
 
235
                         '\r                   \r',
 
236
                         out.getvalue())
 
237
 
 
238
    def test_noninteractive_progress(self):
 
239
        out = _NonTTYStringIO()
 
240
        pb = self.get_nested(out, 'xterm')
 
241
        self.assertIsInstance(pb, DummyProgress)
 
242
        try:
 
243
            pb.update('foo', 1, 2)
 
244
            pb.update('bar', 2, 2)
 
245
        finally:
 
246
            pb.finished()
 
247
        self.assertEqual('', out.getvalue())
 
248
 
 
249
    def test_dots_progress(self):
 
250
        # make sure we get the right progress bar when not on a terminal
 
251
        out = _NonTTYStringIO()
 
252
        pb = self.get_nested(out, 'xterm', 'dots')
 
253
        self.assertIsInstance(pb, DotsProgressBar)
 
254
        try:
 
255
            pb.update('foo', 1, 2)
 
256
            pb.update('bar', 2, 2)
 
257
        finally:
 
258
            pb.finished()
 
259
        self.assertEqual('foo: .'
 
260
                         '\nbar: .'
 
261
                         '\n',
 
262
                         out.getvalue())
 
263
 
 
264
    def test_no_isatty_progress(self):
 
265
        # Make sure ProgressBarStack handles a plain StringIO()
 
266
        import cStringIO
 
267
        out = cStringIO.StringIO()
 
268
        pb = self.get_nested(out, 'xterm')
 
269
        pb.finished()
 
270
        self.assertIsInstance(pb, DummyProgress)
 
271
 
 
272
    def test_dumb_progress(self):
 
273
        # using a terminal that can't do cursor movement
 
274
        out = _TTYStringIO()
 
275
        pb = self.get_nested(out, 'dumb')
 
276
        pb.finished()
 
277
        self.assertIsInstance(pb, DummyProgress)
 
278
 
 
279
    def test_progress_env_tty(self):
 
280
        # The environ variable BZR_PROGRESS_BAR controls what type of
 
281
        # progress bar we will get, even if it wouldn't usually be that type
 
282
        import cStringIO
 
283
 
 
284
        # Usually, this would be a DotsProgressBar
 
285
        out = cStringIO.StringIO()
 
286
        pb = self.get_nested(out, 'dumb', 'tty')
 
287
        pb.finished()
 
288
        # Even though we are not a tty, the env_var will override
 
289
        self.assertIsInstance(pb, TTYProgressBar)
 
290
 
 
291
    def test_progress_env_none(self):
 
292
        # Even though we are in a valid tty, no progress
 
293
        out = _TTYStringIO()
 
294
        pb = self.get_nested(out, 'xterm', 'none')
 
295
        pb.finished()
 
296
        self.assertIsInstance(pb, DummyProgress)
 
297
 
 
298
    def test_progress_env_invalid(self):
 
299
        out = _TTYStringIO()
 
300
        self.assertRaises(errors.InvalidProgressBarType, self.get_nested,
 
301
            out, 'xterm', 'nonexistant')