← Back to branch summary

~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/_rio_py.py

  • Committer: Canonical.com Patch Queue Manager
  • Date: 2008-09-03 22:30:56 UTC
  • mfrom: (3644.2.13 index_builder_cleanup)
  • Revision ID: pqm@pqm.ubuntu.com-20080903223056-b108iytb38xkznci
(jam) Streamline BTreeBuilder.add_node et al to make btree creation
        faster.

Show diffs side-by-side

added added

removed removed

Lines of Context:
bzrlib/_rio_py.py
1
 
# Copyright (C) 2009 Canonical Ltd
2
 
#
3
 
# This program is free software; you can redistribute it and/or modify
4
 
# it under the terms of the GNU General Public License as published by
5
 
# the Free Software Foundation; either version 2 of the License, or
6
 
# (at your option) any later version.
7
 
#
8
 
# This program is distributed in the hope that it will be useful,
9
 
# but WITHOUT ANY WARRANTY; without even the implied warranty of
10
 
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11
 
# GNU General Public License for more details.
12
 
#
13
 
# You should have received a copy of the GNU General Public License
14
 
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
 
 
17
 
"""Python implementation of _read_stanza_*."""
18
 
 
19
 
from __future__ import absolute_import
20
 
 
21
 
import re
22
 
 
23
 
from bzrlib.rio import (
24
 
    Stanza,
25
 
    )
26
 
 
27
 
_tag_re = re.compile(r'^[-a-zA-Z0-9_]+$')
28
 
def _valid_tag(tag):
29
 
    if type(tag) != str:
30
 
        raise TypeError(tag)
31
 
    return bool(_tag_re.match(tag))
32
 
 
33
 
 
34
 
def _read_stanza_utf8(line_iter):
35
 
    def iter_unicode_lines():
36
 
        for line in line_iter:
37
 
            if type(line) != str:
38
 
                raise TypeError(line)
39
 
            yield line.decode('utf-8')
40
 
    return _read_stanza_unicode(iter_unicode_lines())
41
 
 
42
 
 
43
 
def _read_stanza_unicode(unicode_iter):
44
 
    stanza = Stanza()
45
 
    tag = None
46
 
    accum_value = None
47
 
 
48
 
    # TODO: jam 20060922 This code should raise real errors rather than
49
 
    #       using 'assert' to process user input, or raising ValueError
50
 
    #       rather than a more specific error.
51
 
 
52
 
    for line in unicode_iter:
53
 
        if line is None or line == u'':
54
 
            break       # end of file
55
 
        if line == u'\n':
56
 
            break       # end of stanza
57
 
        real_l = line
58
 
        if line[0] == u'\t': # continues previous value
59
 
            if tag is None:
60
 
                raise ValueError('invalid continuation line %r' % real_l)
61
 
            accum_value.append(u'\n' + line[1:-1])
62
 
        else: # new tag:value line
63
 
            if tag is not None:
64
 
                stanza.add(tag, u''.join(accum_value))
65
 
            try:
66
 
                colon_index = line.index(u': ')
67
 
            except ValueError:
68
 
                raise ValueError('tag/value separator not found in line %r'
69
 
                                 % real_l)
70
 
            tag = str(line[:colon_index])
71
 
            if not _valid_tag(tag):
72
 
                raise ValueError("invalid rio tag %r" % (tag,))
73
 
            accum_value = [line[colon_index+2:-1]]
74
 
 
75
 
    if tag is not None: # add last tag-value
76
 
        stanza.add(tag, u''.join(accum_value))
77
 
        return stanza
78
 
    else:     # didn't see any content
79
 
        return None