~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/store/weave.py

  • Committer: Robert Collins
  • Date: 2006-01-05 22:30:59 UTC
  • mto: (1534.1.4 integration)
  • mto: This revision was merged to the branch mainline in revision 1536.
  • Revision ID: robertc@robertcollins.net-20060105223059-a8b64f7b47cf12fb
 * bzrlib.osutils.safe_unicode now exists to provide parameter coercion
   for functions that need unicode strings. (Robert Collins)

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
#! /usr/bin/python
 
2
 
 
3
# Copyright (C) 2005 Canonical Ltd
 
4
 
 
5
# This program is free software; you can redistribute it and/or modify
 
6
# it under the terms of the GNU General Public License as published by
 
7
# the Free Software Foundation; either version 2 of the License, or
 
8
# (at your option) any later version.
 
9
 
 
10
# This program is distributed in the hope that it will be useful,
 
11
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
12
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
13
# GNU General Public License for more details.
 
14
 
 
15
# You should have received a copy of the GNU General Public License
 
16
# along with this program; if not, write to the Free Software
 
17
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
 
18
 
 
19
# XXX: Some consideration of the problems that might occur if there are
 
20
# files whose id differs only in case.  That should probably be forbidden.
 
21
 
 
22
 
 
23
import errno
 
24
import os
 
25
from cStringIO import StringIO
 
26
import urllib
 
27
 
 
28
from bzrlib.weavefile import read_weave, write_weave_v5
 
29
from bzrlib.weave import Weave
 
30
from bzrlib.store import TransportStore, hash_prefix
 
31
from bzrlib.atomicfile import AtomicFile
 
32
from bzrlib.errors import NoSuchFile, FileExists
 
33
from bzrlib.trace import mutter
 
34
 
 
35
 
 
36
class WeaveStore(TransportStore):
 
37
    """Collection of several weave files in a directory.
 
38
 
 
39
    This has some shortcuts for reading and writing them.
 
40
    """
 
41
    FILE_SUFFIX = '.weave'
 
42
 
 
43
    def __init__(self, transport, prefixed=False, precious=False,
 
44
                 dir_mode=None, file_mode=None):
 
45
        super(WeaveStore, self).__init__(transport,
 
46
                dir_mode=dir_mode, file_mode=file_mode,
 
47
                prefixed=prefixed, compressed=False)
 
48
        self._precious = precious
 
49
 
 
50
    def filename(self, file_id):
 
51
        """Return the path relative to the transport root."""
 
52
        if self._prefixed:
 
53
            return hash_prefix(file_id) + urllib.quote(file_id) + WeaveStore.FILE_SUFFIX
 
54
        else:
 
55
            return urllib.quote(file_id) + WeaveStore.FILE_SUFFIX
 
56
 
 
57
    def __iter__(self):
 
58
        l = len(WeaveStore.FILE_SUFFIX)
 
59
        for relpath in self._iter_files_recursive():
 
60
            if relpath.endswith(WeaveStore.FILE_SUFFIX):
 
61
                yield os.path.basename(relpath[:-l])
 
62
 
 
63
    def has_id(self, fileid):
 
64
        return self._transport.has(self.filename(fileid))
 
65
 
 
66
    def _get(self, file_id):
 
67
        return self._transport.get(self.filename(file_id))
 
68
 
 
69
    def _put(self, file_id, f):
 
70
        if self._prefixed:
 
71
            try:
 
72
                self._transport.mkdir(hash_prefix(file_id), mode=self._dir_mode)
 
73
            except FileExists:
 
74
                pass
 
75
        return self._transport.put(self.filename(file_id), f, mode=self._file_mode)
 
76
 
 
77
    def get_weave(self, file_id, transaction):
 
78
        weave = transaction.map.find_weave(file_id)
 
79
        if weave:
 
80
            mutter("cache hit in %s for %s", self, file_id)
 
81
            return weave
 
82
        w = read_weave(self._get(file_id))
 
83
        transaction.map.add_weave(file_id, w)
 
84
        transaction.register_clean(w, precious=self._precious)
 
85
        # TODO: jam 20051219 This should check if there is a prelude
 
86
        #       which is already cached, and if so, should remove it
 
87
        #       But transaction doesn't seem to have a 'remove'
 
88
        #       One workaround would be to re-add the object with
 
89
        #       the PRELUDE marker.
 
90
        return w
 
91
 
 
92
    def get_weave_prelude(self, file_id, transaction):
 
93
        weave_id = file_id
 
94
        weave = transaction.map.find_weave(weave_id)
 
95
        if weave:
 
96
            mutter("cache hit in %s for %s", self, weave_id)
 
97
            return weave
 
98
        # We want transactions to also cache preludes if that
 
99
        # is all that we are loading. So we need a unique
 
100
        # identifier, so that someone who wants the whole text
 
101
        # won't get just the prelude
 
102
        weave_id = 'PRELUDE-' + file_id
 
103
        weave = transaction.map.find_weave(weave_id)
 
104
        if weave:
 
105
            mutter("cache hit in %s for %s", self, weave_id)
 
106
            return weave
 
107
        w = read_weave(self._get(file_id), prelude=True)
 
108
        transaction.map.add_weave(weave_id, w)
 
109
        transaction.register_clean(w, precious=self._precious)
 
110
        return w
 
111
 
 
112
    def get_lines(self, file_id, rev_id, transaction):
 
113
        """Return text from a particular version of a weave.
 
114
 
 
115
        Returned as a list of lines."""
 
116
        w = self.get_weave(file_id, transaction)
 
117
        return w.get(w.lookup(rev_id))
 
118
    
 
119
    def get_weave_prelude_or_empty(self, file_id, transaction):
 
120
        """cheap version that reads the prelude but not the lines
 
121
        """
 
122
        try:
 
123
            return self.get_weave_prelude(file_id, transaction)
 
124
        except NoSuchFile:
 
125
            # We can cache here, because we know that there
 
126
            # is no complete object, since we got NoSuchFile
 
127
            weave = Weave(weave_name=file_id)
 
128
            transaction.map.add_weave(file_id, weave)
 
129
            transaction.register_clean(weave, precious=self._precious)
 
130
            return weave
 
131
 
 
132
    def get_weave_or_empty(self, file_id, transaction):
 
133
        """Return a weave, or an empty one if it doesn't exist.""" 
 
134
        try:
 
135
            return self.get_weave(file_id, transaction)
 
136
        except NoSuchFile:
 
137
            weave = Weave(weave_name=file_id)
 
138
            transaction.map.add_weave(file_id, weave)
 
139
            transaction.register_clean(weave, precious=self._precious)
 
140
            return weave
 
141
 
 
142
    def put_weave(self, file_id, weave, transaction):
 
143
        """Write back a modified weave"""
 
144
        transaction.register_dirty(weave)
 
145
        # TODO FOR WRITE TRANSACTIONS: this should be done in a callback
 
146
        # from the transaction, when it decides to save.
 
147
        sio = StringIO()
 
148
        write_weave_v5(weave, sio)
 
149
        sio.seek(0)
 
150
        self._put(file_id, sio)
 
151
 
 
152
    def add_text(self, file_id, rev_id, new_lines, parents, transaction):
 
153
        w = self.get_weave_or_empty(file_id, transaction)
 
154
        parent_idxs = map(w.lookup, parents)
 
155
        w.add(rev_id, parent_idxs, new_lines)
 
156
        self.put_weave(file_id, w, transaction)
 
157
        
 
158
    def add_identical_text(self, file_id, old_rev_id, new_rev_id, parents,
 
159
                           transaction):
 
160
        w = self.get_weave_or_empty(file_id, transaction)
 
161
        parent_idxs = map(w.lookup, parents)
 
162
        w.add_identical(old_rev_id, new_rev_id, parent_idxs)
 
163
        self.put_weave(file_id, w, transaction)
 
164
     
 
165
    def copy_multi(self, from_store, file_ids):
 
166
        assert isinstance(from_store, WeaveStore)
 
167
        for f in file_ids:
 
168
            mutter("copy weave {%s} into %s", f, self)
 
169
            self._put(f, from_store._get(f))