~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/lockable_files.py

  • Committer: Joe Julian
  • Date: 2010-01-10 02:25:31 UTC
  • mto: (4634.119.7 2.0)
  • mto: This revision was merged to the branch mainline in revision 4959.
  • Revision ID: joe@julianfamily.org-20100110022531-wqk61rsagz8xsiga
Added MANIFEST.in to allow bdist_rpm to have all the required include files and tools. bdist_rpm will still fail to build correctly on some distributions due to a disttools bug http://bugs.python.org/issue644744

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2005, 2006, 2008, 2009 Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
16
 
 
17
from cStringIO import StringIO
 
18
 
 
19
from bzrlib.lazy_import import lazy_import
 
20
lazy_import(globals(), """
 
21
import codecs
 
22
import warnings
 
23
 
 
24
from bzrlib import (
 
25
    counted_lock,
 
26
    errors,
 
27
    lock,
 
28
    osutils,
 
29
    transactions,
 
30
    urlutils,
 
31
    )
 
32
""")
 
33
 
 
34
from bzrlib.decorators import (
 
35
    needs_read_lock,
 
36
    needs_write_lock,
 
37
    )
 
38
from bzrlib.symbol_versioning import (
 
39
    deprecated_in,
 
40
    deprecated_method,
 
41
    )
 
42
 
 
43
 
 
44
# XXX: The tracking here of lock counts and whether the lock is held is
 
45
# somewhat redundant with what's done in LockDir; the main difference is that
 
46
# LockableFiles permits reentrancy.
 
47
 
 
48
class _LockWarner(object):
 
49
    """Hold a counter for a lock and warn if GCed while the count is >= 1.
 
50
 
 
51
    This is separate from LockableFiles because putting a __del__ on
 
52
    LockableFiles can result in uncollectable cycles.
 
53
    """
 
54
 
 
55
    def __init__(self, repr):
 
56
        self.lock_count = 0
 
57
        self.repr = repr
 
58
 
 
59
    def __del__(self):
 
60
        if self.lock_count >= 1:
 
61
            # There should have been a try/finally to unlock this.
 
62
            warnings.warn("%r was gc'd while locked" % self.repr)
 
63
 
 
64
 
 
65
class LockableFiles(object):
 
66
    """Object representing a set of related files locked within the same scope.
 
67
 
 
68
    This coordinates access to the lock along with providing a transaction.
 
69
 
 
70
    LockableFiles manage a lock count and can be locked repeatedly by
 
71
    a single caller.  (The underlying lock implementation generally does not
 
72
    support this.)
 
73
 
 
74
    Instances of this class are often called control_files.
 
75
 
 
76
    This class is now deprecated; code should move to using the Transport
 
77
    directly for file operations and using the lock or CountedLock for
 
78
    locking.
 
79
    
 
80
    :ivar _lock: The real underlying lock (e.g. a LockDir)
 
81
    :ivar _counted_lock: A lock decorated with a semaphore, so that it 
 
82
        can be re-entered.
 
83
    """
 
84
 
 
85
    # _lock_mode: None, or 'r' or 'w'
 
86
 
 
87
    # _lock_count: If _lock_mode is true, a positive count of the number of
 
88
    # times the lock has been taken *by this process*.
 
89
 
 
90
    def __init__(self, transport, lock_name, lock_class):
 
91
        """Create a LockableFiles group
 
92
 
 
93
        :param transport: Transport pointing to the directory holding the
 
94
            control files and lock.
 
95
        :param lock_name: Name of the lock guarding these files.
 
96
        :param lock_class: Class of lock strategy to use: typically
 
97
            either LockDir or TransportLock.
 
98
        """
 
99
        self._transport = transport
 
100
        self.lock_name = lock_name
 
101
        self._transaction = None
 
102
        self._lock_mode = None
 
103
        self._lock_warner = _LockWarner(repr(self))
 
104
        self._find_modes()
 
105
        esc_name = self._escape(lock_name)
 
106
        self._lock = lock_class(transport, esc_name,
 
107
                                file_modebits=self._file_mode,
 
108
                                dir_modebits=self._dir_mode)
 
109
        self._counted_lock = counted_lock.CountedLock(self._lock)
 
110
 
 
111
    def create_lock(self):
 
112
        """Create the lock.
 
113
 
 
114
        This should normally be called only when the LockableFiles directory
 
115
        is first created on disk.
 
116
        """
 
117
        self._lock.create(mode=self._dir_mode)
 
118
 
 
119
    def __repr__(self):
 
120
        return '%s(%r)' % (self.__class__.__name__,
 
121
                           self._transport)
 
122
    def __str__(self):
 
123
        return 'LockableFiles(%s, %s)' % (self.lock_name, self._transport.base)
 
124
 
 
125
    def break_lock(self):
 
126
        """Break the lock of this lockable files group if it is held.
 
127
 
 
128
        The current ui factory will be used to prompt for user conformation.
 
129
        """
 
130
        self._lock.break_lock()
 
131
 
 
132
    def _escape(self, file_or_path):
 
133
        """DEPRECATED: Do not use outside this class"""
 
134
        if not isinstance(file_or_path, basestring):
 
135
            file_or_path = '/'.join(file_or_path)
 
136
        if file_or_path == '':
 
137
            return u''
 
138
        return urlutils.escape(osutils.safe_unicode(file_or_path))
 
139
 
 
140
    def _find_modes(self):
 
141
        """Determine the appropriate modes for files and directories.
 
142
 
 
143
        :deprecated: Replaced by BzrDir._find_creation_modes.
 
144
        """
 
145
        # XXX: The properties created by this can be removed or deprecated
 
146
        # once all the _get_text_store methods etc no longer use them.
 
147
        # -- mbp 20080512
 
148
        try:
 
149
            st = self._transport.stat('.')
 
150
        except errors.TransportNotPossible:
 
151
            self._dir_mode = 0755
 
152
            self._file_mode = 0644
 
153
        else:
 
154
            # Check the directory mode, but also make sure the created
 
155
            # directories and files are read-write for this user. This is
 
156
            # mostly a workaround for filesystems which lie about being able to
 
157
            # write to a directory (cygwin & win32)
 
158
            self._dir_mode = (st.st_mode & 07777) | 00700
 
159
            # Remove the sticky and execute bits for files
 
160
            self._file_mode = self._dir_mode & ~07111
 
161
 
 
162
    def leave_in_place(self):
 
163
        """Set this LockableFiles to not clear the physical lock on unlock."""
 
164
        self._lock.leave_in_place()
 
165
 
 
166
    def dont_leave_in_place(self):
 
167
        """Set this LockableFiles to clear the physical lock on unlock."""
 
168
        self._lock.dont_leave_in_place()
 
169
 
 
170
    def lock_write(self, token=None):
 
171
        """Lock this group of files for writing.
 
172
 
 
173
        :param token: if this is already locked, then lock_write will fail
 
174
            unless the token matches the existing lock.
 
175
        :returns: a token if this instance supports tokens, otherwise None.
 
176
        :raises TokenLockingNotSupported: when a token is given but this
 
177
            instance doesn't support using token locks.
 
178
        :raises MismatchedToken: if the specified token doesn't match the token
 
179
            of the existing lock.
 
180
 
 
181
        A token should be passed in if you know that you have locked the object
 
182
        some other way, and need to synchronise this object's state with that
 
183
        fact.
 
184
        """
 
185
        # TODO: Upgrade locking to support using a Transport,
 
186
        # and potentially a remote locking protocol
 
187
        if self._lock_mode:
 
188
            if self._lock_mode != 'w' or not self.get_transaction().writeable():
 
189
                raise errors.ReadOnlyError(self)
 
190
            self._lock.validate_token(token)
 
191
            self._lock_warner.lock_count += 1
 
192
            return self._token_from_lock
 
193
        else:
 
194
            token_from_lock = self._lock.lock_write(token=token)
 
195
            #traceback.print_stack()
 
196
            self._lock_mode = 'w'
 
197
            self._lock_warner.lock_count = 1
 
198
            self._set_write_transaction()
 
199
            self._token_from_lock = token_from_lock
 
200
            return token_from_lock
 
201
 
 
202
    def lock_read(self):
 
203
        if self._lock_mode:
 
204
            if self._lock_mode not in ('r', 'w'):
 
205
                raise ValueError("invalid lock mode %r" % (self._lock_mode,))
 
206
            self._lock_warner.lock_count += 1
 
207
        else:
 
208
            self._lock.lock_read()
 
209
            #traceback.print_stack()
 
210
            self._lock_mode = 'r'
 
211
            self._lock_warner.lock_count = 1
 
212
            self._set_read_transaction()
 
213
 
 
214
    def _set_read_transaction(self):
 
215
        """Setup a read transaction."""
 
216
        self._set_transaction(transactions.ReadOnlyTransaction())
 
217
        # 5K may be excessive, but hey, its a knob.
 
218
        self.get_transaction().set_cache_size(5000)
 
219
 
 
220
    def _set_write_transaction(self):
 
221
        """Setup a write transaction."""
 
222
        self._set_transaction(transactions.WriteTransaction())
 
223
 
 
224
    def unlock(self):
 
225
        if not self._lock_mode:
 
226
            return lock.cant_unlock_not_held(self)
 
227
        if self._lock_warner.lock_count > 1:
 
228
            self._lock_warner.lock_count -= 1
 
229
        else:
 
230
            #traceback.print_stack()
 
231
            self._finish_transaction()
 
232
            try:
 
233
                self._lock.unlock()
 
234
            finally:
 
235
                self._lock_mode = self._lock_warner.lock_count = None
 
236
 
 
237
    @property
 
238
    def _lock_count(self):
 
239
        return self._lock_warner.lock_count
 
240
 
 
241
    def is_locked(self):
 
242
        """Return true if this LockableFiles group is locked"""
 
243
        return self._lock_warner.lock_count >= 1
 
244
 
 
245
    def get_physical_lock_status(self):
 
246
        """Return physical lock status.
 
247
 
 
248
        Returns true if a lock is held on the transport. If no lock is held, or
 
249
        the underlying locking mechanism does not support querying lock
 
250
        status, false is returned.
 
251
        """
 
252
        try:
 
253
            return self._lock.peek() is not None
 
254
        except NotImplementedError:
 
255
            return False
 
256
 
 
257
    def get_transaction(self):
 
258
        """Return the current active transaction.
 
259
 
 
260
        If no transaction is active, this returns a passthrough object
 
261
        for which all data is immediately flushed and no caching happens.
 
262
        """
 
263
        if self._transaction is None:
 
264
            return transactions.PassThroughTransaction()
 
265
        else:
 
266
            return self._transaction
 
267
 
 
268
    def _set_transaction(self, new_transaction):
 
269
        """Set a new active transaction."""
 
270
        if self._transaction is not None:
 
271
            raise errors.LockError('Branch %s is in a transaction already.' %
 
272
                                   self)
 
273
        self._transaction = new_transaction
 
274
 
 
275
    def _finish_transaction(self):
 
276
        """Exit the current transaction."""
 
277
        if self._transaction is None:
 
278
            raise errors.LockError('Branch %s is not in a transaction' %
 
279
                                   self)
 
280
        transaction = self._transaction
 
281
        self._transaction = None
 
282
        transaction.finish()
 
283
 
 
284
 
 
285
class TransportLock(object):
 
286
    """Locking method which uses transport-dependent locks.
 
287
 
 
288
    On the local filesystem these transform into OS-managed locks.
 
289
 
 
290
    These do not guard against concurrent access via different
 
291
    transports.
 
292
 
 
293
    This is suitable for use only in WorkingTrees (which are at present
 
294
    always local).
 
295
    """
 
296
    def __init__(self, transport, escaped_name, file_modebits, dir_modebits):
 
297
        self._transport = transport
 
298
        self._escaped_name = escaped_name
 
299
        self._file_modebits = file_modebits
 
300
        self._dir_modebits = dir_modebits
 
301
 
 
302
    def break_lock(self):
 
303
        raise NotImplementedError(self.break_lock)
 
304
 
 
305
    def leave_in_place(self):
 
306
        raise NotImplementedError(self.leave_in_place)
 
307
 
 
308
    def dont_leave_in_place(self):
 
309
        raise NotImplementedError(self.dont_leave_in_place)
 
310
 
 
311
    def lock_write(self, token=None):
 
312
        if token is not None:
 
313
            raise errors.TokenLockingNotSupported(self)
 
314
        self._lock = self._transport.lock_write(self._escaped_name)
 
315
 
 
316
    def lock_read(self):
 
317
        self._lock = self._transport.lock_read(self._escaped_name)
 
318
 
 
319
    def unlock(self):
 
320
        self._lock.unlock()
 
321
        self._lock = None
 
322
 
 
323
    def peek(self):
 
324
        raise NotImplementedError()
 
325
 
 
326
    def create(self, mode=None):
 
327
        """Create lock mechanism"""
 
328
        # for old-style locks, create the file now
 
329
        self._transport.put_bytes(self._escaped_name, '',
 
330
                            mode=self._file_modebits)
 
331
 
 
332
    def validate_token(self, token):
 
333
        if token is not None:
 
334
            raise errors.TokenLockingNotSupported(self)
 
335