~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/branchbuilder.py

(vila) Make all transport put_bytes() raises TypeError when given unicode
 strings rather than bytes (Vincent Ladeuil)

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2007, 2008, 2009 Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
16
 
 
17
"""Utility for create branches with particular contents."""
 
18
 
 
19
from __future__ import absolute_import
 
20
 
 
21
from bzrlib import (
 
22
    controldir,
 
23
    commit,
 
24
    errors,
 
25
    memorytree,
 
26
    revision,
 
27
    )
 
28
 
 
29
 
 
30
class BranchBuilder(object):
 
31
    r"""A BranchBuilder aids creating Branches with particular shapes.
 
32
 
 
33
    The expected way to use BranchBuilder is to construct a
 
34
    BranchBuilder on the transport you want your branch on, and then call
 
35
    appropriate build_ methods on it to get the shape of history you want.
 
36
 
 
37
    This is meant as a helper for the test suite, not as a general class for
 
38
    real data.
 
39
 
 
40
    For instance:
 
41
 
 
42
    >>> from bzrlib.transport.memory import MemoryTransport
 
43
    >>> builder = BranchBuilder(MemoryTransport("memory:///"))
 
44
    >>> builder.start_series()
 
45
    >>> builder.build_snapshot('rev-id', None, [
 
46
    ...     ('add', ('', 'root-id', 'directory', '')),
 
47
    ...     ('add', ('filename', 'f-id', 'file', 'content\n'))])
 
48
    'rev-id'
 
49
    >>> builder.build_snapshot('rev2-id', ['rev-id'],
 
50
    ...     [('modify', ('f-id', 'new-content\n'))])
 
51
    'rev2-id'
 
52
    >>> builder.finish_series()
 
53
    >>> branch = builder.get_branch()
 
54
 
 
55
    :ivar _tree: This is a private member which is not meant to be modified by
 
56
        users of this class. While a 'series' is in progress, it should hold a
 
57
        MemoryTree with the contents of the last commit (ready to be modified
 
58
        by the next build_snapshot command) with a held write lock. Outside of
 
59
        a series in progress, it should be None.
 
60
    """
 
61
 
 
62
    def __init__(self, transport=None, format=None, branch=None):
 
63
        """Construct a BranchBuilder on transport.
 
64
 
 
65
        :param transport: The transport the branch should be created on.
 
66
            If the path of the transport does not exist but its parent does
 
67
            it will be created.
 
68
        :param format: Either a BzrDirFormat, or the name of a format in the
 
69
            controldir format registry for the branch to be built.
 
70
        :param branch: An already constructed branch to use.  This param is
 
71
            mutually exclusive with the transport and format params.
 
72
        """
 
73
        if branch is not None:
 
74
            if format is not None:
 
75
                raise AssertionError(
 
76
                    "branch and format kwargs are mutually exclusive")
 
77
            if transport is not None:
 
78
                raise AssertionError(
 
79
                    "branch and transport kwargs are mutually exclusive")
 
80
            self._branch = branch
 
81
        else:
 
82
            if not transport.has('.'):
 
83
                transport.mkdir('.')
 
84
            if format is None:
 
85
                format = 'default'
 
86
            if isinstance(format, str):
 
87
                format = controldir.format_registry.make_bzrdir(format)
 
88
            self._branch = controldir.ControlDir.create_branch_convenience(
 
89
                transport.base, format=format, force_new_tree=False)
 
90
        self._tree = None
 
91
 
 
92
    def build_commit(self, parent_ids=None, allow_leftmost_as_ghost=False,
 
93
                     **commit_kwargs):
 
94
        """Build a commit on the branch.
 
95
 
 
96
        This makes a commit with no real file content for when you only want
 
97
        to look at the revision graph structure.
 
98
 
 
99
        :param commit_kwargs: Arguments to pass through to commit, such as
 
100
             timestamp.
 
101
        """
 
102
        if parent_ids is not None:
 
103
            if len(parent_ids) == 0:
 
104
                base_id = revision.NULL_REVISION
 
105
            else:
 
106
                base_id = parent_ids[0]
 
107
            if base_id != self._branch.last_revision():
 
108
                self._move_branch_pointer(base_id,
 
109
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
 
110
        tree = memorytree.MemoryTree.create_on_branch(self._branch)
 
111
        tree.lock_write()
 
112
        try:
 
113
            if parent_ids is not None:
 
114
                tree.set_parent_ids(parent_ids,
 
115
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
 
116
            tree.add('')
 
117
            return self._do_commit(tree, **commit_kwargs)
 
118
        finally:
 
119
            tree.unlock()
 
120
 
 
121
    def _do_commit(self, tree, message=None, message_callback=None, **kwargs):
 
122
        reporter = commit.NullCommitReporter()
 
123
        if message is None and message_callback is None:
 
124
            message = u'commit %d' % (self._branch.revno() + 1,)
 
125
        return tree.commit(message, message_callback=message_callback,
 
126
            reporter=reporter,
 
127
            **kwargs)
 
128
 
 
129
    def _move_branch_pointer(self, new_revision_id,
 
130
        allow_leftmost_as_ghost=False):
 
131
        """Point self._branch to a different revision id."""
 
132
        self._branch.lock_write()
 
133
        try:
 
134
            # We don't seem to have a simple set_last_revision(), so we
 
135
            # implement it here.
 
136
            cur_revno, cur_revision_id = self._branch.last_revision_info()
 
137
            try:
 
138
                g = self._branch.repository.get_graph()
 
139
                new_revno = g.find_distance_to_null(new_revision_id,
 
140
                    [(cur_revision_id, cur_revno)])
 
141
                self._branch.set_last_revision_info(new_revno, new_revision_id)
 
142
            except errors.GhostRevisionsHaveNoRevno:
 
143
                if not allow_leftmost_as_ghost:
 
144
                    raise
 
145
                new_revno = 1
 
146
        finally:
 
147
            self._branch.unlock()
 
148
        if self._tree is not None:
 
149
            # We are currently processing a series, but when switching branch
 
150
            # pointers, it is easiest to just create a new memory tree.
 
151
            # That way we are sure to have the right files-on-disk
 
152
            # We are cheating a little bit here, and locking the new tree
 
153
            # before the old tree is unlocked. But that way the branch stays
 
154
            # locked throughout.
 
155
            new_tree = memorytree.MemoryTree.create_on_branch(self._branch)
 
156
            new_tree.lock_write()
 
157
            self._tree.unlock()
 
158
            self._tree = new_tree
 
159
 
 
160
    def start_series(self):
 
161
        """We will be creating a series of commits.
 
162
 
 
163
        This allows us to hold open the locks while we are processing.
 
164
 
 
165
        Make sure to call 'finish_series' when you are done.
 
166
        """
 
167
        if self._tree is not None:
 
168
            raise AssertionError('You cannot start a new series while a'
 
169
                                 ' series is already going.')
 
170
        self._tree = memorytree.MemoryTree.create_on_branch(self._branch)
 
171
        self._tree.lock_write()
 
172
 
 
173
    def finish_series(self):
 
174
        """Call this after start_series to unlock the various objects."""
 
175
        self._tree.unlock()
 
176
        self._tree = None
 
177
 
 
178
    def build_snapshot(self, revision_id, parent_ids, actions,
 
179
        message=None, timestamp=None, allow_leftmost_as_ghost=False,
 
180
        committer=None, timezone=None, message_callback=None):
 
181
        """Build a commit, shaped in a specific way.
 
182
 
 
183
        Most of the actions are self-explanatory.  'flush' is special action to
 
184
        break a series of actions into discrete steps so that complex changes
 
185
        (such as unversioning a file-id and re-adding it with a different kind)
 
186
        can be expressed in a way that will clearly work.
 
187
 
 
188
        :param revision_id: The handle for the new commit, can be None
 
189
        :param parent_ids: A list of parent_ids to use for the commit.
 
190
            It can be None, which indicates to use the last commit.
 
191
        :param actions: A list of actions to perform. Supported actions are:
 
192
            ('add', ('path', 'file-id', 'kind', 'content' or None))
 
193
            ('modify', ('file-id', 'new-content'))
 
194
            ('unversion', 'file-id')
 
195
            ('rename', ('orig-path', 'new-path'))
 
196
            ('flush', None)
 
197
        :param message: An optional commit message, if not supplied, a default
 
198
            commit message will be written.
 
199
        :param message_callback: A message callback to use for the commit, as
 
200
            per mutabletree.commit.
 
201
        :param timestamp: If non-None, set the timestamp of the commit to this
 
202
            value.
 
203
        :param timezone: An optional timezone for timestamp.
 
204
        :param committer: An optional username to use for commit
 
205
        :param allow_leftmost_as_ghost: True if the leftmost parent should be
 
206
            permitted to be a ghost.
 
207
        :return: The revision_id of the new commit
 
208
        """
 
209
        if parent_ids is not None:
 
210
            if len(parent_ids) == 0:
 
211
                base_id = revision.NULL_REVISION
 
212
            else:
 
213
                base_id = parent_ids[0]
 
214
            if base_id != self._branch.last_revision():
 
215
                self._move_branch_pointer(base_id,
 
216
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
 
217
 
 
218
        if self._tree is not None:
 
219
            tree = self._tree
 
220
        else:
 
221
            tree = memorytree.MemoryTree.create_on_branch(self._branch)
 
222
        tree.lock_write()
 
223
        try:
 
224
            if parent_ids is not None:
 
225
                tree.set_parent_ids(parent_ids,
 
226
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
 
227
            # Unfortunately, MemoryTree.add(directory) just creates an
 
228
            # inventory entry. And the only public function to create a
 
229
            # directory is MemoryTree.mkdir() which creates the directory, but
 
230
            # also always adds it. So we have to use a multi-pass setup.
 
231
            pending = _PendingActions()
 
232
            for action, info in actions:
 
233
                if action == 'add':
 
234
                    path, file_id, kind, content = info
 
235
                    if kind == 'directory':
 
236
                        pending.to_add_directories.append((path, file_id))
 
237
                    else:
 
238
                        pending.to_add_files.append(path)
 
239
                        pending.to_add_file_ids.append(file_id)
 
240
                        pending.to_add_kinds.append(kind)
 
241
                        if content is not None:
 
242
                            pending.new_contents[file_id] = content
 
243
                elif action == 'modify':
 
244
                    file_id, content = info
 
245
                    pending.new_contents[file_id] = content
 
246
                elif action == 'unversion':
 
247
                    pending.to_unversion_ids.add(info)
 
248
                elif action == 'rename':
 
249
                    from_relpath, to_relpath = info
 
250
                    pending.to_rename.append((from_relpath, to_relpath))
 
251
                elif action == 'flush':
 
252
                    self._flush_pending(tree, pending)
 
253
                    pending = _PendingActions()
 
254
                else:
 
255
                    raise ValueError('Unknown build action: "%s"' % (action,))
 
256
            self._flush_pending(tree, pending)
 
257
            return self._do_commit(tree, message=message, rev_id=revision_id,
 
258
                timestamp=timestamp, timezone=timezone, committer=committer,
 
259
                message_callback=message_callback)
 
260
        finally:
 
261
            tree.unlock()
 
262
 
 
263
    def _flush_pending(self, tree, pending):
 
264
        """Flush the pending actions in 'pending', i.e. apply them to 'tree'."""
 
265
        for path, file_id in pending.to_add_directories:
 
266
            if path == '':
 
267
                old_id = tree.path2id(path)
 
268
                if old_id is not None and old_id in pending.to_unversion_ids:
 
269
                    # We're overwriting this path, no need to unversion
 
270
                    pending.to_unversion_ids.discard(old_id)
 
271
                # Special case, because the path already exists
 
272
                tree.add([path], [file_id], ['directory'])
 
273
            else:
 
274
                tree.mkdir(path, file_id)
 
275
        for from_relpath, to_relpath in pending.to_rename:
 
276
            tree.rename_one(from_relpath, to_relpath)
 
277
        if pending.to_unversion_ids:
 
278
            tree.unversion(pending.to_unversion_ids)
 
279
        tree.add(pending.to_add_files, pending.to_add_file_ids, pending.to_add_kinds)
 
280
        for file_id, content in pending.new_contents.iteritems():
 
281
            tree.put_file_bytes_non_atomic(file_id, content)
 
282
 
 
283
    def get_branch(self):
 
284
        """Return the branch created by the builder."""
 
285
        return self._branch
 
286
 
 
287
 
 
288
class _PendingActions(object):
 
289
    """Pending actions for build_snapshot to take.
 
290
 
 
291
    This is just a simple class to hold a bunch of the intermediate state of
 
292
    build_snapshot in single object.
 
293
    """
 
294
 
 
295
    def __init__(self):
 
296
        self.to_add_directories = []
 
297
        self.to_add_files = []
 
298
        self.to_add_file_ids = []
 
299
        self.to_add_kinds = []
 
300
        self.new_contents = {}
 
301
        self.to_unversion_ids = set()
 
302
        self.to_rename = []
 
303