~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/branchbuilder.py

Merge bzr.dev (and fix NEWS)

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
# Copyright (C) 2007, 2008, 2009 Canonical Ltd
2
 
#
3
 
# This program is free software; you can redistribute it and/or modify
4
 
# it under the terms of the GNU General Public License as published by
5
 
# the Free Software Foundation; either version 2 of the License, or
6
 
# (at your option) any later version.
7
 
#
8
 
# This program is distributed in the hope that it will be useful,
9
 
# but WITHOUT ANY WARRANTY; without even the implied warranty of
10
 
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11
 
# GNU General Public License for more details.
12
 
#
13
 
# You should have received a copy of the GNU General Public License
14
 
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
16
 
 
17
 
"""Utility for create branches with particular contents."""
18
 
 
19
 
from __future__ import absolute_import
20
 
 
21
 
from bzrlib import (
22
 
    controldir,
23
 
    commit,
24
 
    errors,
25
 
    memorytree,
26
 
    revision,
27
 
    )
28
 
 
29
 
 
30
 
class BranchBuilder(object):
31
 
    r"""A BranchBuilder aids creating Branches with particular shapes.
32
 
 
33
 
    The expected way to use BranchBuilder is to construct a
34
 
    BranchBuilder on the transport you want your branch on, and then call
35
 
    appropriate build_ methods on it to get the shape of history you want.
36
 
 
37
 
    This is meant as a helper for the test suite, not as a general class for
38
 
    real data.
39
 
 
40
 
    For instance:
41
 
 
42
 
    >>> from bzrlib.transport.memory import MemoryTransport
43
 
    >>> builder = BranchBuilder(MemoryTransport("memory:///"))
44
 
    >>> builder.start_series()
45
 
    >>> builder.build_snapshot('rev-id', None, [
46
 
    ...     ('add', ('', 'root-id', 'directory', '')),
47
 
    ...     ('add', ('filename', 'f-id', 'file', 'content\n'))])
48
 
    'rev-id'
49
 
    >>> builder.build_snapshot('rev2-id', ['rev-id'],
50
 
    ...     [('modify', ('f-id', 'new-content\n'))])
51
 
    'rev2-id'
52
 
    >>> builder.finish_series()
53
 
    >>> branch = builder.get_branch()
54
 
 
55
 
    :ivar _tree: This is a private member which is not meant to be modified by
56
 
        users of this class. While a 'series' is in progress, it should hold a
57
 
        MemoryTree with the contents of the last commit (ready to be modified
58
 
        by the next build_snapshot command) with a held write lock. Outside of
59
 
        a series in progress, it should be None.
60
 
    """
61
 
 
62
 
    def __init__(self, transport=None, format=None, branch=None):
63
 
        """Construct a BranchBuilder on transport.
64
 
 
65
 
        :param transport: The transport the branch should be created on.
66
 
            If the path of the transport does not exist but its parent does
67
 
            it will be created.
68
 
        :param format: Either a BzrDirFormat, or the name of a format in the
69
 
            controldir format registry for the branch to be built.
70
 
        :param branch: An already constructed branch to use.  This param is
71
 
            mutually exclusive with the transport and format params.
72
 
        """
73
 
        if branch is not None:
74
 
            if format is not None:
75
 
                raise AssertionError(
76
 
                    "branch and format kwargs are mutually exclusive")
77
 
            if transport is not None:
78
 
                raise AssertionError(
79
 
                    "branch and transport kwargs are mutually exclusive")
80
 
            self._branch = branch
81
 
        else:
82
 
            if not transport.has('.'):
83
 
                transport.mkdir('.')
84
 
            if format is None:
85
 
                format = 'default'
86
 
            if isinstance(format, str):
87
 
                format = controldir.format_registry.make_bzrdir(format)
88
 
            self._branch = controldir.ControlDir.create_branch_convenience(
89
 
                transport.base, format=format, force_new_tree=False)
90
 
        self._tree = None
91
 
 
92
 
    def build_commit(self, parent_ids=None, allow_leftmost_as_ghost=False,
93
 
                     **commit_kwargs):
94
 
        """Build a commit on the branch.
95
 
 
96
 
        This makes a commit with no real file content for when you only want
97
 
        to look at the revision graph structure.
98
 
 
99
 
        :param commit_kwargs: Arguments to pass through to commit, such as
100
 
             timestamp.
101
 
        """
102
 
        if parent_ids is not None:
103
 
            if len(parent_ids) == 0:
104
 
                base_id = revision.NULL_REVISION
105
 
            else:
106
 
                base_id = parent_ids[0]
107
 
            if base_id != self._branch.last_revision():
108
 
                self._move_branch_pointer(base_id,
109
 
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
110
 
        tree = memorytree.MemoryTree.create_on_branch(self._branch)
111
 
        tree.lock_write()
112
 
        try:
113
 
            if parent_ids is not None:
114
 
                tree.set_parent_ids(parent_ids,
115
 
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
116
 
            tree.add('')
117
 
            return self._do_commit(tree, **commit_kwargs)
118
 
        finally:
119
 
            tree.unlock()
120
 
 
121
 
    def _do_commit(self, tree, message=None, message_callback=None, **kwargs):
122
 
        reporter = commit.NullCommitReporter()
123
 
        if message is None and message_callback is None:
124
 
            message = u'commit %d' % (self._branch.revno() + 1,)
125
 
        return tree.commit(message, message_callback=message_callback,
126
 
            reporter=reporter,
127
 
            **kwargs)
128
 
 
129
 
    def _move_branch_pointer(self, new_revision_id,
130
 
        allow_leftmost_as_ghost=False):
131
 
        """Point self._branch to a different revision id."""
132
 
        self._branch.lock_write()
133
 
        try:
134
 
            # We don't seem to have a simple set_last_revision(), so we
135
 
            # implement it here.
136
 
            cur_revno, cur_revision_id = self._branch.last_revision_info()
137
 
            try:
138
 
                g = self._branch.repository.get_graph()
139
 
                new_revno = g.find_distance_to_null(new_revision_id,
140
 
                    [(cur_revision_id, cur_revno)])
141
 
                self._branch.set_last_revision_info(new_revno, new_revision_id)
142
 
            except errors.GhostRevisionsHaveNoRevno:
143
 
                if not allow_leftmost_as_ghost:
144
 
                    raise
145
 
                new_revno = 1
146
 
        finally:
147
 
            self._branch.unlock()
148
 
        if self._tree is not None:
149
 
            # We are currently processing a series, but when switching branch
150
 
            # pointers, it is easiest to just create a new memory tree.
151
 
            # That way we are sure to have the right files-on-disk
152
 
            # We are cheating a little bit here, and locking the new tree
153
 
            # before the old tree is unlocked. But that way the branch stays
154
 
            # locked throughout.
155
 
            new_tree = memorytree.MemoryTree.create_on_branch(self._branch)
156
 
            new_tree.lock_write()
157
 
            self._tree.unlock()
158
 
            self._tree = new_tree
159
 
 
160
 
    def start_series(self):
161
 
        """We will be creating a series of commits.
162
 
 
163
 
        This allows us to hold open the locks while we are processing.
164
 
 
165
 
        Make sure to call 'finish_series' when you are done.
166
 
        """
167
 
        if self._tree is not None:
168
 
            raise AssertionError('You cannot start a new series while a'
169
 
                                 ' series is already going.')
170
 
        self._tree = memorytree.MemoryTree.create_on_branch(self._branch)
171
 
        self._tree.lock_write()
172
 
 
173
 
    def finish_series(self):
174
 
        """Call this after start_series to unlock the various objects."""
175
 
        self._tree.unlock()
176
 
        self._tree = None
177
 
 
178
 
    def build_snapshot(self, revision_id, parent_ids, actions,
179
 
        message=None, timestamp=None, allow_leftmost_as_ghost=False,
180
 
        committer=None, timezone=None, message_callback=None):
181
 
        """Build a commit, shaped in a specific way.
182
 
 
183
 
        Most of the actions are self-explanatory.  'flush' is special action to
184
 
        break a series of actions into discrete steps so that complex changes
185
 
        (such as unversioning a file-id and re-adding it with a different kind)
186
 
        can be expressed in a way that will clearly work.
187
 
 
188
 
        :param revision_id: The handle for the new commit, can be None
189
 
        :param parent_ids: A list of parent_ids to use for the commit.
190
 
            It can be None, which indicates to use the last commit.
191
 
        :param actions: A list of actions to perform. Supported actions are:
192
 
            ('add', ('path', 'file-id', 'kind', 'content' or None))
193
 
            ('modify', ('file-id', 'new-content'))
194
 
            ('unversion', 'file-id')
195
 
            ('rename', ('orig-path', 'new-path'))
196
 
            ('flush', None)
197
 
        :param message: An optional commit message, if not supplied, a default
198
 
            commit message will be written.
199
 
        :param message_callback: A message callback to use for the commit, as
200
 
            per mutabletree.commit.
201
 
        :param timestamp: If non-None, set the timestamp of the commit to this
202
 
            value.
203
 
        :param timezone: An optional timezone for timestamp.
204
 
        :param committer: An optional username to use for commit
205
 
        :param allow_leftmost_as_ghost: True if the leftmost parent should be
206
 
            permitted to be a ghost.
207
 
        :return: The revision_id of the new commit
208
 
        """
209
 
        if parent_ids is not None:
210
 
            if len(parent_ids) == 0:
211
 
                base_id = revision.NULL_REVISION
212
 
            else:
213
 
                base_id = parent_ids[0]
214
 
            if base_id != self._branch.last_revision():
215
 
                self._move_branch_pointer(base_id,
216
 
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
217
 
 
218
 
        if self._tree is not None:
219
 
            tree = self._tree
220
 
        else:
221
 
            tree = memorytree.MemoryTree.create_on_branch(self._branch)
222
 
        tree.lock_write()
223
 
        try:
224
 
            if parent_ids is not None:
225
 
                tree.set_parent_ids(parent_ids,
226
 
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
227
 
            # Unfortunately, MemoryTree.add(directory) just creates an
228
 
            # inventory entry. And the only public function to create a
229
 
            # directory is MemoryTree.mkdir() which creates the directory, but
230
 
            # also always adds it. So we have to use a multi-pass setup.
231
 
            pending = _PendingActions()
232
 
            for action, info in actions:
233
 
                if action == 'add':
234
 
                    path, file_id, kind, content = info
235
 
                    if kind == 'directory':
236
 
                        pending.to_add_directories.append((path, file_id))
237
 
                    else:
238
 
                        pending.to_add_files.append(path)
239
 
                        pending.to_add_file_ids.append(file_id)
240
 
                        pending.to_add_kinds.append(kind)
241
 
                        if content is not None:
242
 
                            pending.new_contents[file_id] = content
243
 
                elif action == 'modify':
244
 
                    file_id, content = info
245
 
                    pending.new_contents[file_id] = content
246
 
                elif action == 'unversion':
247
 
                    pending.to_unversion_ids.add(info)
248
 
                elif action == 'rename':
249
 
                    from_relpath, to_relpath = info
250
 
                    pending.to_rename.append((from_relpath, to_relpath))
251
 
                elif action == 'flush':
252
 
                    self._flush_pending(tree, pending)
253
 
                    pending = _PendingActions()
254
 
                else:
255
 
                    raise ValueError('Unknown build action: "%s"' % (action,))
256
 
            self._flush_pending(tree, pending)
257
 
            return self._do_commit(tree, message=message, rev_id=revision_id,
258
 
                timestamp=timestamp, timezone=timezone, committer=committer,
259
 
                message_callback=message_callback)
260
 
        finally:
261
 
            tree.unlock()
262
 
 
263
 
    def _flush_pending(self, tree, pending):
264
 
        """Flush the pending actions in 'pending', i.e. apply them to 'tree'."""
265
 
        for path, file_id in pending.to_add_directories:
266
 
            if path == '':
267
 
                old_id = tree.path2id(path)
268
 
                if old_id is not None and old_id in pending.to_unversion_ids:
269
 
                    # We're overwriting this path, no need to unversion
270
 
                    pending.to_unversion_ids.discard(old_id)
271
 
                # Special case, because the path already exists
272
 
                tree.add([path], [file_id], ['directory'])
273
 
            else:
274
 
                tree.mkdir(path, file_id)
275
 
        for from_relpath, to_relpath in pending.to_rename:
276
 
            tree.rename_one(from_relpath, to_relpath)
277
 
        if pending.to_unversion_ids:
278
 
            tree.unversion(pending.to_unversion_ids)
279
 
        tree.add(pending.to_add_files, pending.to_add_file_ids, pending.to_add_kinds)
280
 
        for file_id, content in pending.new_contents.iteritems():
281
 
            tree.put_file_bytes_non_atomic(file_id, content)
282
 
 
283
 
    def get_branch(self):
284
 
        """Return the branch created by the builder."""
285
 
        return self._branch
286
 
 
287
 
 
288
 
class _PendingActions(object):
289
 
    """Pending actions for build_snapshot to take.
290
 
 
291
 
    This is just a simple class to hold a bunch of the intermediate state of
292
 
    build_snapshot in single object.
293
 
    """
294
 
 
295
 
    def __init__(self):
296
 
        self.to_add_directories = []
297
 
        self.to_add_files = []
298
 
        self.to_add_file_ids = []
299
 
        self.to_add_kinds = []
300
 
        self.new_contents = {}
301
 
        self.to_unversion_ids = set()
302
 
        self.to_rename = []
303