~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/branchbuilder.py

  • Committer: Martin Packman
  • Date: 2011-11-17 13:45:49 UTC
  • mto: This revision was merged to the branch mainline in revision 6271.
  • Revision ID: martin.packman@canonical.com-20111117134549-080e1fhtrzoicexg
Only assert FileExists path in test_transform directory clash tests to avoid stringification fallout

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
# Copyright (C) 2007, 2008, 2009 Canonical Ltd
 
2
#
 
3
# This program is free software; you can redistribute it and/or modify
 
4
# it under the terms of the GNU General Public License as published by
 
5
# the Free Software Foundation; either version 2 of the License, or
 
6
# (at your option) any later version.
 
7
#
 
8
# This program is distributed in the hope that it will be useful,
 
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
 
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
11
# GNU General Public License for more details.
 
12
#
 
13
# You should have received a copy of the GNU General Public License
 
14
# along with this program; if not, write to the Free Software
 
15
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
16
 
 
17
"""Utility for create branches with particular contents."""
 
18
 
 
19
from bzrlib import (
 
20
    controldir,
 
21
    commit,
 
22
    errors,
 
23
    memorytree,
 
24
    revision,
 
25
    )
 
26
 
 
27
 
 
28
class BranchBuilder(object):
 
29
    r"""A BranchBuilder aids creating Branches with particular shapes.
 
30
 
 
31
    The expected way to use BranchBuilder is to construct a
 
32
    BranchBuilder on the transport you want your branch on, and then call
 
33
    appropriate build_ methods on it to get the shape of history you want.
 
34
 
 
35
    This is meant as a helper for the test suite, not as a general class for
 
36
    real data.
 
37
 
 
38
    For instance:
 
39
 
 
40
    >>> from bzrlib.transport.memory import MemoryTransport
 
41
    >>> builder = BranchBuilder(MemoryTransport("memory:///"))
 
42
    >>> builder.start_series()
 
43
    >>> builder.build_snapshot('rev-id', None, [
 
44
    ...     ('add', ('', 'root-id', 'directory', '')),
 
45
    ...     ('add', ('filename', 'f-id', 'file', 'content\n'))])
 
46
    'rev-id'
 
47
    >>> builder.build_snapshot('rev2-id', ['rev-id'],
 
48
    ...     [('modify', ('f-id', 'new-content\n'))])
 
49
    'rev2-id'
 
50
    >>> builder.finish_series()
 
51
    >>> branch = builder.get_branch()
 
52
 
 
53
    :ivar _tree: This is a private member which is not meant to be modified by
 
54
        users of this class. While a 'series' is in progress, it should hold a
 
55
        MemoryTree with the contents of the last commit (ready to be modified
 
56
        by the next build_snapshot command) with a held write lock. Outside of
 
57
        a series in progress, it should be None.
 
58
    """
 
59
 
 
60
    def __init__(self, transport=None, format=None, branch=None):
 
61
        """Construct a BranchBuilder on transport.
 
62
 
 
63
        :param transport: The transport the branch should be created on.
 
64
            If the path of the transport does not exist but its parent does
 
65
            it will be created.
 
66
        :param format: Either a BzrDirFormat, or the name of a format in the
 
67
            controldir format registry for the branch to be built.
 
68
        :param branch: An already constructed branch to use.  This param is
 
69
            mutually exclusive with the transport and format params.
 
70
        """
 
71
        if branch is not None:
 
72
            if format is not None:
 
73
                raise AssertionError(
 
74
                    "branch and format kwargs are mutually exclusive")
 
75
            if transport is not None:
 
76
                raise AssertionError(
 
77
                    "branch and transport kwargs are mutually exclusive")
 
78
            self._branch = branch
 
79
        else:
 
80
            if not transport.has('.'):
 
81
                transport.mkdir('.')
 
82
            if format is None:
 
83
                format = 'default'
 
84
            if isinstance(format, str):
 
85
                format = controldir.format_registry.make_bzrdir(format)
 
86
            self._branch = controldir.ControlDir.create_branch_convenience(
 
87
                transport.base, format=format, force_new_tree=False)
 
88
        self._tree = None
 
89
 
 
90
    def build_commit(self, parent_ids=None, allow_leftmost_as_ghost=False,
 
91
                     **commit_kwargs):
 
92
        """Build a commit on the branch.
 
93
 
 
94
        This makes a commit with no real file content for when you only want
 
95
        to look at the revision graph structure.
 
96
 
 
97
        :param commit_kwargs: Arguments to pass through to commit, such as
 
98
             timestamp.
 
99
        """
 
100
        if parent_ids is not None:
 
101
            if len(parent_ids) == 0:
 
102
                base_id = revision.NULL_REVISION
 
103
            else:
 
104
                base_id = parent_ids[0]
 
105
            if base_id != self._branch.last_revision():
 
106
                self._move_branch_pointer(base_id,
 
107
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
 
108
        tree = memorytree.MemoryTree.create_on_branch(self._branch)
 
109
        tree.lock_write()
 
110
        try:
 
111
            if parent_ids is not None:
 
112
                tree.set_parent_ids(parent_ids,
 
113
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
 
114
            tree.add('')
 
115
            return self._do_commit(tree, **commit_kwargs)
 
116
        finally:
 
117
            tree.unlock()
 
118
 
 
119
    def _do_commit(self, tree, message=None, message_callback=None, **kwargs):
 
120
        reporter = commit.NullCommitReporter()
 
121
        if message is None and message_callback is None:
 
122
            message = u'commit %d' % (self._branch.revno() + 1,)
 
123
        return tree.commit(message, message_callback=message_callback,
 
124
            reporter=reporter,
 
125
            **kwargs)
 
126
 
 
127
    def _move_branch_pointer(self, new_revision_id,
 
128
        allow_leftmost_as_ghost=False):
 
129
        """Point self._branch to a different revision id."""
 
130
        self._branch.lock_write()
 
131
        try:
 
132
            # We don't seem to have a simple set_last_revision(), so we
 
133
            # implement it here.
 
134
            cur_revno, cur_revision_id = self._branch.last_revision_info()
 
135
            try:
 
136
                g = self._branch.repository.get_graph()
 
137
                new_revno = g.find_distance_to_null(new_revision_id,
 
138
                    [(cur_revision_id, cur_revno)])
 
139
                self._branch.set_last_revision_info(new_revno, new_revision_id)
 
140
            except errors.GhostRevisionsHaveNoRevno:
 
141
                if not allow_leftmost_as_ghost:
 
142
                    raise
 
143
                new_revno = 1
 
144
        finally:
 
145
            self._branch.unlock()
 
146
        if self._tree is not None:
 
147
            # We are currently processing a series, but when switching branch
 
148
            # pointers, it is easiest to just create a new memory tree.
 
149
            # That way we are sure to have the right files-on-disk
 
150
            # We are cheating a little bit here, and locking the new tree
 
151
            # before the old tree is unlocked. But that way the branch stays
 
152
            # locked throughout.
 
153
            new_tree = memorytree.MemoryTree.create_on_branch(self._branch)
 
154
            new_tree.lock_write()
 
155
            self._tree.unlock()
 
156
            self._tree = new_tree
 
157
 
 
158
    def start_series(self):
 
159
        """We will be creating a series of commits.
 
160
 
 
161
        This allows us to hold open the locks while we are processing.
 
162
 
 
163
        Make sure to call 'finish_series' when you are done.
 
164
        """
 
165
        if self._tree is not None:
 
166
            raise AssertionError('You cannot start a new series while a'
 
167
                                 ' series is already going.')
 
168
        self._tree = memorytree.MemoryTree.create_on_branch(self._branch)
 
169
        self._tree.lock_write()
 
170
 
 
171
    def finish_series(self):
 
172
        """Call this after start_series to unlock the various objects."""
 
173
        self._tree.unlock()
 
174
        self._tree = None
 
175
 
 
176
    def build_snapshot(self, revision_id, parent_ids, actions,
 
177
        message=None, timestamp=None, allow_leftmost_as_ghost=False,
 
178
        committer=None, timezone=None, message_callback=None):
 
179
        """Build a commit, shaped in a specific way.
 
180
 
 
181
        Most of the actions are self-explanatory.  'flush' is special action to
 
182
        break a series of actions into discrete steps so that complex changes
 
183
        (such as unversioning a file-id and re-adding it with a different kind)
 
184
        can be expressed in a way that will clearly work.
 
185
 
 
186
        :param revision_id: The handle for the new commit, can be None
 
187
        :param parent_ids: A list of parent_ids to use for the commit.
 
188
            It can be None, which indicates to use the last commit.
 
189
        :param actions: A list of actions to perform. Supported actions are:
 
190
            ('add', ('path', 'file-id', 'kind', 'content' or None))
 
191
            ('modify', ('file-id', 'new-content'))
 
192
            ('unversion', 'file-id')
 
193
            ('rename', ('orig-path', 'new-path'))
 
194
            ('flush', None)
 
195
        :param message: An optional commit message, if not supplied, a default
 
196
            commit message will be written.
 
197
        :param message_callback: A message callback to use for the commit, as
 
198
            per mutabletree.commit.
 
199
        :param timestamp: If non-None, set the timestamp of the commit to this
 
200
            value.
 
201
        :param timezone: An optional timezone for timestamp.
 
202
        :param committer: An optional username to use for commit
 
203
        :param allow_leftmost_as_ghost: True if the leftmost parent should be
 
204
            permitted to be a ghost.
 
205
        :return: The revision_id of the new commit
 
206
        """
 
207
        if parent_ids is not None:
 
208
            if len(parent_ids) == 0:
 
209
                base_id = revision.NULL_REVISION
 
210
            else:
 
211
                base_id = parent_ids[0]
 
212
            if base_id != self._branch.last_revision():
 
213
                self._move_branch_pointer(base_id,
 
214
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
 
215
 
 
216
        if self._tree is not None:
 
217
            tree = self._tree
 
218
        else:
 
219
            tree = memorytree.MemoryTree.create_on_branch(self._branch)
 
220
        tree.lock_write()
 
221
        try:
 
222
            if parent_ids is not None:
 
223
                tree.set_parent_ids(parent_ids,
 
224
                    allow_leftmost_as_ghost=allow_leftmost_as_ghost)
 
225
            # Unfortunately, MemoryTree.add(directory) just creates an
 
226
            # inventory entry. And the only public function to create a
 
227
            # directory is MemoryTree.mkdir() which creates the directory, but
 
228
            # also always adds it. So we have to use a multi-pass setup.
 
229
            pending = _PendingActions()
 
230
            for action, info in actions:
 
231
                if action == 'add':
 
232
                    path, file_id, kind, content = info
 
233
                    if kind == 'directory':
 
234
                        pending.to_add_directories.append((path, file_id))
 
235
                    else:
 
236
                        pending.to_add_files.append(path)
 
237
                        pending.to_add_file_ids.append(file_id)
 
238
                        pending.to_add_kinds.append(kind)
 
239
                        if content is not None:
 
240
                            pending.new_contents[file_id] = content
 
241
                elif action == 'modify':
 
242
                    file_id, content = info
 
243
                    pending.new_contents[file_id] = content
 
244
                elif action == 'unversion':
 
245
                    pending.to_unversion_ids.add(info)
 
246
                elif action == 'rename':
 
247
                    from_relpath, to_relpath = info
 
248
                    pending.to_rename.append((from_relpath, to_relpath))
 
249
                elif action == 'flush':
 
250
                    self._flush_pending(tree, pending)
 
251
                    pending = _PendingActions()
 
252
                else:
 
253
                    raise ValueError('Unknown build action: "%s"' % (action,))
 
254
            self._flush_pending(tree, pending)
 
255
            return self._do_commit(tree, message=message, rev_id=revision_id,
 
256
                timestamp=timestamp, timezone=timezone, committer=committer,
 
257
                message_callback=message_callback)
 
258
        finally:
 
259
            tree.unlock()
 
260
 
 
261
    def _flush_pending(self, tree, pending):
 
262
        """Flush the pending actions in 'pending', i.e. apply them to 'tree'."""
 
263
        for path, file_id in pending.to_add_directories:
 
264
            if path == '':
 
265
                old_id = tree.path2id(path)
 
266
                if old_id is not None and old_id in pending.to_unversion_ids:
 
267
                    # We're overwriting this path, no need to unversion
 
268
                    pending.to_unversion_ids.discard(old_id)
 
269
                # Special case, because the path already exists
 
270
                tree.add([path], [file_id], ['directory'])
 
271
            else:
 
272
                tree.mkdir(path, file_id)
 
273
        for from_relpath, to_relpath in pending.to_rename:
 
274
            tree.rename_one(from_relpath, to_relpath)
 
275
        if pending.to_unversion_ids:
 
276
            tree.unversion(pending.to_unversion_ids)
 
277
        tree.add(pending.to_add_files, pending.to_add_file_ids, pending.to_add_kinds)
 
278
        for file_id, content in pending.new_contents.iteritems():
 
279
            tree.put_file_bytes_non_atomic(file_id, content)
 
280
 
 
281
    def get_branch(self):
 
282
        """Return the branch created by the builder."""
 
283
        return self._branch
 
284
 
 
285
 
 
286
class _PendingActions(object):
 
287
    """Pending actions for build_snapshot to take.
 
288
 
 
289
    This is just a simple class to hold a bunch of the intermediate state of
 
290
    build_snapshot in single object.
 
291
    """
 
292
 
 
293
    def __init__(self):
 
294
        self.to_add_directories = []
 
295
        self.to_add_files = []
 
296
        self.to_add_file_ids = []
 
297
        self.to_add_kinds = []
 
298
        self.new_contents = {}
 
299
        self.to_unversion_ids = set()
 
300
        self.to_rename = []
 
301