← Back to branch summary

~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/repofmt/knitrepo.py

  • Committer: Canonical.com Patch Queue Manager
  • Date: 2008-03-16 14:01:20 UTC
  • mfrom: (3280.2.5 integration)
  • Revision ID: pqm@pqm.ubuntu.com-20080316140120-i3yq8yr1l66m11h7
Start 1.4 development

Show diffs side-by-side

added added

removed removed

Lines of Context:
bzrlib/repofmt/knitrepo.py
1
 
# Copyright (C) 2007-2010 Canonical Ltd
 
1
# Copyright (C) 2005, 2006, 2007 Canonical Ltd
2
2
#
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
12
12
#
13
13
# You should have received a copy of the GNU General Public License
14
14
# along with this program; if not, write to the Free Software
15
 
# Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
 
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
17
17
from bzrlib.lazy_import import lazy_import
18
18
lazy_import(globals(), """
19
19
from bzrlib import (
 
20
    debug,
 
21
    )
 
22
from bzrlib.store import revision
 
23
from bzrlib.store.revision.knit import KnitRevisionStore
 
24
""")
 
25
from bzrlib import (
20
26
    bzrdir,
 
27
    deprecated_graph,
21
28
    errors,
22
 
    knit as _mod_knit,
 
29
    knit,
23
30
    lockable_files,
24
31
    lockdir,
25
32
    osutils,
26
 
    revision as _mod_revision,
27
 
    trace,
 
33
    symbol_versioning,
28
34
    transactions,
29
 
    versionedfile,
30
35
    xml5,
31
36
    xml6,
32
37
    xml7,
33
38
    )
34
 
""")
35
 
from bzrlib import (
36
 
    symbol_versioning,
37
 
    )
 
39
 
38
40
from bzrlib.decorators import needs_read_lock, needs_write_lock
39
41
from bzrlib.repository import (
40
42
    CommitBuilder,
43
45
    RepositoryFormat,
44
46
    RootCommitBuilder,
45
47
    )
 
48
import bzrlib.revision as _mod_revision
 
49
from bzrlib.store.versioned import VersionedFileStore
 
50
from bzrlib.trace import mutter, mutter_callsite
 
51
from bzrlib.util import bencode
46
52
 
47
53
 
48
54
class _KnitParentsProvider(object):
53
59
    def __repr__(self):
54
60
        return 'KnitParentsProvider(%r)' % self._knit
55
61
 
 
62
    @symbol_versioning.deprecated_method(symbol_versioning.one_one)
 
63
    def get_parents(self, revision_ids):
 
64
        """See graph._StackedParentsProvider.get_parents"""
 
65
        parent_map = self.get_parent_map(revision_ids)
 
66
        return [parent_map.get(r, None) for r in revision_ids]
 
67
 
56
68
    def get_parent_map(self, keys):
57
 
        """See graph.StackedParentsProvider.get_parent_map"""
 
69
        """See graph._StackedParentsProvider.get_parent_map"""
58
70
        parent_map = {}
59
71
        for revision_id in keys:
60
 
            if revision_id is None:
61
 
                raise ValueError('get_parent_map(None) is not valid')
62
72
            if revision_id == _mod_revision.NULL_REVISION:
63
73
                parent_map[revision_id] = ()
64
74
            else:
74
84
        return parent_map
75
85
 
76
86
 
77
 
class _KnitsParentsProvider(object):
78
 
 
79
 
    def __init__(self, knit, prefix=()):
80
 
        """Create a parent provider for string keys mapped to tuple keys."""
81
 
        self._knit = knit
82
 
        self._prefix = prefix
83
 
 
84
 
    def __repr__(self):
85
 
        return 'KnitsParentsProvider(%r)' % self._knit
86
 
 
87
 
    def get_parent_map(self, keys):
88
 
        """See graph.StackedParentsProvider.get_parent_map"""
89
 
        parent_map = self._knit.get_parent_map(
90
 
            [self._prefix + (key,) for key in keys])
91
 
        result = {}
92
 
        for key, parents in parent_map.items():
93
 
            revid = key[-1]
94
 
            if len(parents) == 0:
95
 
                parents = (_mod_revision.NULL_REVISION,)
96
 
            else:
97
 
                parents = tuple(parent[-1] for parent in parents)
98
 
            result[revid] = parents
99
 
        for revision_id in keys:
100
 
            if revision_id == _mod_revision.NULL_REVISION:
101
 
                result[revision_id] = ()
102
 
        return result
103
 
 
104
 
 
105
87
class KnitRepository(MetaDirRepository):
106
88
    """Knit format repository."""
107
89
 
112
94
    _commit_builder_class = None
113
95
    _serializer = None
114
96
 
115
 
    def __init__(self, _format, a_bzrdir, control_files, _commit_builder_class,
116
 
        _serializer):
117
 
        MetaDirRepository.__init__(self, _format, a_bzrdir, control_files)
 
97
    def __init__(self, _format, a_bzrdir, control_files, _revision_store,
 
98
        control_store, text_store, _commit_builder_class, _serializer):
 
99
        MetaDirRepository.__init__(self, _format, a_bzrdir, control_files,
 
100
            _revision_store, control_store, text_store)
118
101
        self._commit_builder_class = _commit_builder_class
119
102
        self._serializer = _serializer
120
103
        self._reconcile_fixes_text_parents = True
121
104
 
 
105
    def _warn_if_deprecated(self):
 
106
        # This class isn't deprecated
 
107
        pass
 
108
 
 
109
    def _inventory_add_lines(self, inv_vf, revid, parents, lines, check_content):
 
110
        return inv_vf.add_lines_with_ghosts(revid, parents, lines,
 
111
            check_content=check_content)[0]
 
112
 
122
113
    @needs_read_lock
123
114
    def _all_revision_ids(self):
124
115
        """See Repository.all_revision_ids()."""
125
 
        return [key[0] for key in self.revisions.keys()]
126
 
 
127
 
    def _activate_new_inventory(self):
128
 
        """Put a replacement inventory.new into use as inventories."""
129
 
        # Copy the content across
130
 
        t = self._transport
131
 
        t.copy('inventory.new.kndx', 'inventory.kndx')
132
 
        try:
133
 
            t.copy('inventory.new.knit', 'inventory.knit')
134
 
        except errors.NoSuchFile:
135
 
            # empty inventories knit
136
 
            t.delete('inventory.knit')
137
 
        # delete the temp inventory
138
 
        t.delete('inventory.new.kndx')
139
 
        try:
140
 
            t.delete('inventory.new.knit')
141
 
        except errors.NoSuchFile:
142
 
            # empty inventories knit
143
 
            pass
144
 
        # Force index reload (sanity check)
145
 
        self.inventories._index._reset_cache()
146
 
        self.inventories.keys()
147
 
 
148
 
    def _backup_inventory(self):
149
 
        t = self._transport
150
 
        t.copy('inventory.kndx', 'inventory.backup.kndx')
151
 
        t.copy('inventory.knit', 'inventory.backup.knit')
152
 
 
153
 
    def _move_file_id(self, from_id, to_id):
154
 
        t = self._transport.clone('knits')
155
 
        from_rel_url = self.texts._index._mapper.map((from_id, None))
156
 
        to_rel_url = self.texts._index._mapper.map((to_id, None))
157
 
        # We expect both files to always exist in this case.
158
 
        for suffix in ('.knit', '.kndx'):
159
 
            t.rename(from_rel_url + suffix, to_rel_url + suffix)
160
 
 
161
 
    def _remove_file_id(self, file_id):
162
 
        t = self._transport.clone('knits')
163
 
        rel_url = self.texts._index._mapper.map((file_id, None))
164
 
        for suffix in ('.kndx', '.knit'):
165
 
            try:
166
 
                t.delete(rel_url + suffix)
167
 
            except errors.NoSuchFile:
168
 
                pass
169
 
 
170
 
    def _temp_inventories(self):
171
 
        result = self._format._get_inventories(self._transport, self,
172
 
            'inventory.new')
173
 
        # Reconciling when the output has no revisions would result in no
174
 
        # writes - but we want to ensure there is an inventory for
175
 
        # compatibility with older clients that don't lazy-load.
176
 
        result.get_parent_map([('A',)])
177
 
        return result
 
116
        # Knits get the revision graph from the index of the revision knit, so
 
117
        # it's always possible even if they're on an unlistable transport.
 
118
        return self._revision_store.all_revision_ids(self.get_transaction())
178
119
 
179
120
    def fileid_involved_between_revs(self, from_revid, to_revid):
180
121
        """Find file_id(s) which are involved in the changes between revisions.
202
143
        return self._fileid_involved_by_set(changed)
203
144
 
204
145
    @needs_read_lock
 
146
    def get_ancestry(self, revision_id, topo_sorted=True):
 
147
        """Return a list of revision-ids integrated by a revision.
 
148
        
 
149
        This is topologically sorted, unless 'topo_sorted' is specified as
 
150
        False.
 
151
        """
 
152
        if _mod_revision.is_null(revision_id):
 
153
            return [None]
 
154
        vf = self._get_revision_vf()
 
155
        try:
 
156
            return [None] + vf.get_ancestry(revision_id, topo_sorted)
 
157
        except errors.RevisionNotPresent:
 
158
            raise errors.NoSuchRevision(self, revision_id)
 
159
 
 
160
    @symbol_versioning.deprecated_method(symbol_versioning.one_two)
 
161
    @needs_read_lock
 
162
    def get_data_stream(self, revision_ids):
 
163
        """See Repository.get_data_stream.
 
164
        
 
165
        Deprecated in 1.2 for get_data_stream_for_search.
 
166
        """
 
167
        search_result = self.revision_ids_to_search_result(set(revision_ids))
 
168
        return self.get_data_stream_for_search(search_result)
 
169
 
 
170
    @needs_read_lock
 
171
    def get_data_stream_for_search(self, search):
 
172
        """See Repository.get_data_stream_for_search."""
 
173
        item_keys = self.item_keys_introduced_by(search.get_keys())
 
174
        for knit_kind, file_id, versions in item_keys:
 
175
            name = (knit_kind,)
 
176
            if knit_kind == 'file':
 
177
                name = ('file', file_id)
 
178
                knit = self.weave_store.get_weave_or_empty(
 
179
                    file_id, self.get_transaction())
 
180
            elif knit_kind == 'inventory':
 
181
                knit = self.get_inventory_weave()
 
182
            elif knit_kind == 'revisions':
 
183
                knit = self._revision_store.get_revision_file(
 
184
                    self.get_transaction())
 
185
            elif knit_kind == 'signatures':
 
186
                knit = self._revision_store.get_signature_file(
 
187
                    self.get_transaction())
 
188
            else:
 
189
                raise AssertionError('Unknown knit kind %r' % (knit_kind,))
 
190
            yield name, _get_stream_as_bytes(knit, versions)
 
191
 
 
192
    @needs_read_lock
205
193
    def get_revision(self, revision_id):
206
194
        """Return the Revision object for a named revision"""
207
195
        revision_id = osutils.safe_revision_id(revision_id)
208
196
        return self.get_revision_reconcile(revision_id)
209
197
 
210
 
    def _refresh_data(self):
211
 
        if not self.is_locked():
212
 
            return
213
 
        # Create a new transaction to force all knits to see the scope change.
214
 
        # This is safe because we're outside a write group.
215
 
        self.control_files._finish_transaction()
216
 
        if self.is_write_locked():
217
 
            self.control_files._set_write_transaction()
218
 
        else:
219
 
            self.control_files._set_read_transaction()
 
198
    @needs_read_lock
 
199
    def get_revision_graph(self, revision_id=None):
 
200
        """Return a dictionary containing the revision graph.
 
201
 
 
202
        :param revision_id: The revision_id to get a graph from. If None, then
 
203
        the entire revision graph is returned. This is a deprecated mode of
 
204
        operation and will be removed in the future.
 
205
        :return: a dictionary of revision_id->revision_parents_list.
 
206
        """
 
207
        if 'evil' in debug.debug_flags:
 
208
            mutter_callsite(3,
 
209
                "get_revision_graph scales with size of history.")
 
210
        # special case NULL_REVISION
 
211
        if revision_id == _mod_revision.NULL_REVISION:
 
212
            return {}
 
213
        a_weave = self._get_revision_vf()
 
214
        if revision_id is None:
 
215
            return a_weave.get_graph()
 
216
        if revision_id not in a_weave:
 
217
            raise errors.NoSuchRevision(self, revision_id)
 
218
        else:
 
219
            # add what can be reached from revision_id
 
220
            return a_weave.get_graph([revision_id])
 
221
 
 
222
    @needs_read_lock
 
223
    @symbol_versioning.deprecated_method(symbol_versioning.one_three)
 
224
    def get_revision_graph_with_ghosts(self, revision_ids=None):
 
225
        """Return a graph of the revisions with ghosts marked as applicable.
 
226
 
 
227
        :param revision_ids: an iterable of revisions to graph or None for all.
 
228
        :return: a Graph object with the graph reachable from revision_ids.
 
229
        """
 
230
        if 'evil' in debug.debug_flags:
 
231
            mutter_callsite(3,
 
232
                "get_revision_graph_with_ghosts scales with size of history.")
 
233
        result = deprecated_graph.Graph()
 
234
        vf = self._get_revision_vf()
 
235
        versions = set(vf.versions())
 
236
        if not revision_ids:
 
237
            pending = set(self.all_revision_ids())
 
238
            required = set([])
 
239
        else:
 
240
            pending = set(revision_ids)
 
241
            # special case NULL_REVISION
 
242
            if _mod_revision.NULL_REVISION in pending:
 
243
                pending.remove(_mod_revision.NULL_REVISION)
 
244
            required = set(pending)
 
245
        done = set([])
 
246
        while len(pending):
 
247
            revision_id = pending.pop()
 
248
            if not revision_id in versions:
 
249
                if revision_id in required:
 
250
                    raise errors.NoSuchRevision(self, revision_id)
 
251
                # a ghost
 
252
                result.add_ghost(revision_id)
 
253
                # mark it as done so we don't try for it again.
 
254
                done.add(revision_id)
 
255
                continue
 
256
            parent_ids = vf.get_parents_with_ghosts(revision_id)
 
257
            for parent_id in parent_ids:
 
258
                # is this queued or done ?
 
259
                if (parent_id not in pending and
 
260
                    parent_id not in done):
 
261
                    # no, queue it.
 
262
                    pending.add(parent_id)
 
263
            result.add_node(revision_id, parent_ids)
 
264
            done.add(revision_id)
 
265
        return result
 
266
 
 
267
    def _get_revision_vf(self):
 
268
        """:return: a versioned file containing the revisions."""
 
269
        vf = self._revision_store.get_revision_file(self.get_transaction())
 
270
        return vf
 
271
 
 
272
    def _get_history_vf(self):
 
273
        """Get a versionedfile whose history graph reflects all revisions.
 
274
 
 
275
        For knit repositories, this is the revision knit.
 
276
        """
 
277
        return self._get_revision_vf()
 
278
 
 
279
    def has_revisions(self, revision_ids):
 
280
        """See Repository.has_revisions()."""
 
281
        result = set()
 
282
        transaction = self.get_transaction()
 
283
        for revision_id in revision_ids:
 
284
            if self._revision_store.has_revision_id(revision_id, transaction):
 
285
                result.add(revision_id)
 
286
        return result
220
287
 
221
288
    @needs_write_lock
222
289
    def reconcile(self, other=None, thorough=False):
225
292
        reconciler = KnitReconciler(self, thorough=thorough)
226
293
        reconciler.reconcile()
227
294
        return reconciler
 
295
    
 
296
    def revision_parents(self, revision_id):
 
297
        return self._get_revision_vf().get_parents(revision_id)
228
298
 
229
299
    def _make_parents_provider(self):
230
 
        return _KnitsParentsProvider(self.revisions)
 
300
        return _KnitParentsProvider(self._get_revision_vf())
231
301
 
232
 
    def _find_inconsistent_revision_parents(self, revisions_iterator=None):
 
302
    def _find_inconsistent_revision_parents(self):
233
303
        """Find revisions with different parent lists in the revision object
234
304
        and in the index graph.
235
305
 
236
 
        :param revisions_iterator: None, or an iterator of (revid,
237
 
            Revision-or-None). This iterator controls the revisions checked.
238
306
        :returns: an iterator yielding tuples of (revison-id, parents-in-index,
239
307
            parents-in-revision).
240
308
        """
241
 
        if not self.is_locked():
242
 
            raise AssertionError()
243
 
        vf = self.revisions
244
 
        if revisions_iterator is None:
245
 
            revisions_iterator = self._iter_revisions(None)
246
 
        for revid, revision in revisions_iterator:
247
 
            if revision is None:
248
 
                pass
249
 
            parent_map = vf.get_parent_map([(revid,)])
250
 
            parents_according_to_index = tuple(parent[-1] for parent in
251
 
                parent_map[(revid,)])
 
309
        assert self.is_locked()
 
310
        vf = self._get_revision_vf()
 
311
        for index_version in vf.versions():
 
312
            parents_according_to_index = tuple(vf.get_parents_with_ghosts(
 
313
                index_version))
 
314
            revision = self.get_revision(index_version)
252
315
            parents_according_to_revision = tuple(revision.parent_ids)
253
316
            if parents_according_to_index != parents_according_to_revision:
254
 
                yield (revid, parents_according_to_index,
 
317
                yield (index_version, parents_according_to_index,
255
318
                    parents_according_to_revision)
256
319
 
257
320
    def _check_for_inconsistent_revision_parents(self):
267
330
 
268
331
 
269
332
class RepositoryFormatKnit(MetaDirRepositoryFormat):
270
 
    """Bzr repository knit format (generalized).
 
333
    """Bzr repository knit format (generalized). 
271
334
 
272
335
    This repository format has:
273
336
     - knits for file texts and inventory
289
352
    _commit_builder_class = None
290
353
    # Set this attribute in derived clases to control the _serializer that the
291
354
    # repository objects will have passed to their constructor.
292
 
    @property
293
 
    def _serializer(self):
294
 
        return xml5.serializer_v5
 
355
    _serializer = xml5.serializer_v5
295
356
    # Knit based repositories handle ghosts reasonably well.
296
357
    supports_ghosts = True
297
358
    # External lookups are not supported in this format.
298
359
    supports_external_lookups = False
299
 
    # No CHK support.
300
 
    supports_chks = False
301
 
    _fetch_order = 'topological'
302
 
    _fetch_uses_deltas = True
303
 
    fast_deltas = False
304
 
 
305
 
    def _get_inventories(self, repo_transport, repo, name='inventory'):
306
 
        mapper = versionedfile.ConstantMapper(name)
307
 
        index = _mod_knit._KndxIndex(repo_transport, mapper,
308
 
            repo.get_transaction, repo.is_write_locked, repo.is_locked)
309
 
        access = _mod_knit._KnitKeyAccess(repo_transport, mapper)
310
 
        return _mod_knit.KnitVersionedFiles(index, access, annotated=False)
311
 
 
312
 
    def _get_revisions(self, repo_transport, repo):
313
 
        mapper = versionedfile.ConstantMapper('revisions')
314
 
        index = _mod_knit._KndxIndex(repo_transport, mapper,
315
 
            repo.get_transaction, repo.is_write_locked, repo.is_locked)
316
 
        access = _mod_knit._KnitKeyAccess(repo_transport, mapper)
317
 
        return _mod_knit.KnitVersionedFiles(index, access, max_delta_chain=0,
318
 
            annotated=False)
319
 
 
320
 
    def _get_signatures(self, repo_transport, repo):
321
 
        mapper = versionedfile.ConstantMapper('signatures')
322
 
        index = _mod_knit._KndxIndex(repo_transport, mapper,
323
 
            repo.get_transaction, repo.is_write_locked, repo.is_locked)
324
 
        access = _mod_knit._KnitKeyAccess(repo_transport, mapper)
325
 
        return _mod_knit.KnitVersionedFiles(index, access, max_delta_chain=0,
326
 
            annotated=False)
327
 
 
328
 
    def _get_texts(self, repo_transport, repo):
329
 
        mapper = versionedfile.HashEscapedPrefixMapper()
330
 
        base_transport = repo_transport.clone('knits')
331
 
        index = _mod_knit._KndxIndex(base_transport, mapper,
332
 
            repo.get_transaction, repo.is_write_locked, repo.is_locked)
333
 
        access = _mod_knit._KnitKeyAccess(base_transport, mapper)
334
 
        return _mod_knit.KnitVersionedFiles(index, access, max_delta_chain=200,
335
 
            annotated=True)
 
360
 
 
361
    def _get_control_store(self, repo_transport, control_files):
 
362
        """Return the control store for this repository."""
 
363
        return VersionedFileStore(
 
364
            repo_transport,
 
365
            prefixed=False,
 
366
            file_mode=control_files._file_mode,
 
367
            versionedfile_class=knit.KnitVersionedFile,
 
368
            versionedfile_kwargs={'factory':knit.KnitPlainFactory()},
 
369
            )
 
370
 
 
371
    def _get_revision_store(self, repo_transport, control_files):
 
372
        """See RepositoryFormat._get_revision_store()."""
 
373
        versioned_file_store = VersionedFileStore(
 
374
            repo_transport,
 
375
            file_mode=control_files._file_mode,
 
376
            prefixed=False,
 
377
            precious=True,
 
378
            versionedfile_class=knit.KnitVersionedFile,
 
379
            versionedfile_kwargs={'delta':False,
 
380
                                  'factory':knit.KnitPlainFactory(),
 
381
                                 },
 
382
            escaped=True,
 
383
            )
 
384
        return KnitRevisionStore(versioned_file_store)
 
385
 
 
386
    def _get_text_store(self, transport, control_files):
 
387
        """See RepositoryFormat._get_text_store()."""
 
388
        return self._get_versioned_file_store('knits',
 
389
                                  transport,
 
390
                                  control_files,
 
391
                                  versionedfile_class=knit.KnitVersionedFile,
 
392
                                  versionedfile_kwargs={
 
393
                                      'create_parent_dir':True,
 
394
                                      'delay_create':True,
 
395
                                      'dir_mode':control_files._dir_mode,
 
396
                                  },
 
397
                                  escaped=True)
336
398
 
337
399
    def initialize(self, a_bzrdir, shared=False):
338
400
        """Create a knit format 1 repository.
342
404
        :param shared: If true the repository will be initialized as a shared
343
405
                       repository.
344
406
        """
345
 
        trace.mutter('creating repository in %s.', a_bzrdir.transport.base)
 
407
        mutter('creating repository in %s.', a_bzrdir.transport.base)
346
408
        dirs = ['knits']
347
409
        files = []
348
410
        utf8_files = [('format', self.get_format_string())]
349
 
 
 
411
        
350
412
        self._upload_blank_content(a_bzrdir, dirs, files, utf8_files, shared)
351
413
        repo_transport = a_bzrdir.get_repository_transport(None)
352
414
        control_files = lockable_files.LockableFiles(repo_transport,
353
415
                                'lock', lockdir.LockDir)
 
416
        control_store = self._get_control_store(repo_transport, control_files)
354
417
        transaction = transactions.WriteTransaction()
355
 
        result = self.open(a_bzrdir=a_bzrdir, _found=True)
356
 
        result.lock_write()
 
418
        # trigger a write of the inventory store.
 
419
        control_store.get_weave_or_empty('inventory', transaction)
 
420
        _revision_store = self._get_revision_store(repo_transport, control_files)
357
421
        # the revision id here is irrelevant: it will not be stored, and cannot
358
 
        # already exist, we do this to create files on disk for older clients.
359
 
        result.inventories.get_parent_map([('A',)])
360
 
        result.revisions.get_parent_map([('A',)])
361
 
        result.signatures.get_parent_map([('A',)])
362
 
        result.unlock()
363
 
        self._run_post_repo_init_hooks(result, a_bzrdir, shared)
364
 
        return result
 
422
        # already exist.
 
423
        _revision_store.has_revision_id('A', transaction)
 
424
        _revision_store.get_signature_file(transaction)
 
425
        return self.open(a_bzrdir=a_bzrdir, _found=True)
365
426
 
366
427
    def open(self, a_bzrdir, _found=False, _override_transport=None):
367
428
        """See RepositoryFormat.open().
368
 
 
 
429
        
369
430
        :param _override_transport: INTERNAL USE ONLY. Allows opening the
370
431
                                    repository at a slightly different url
371
432
                                    than normal. I.e. during 'upgrade'.
372
433
        """
373
434
        if not _found:
374
435
            format = RepositoryFormat.find_format(a_bzrdir)
 
436
            assert format.__class__ ==  self.__class__
375
437
        if _override_transport is not None:
376
438
            repo_transport = _override_transport
377
439
        else:
378
440
            repo_transport = a_bzrdir.get_repository_transport(None)
379
441
        control_files = lockable_files.LockableFiles(repo_transport,
380
442
                                'lock', lockdir.LockDir)
381
 
        repo = self.repository_class(_format=self,
 
443
        text_store = self._get_text_store(repo_transport, control_files)
 
444
        control_store = self._get_control_store(repo_transport, control_files)
 
445
        _revision_store = self._get_revision_store(repo_transport, control_files)
 
446
        return self.repository_class(_format=self,
382
447
                              a_bzrdir=a_bzrdir,
383
448
                              control_files=control_files,
 
449
                              _revision_store=_revision_store,
 
450
                              control_store=control_store,
 
451
                              text_store=text_store,
384
452
                              _commit_builder_class=self._commit_builder_class,
385
453
                              _serializer=self._serializer)
386
 
        repo.revisions = self._get_revisions(repo_transport, repo)
387
 
        repo.signatures = self._get_signatures(repo_transport, repo)
388
 
        repo.inventories = self._get_inventories(repo_transport, repo)
389
 
        repo.texts = self._get_texts(repo_transport, repo)
390
 
        repo.chk_bytes = None
391
 
        repo._transport = repo_transport
392
 
        return repo
393
454
 
394
455
 
395
456
class RepositoryFormatKnit1(RepositoryFormatKnit):
410
471
 
411
472
    repository_class = KnitRepository
412
473
    _commit_builder_class = CommitBuilder
413
 
    @property
414
 
    def _serializer(self):
415
 
        return xml5.serializer_v5
 
474
    _serializer = xml5.serializer_v5
416
475
 
417
476
    def __ne__(self, other):
418
477
        return self.__class__ is not other.__class__
425
484
        """See RepositoryFormat.get_format_description()."""
426
485
        return "Knit repository format 1"
427
486
 
 
487
    def check_conversion_target(self, target_format):
 
488
        pass
 
489
 
428
490
 
429
491
class RepositoryFormatKnit3(RepositoryFormatKnit):
430
492
    """Bzr repository knit format 3.
445
507
    repository_class = KnitRepository
446
508
    _commit_builder_class = RootCommitBuilder
447
509
    rich_root_data = True
448
 
    experimental = True
449
510
    supports_tree_reference = True
450
 
    @property
451
 
    def _serializer(self):
452
 
        return xml7.serializer_v7
 
511
    _serializer = xml7.serializer_v7
453
512
 
454
513
    def _get_matching_bzrdir(self):
455
514
        return bzrdir.format_registry.make_bzrdir('dirstate-with-subtree')
459
518
 
460
519
    _matchingbzrdir = property(_get_matching_bzrdir, _ignore_setting_bzrdir)
461
520
 
 
521
    def check_conversion_target(self, target_format):
 
522
        if not target_format.rich_root_data:
 
523
            raise errors.BadConversionTarget(
 
524
                'Does not support rich root data.', target_format)
 
525
        if not getattr(target_format, 'supports_tree_reference', False):
 
526
            raise errors.BadConversionTarget(
 
527
                'Does not support nested trees', target_format)
 
528
            
462
529
    def get_format_string(self):
463
530
        """See RepositoryFormat.get_format_string()."""
464
531
        return "Bazaar Knit Repository Format 3 (bzr 0.15)\n"
488
555
    _commit_builder_class = RootCommitBuilder
489
556
    rich_root_data = True
490
557
    supports_tree_reference = False
491
 
    @property
492
 
    def _serializer(self):
493
 
        return xml6.serializer_v6
 
558
    _serializer = xml6.serializer_v6
494
559
 
495
560
    def _get_matching_bzrdir(self):
496
561
        return bzrdir.format_registry.make_bzrdir('rich-root')
500
565
 
501
566
    _matchingbzrdir = property(_get_matching_bzrdir, _ignore_setting_bzrdir)
502
567
 
 
568
    def check_conversion_target(self, target_format):
 
569
        if not target_format.rich_root_data:
 
570
            raise errors.BadConversionTarget(
 
571
                'Does not support rich root data.', target_format)
 
572
 
503
573
    def get_format_string(self):
504
574
        """See RepositoryFormat.get_format_string()."""
505
575
        return 'Bazaar Knit Repository Format 4 (bzr 1.0)\n'
507
577
    def get_format_description(self):
508
578
        """See RepositoryFormat.get_format_description()."""
509
579
        return "Knit repository format 4"
 
580
 
 
581
 
 
582
def _get_stream_as_bytes(knit, required_versions):
 
583
    """Generate a serialised data stream.
 
584
 
 
585
    The format is a bencoding of a list.  The first element of the list is a
 
586
    string of the format signature, then each subsequent element is a list
 
587
    corresponding to a record.  Those lists contain:
 
588
 
 
589
      * a version id
 
590
      * a list of options
 
591
      * a list of parents
 
592
      * the bytes
 
593
 
 
594
    :returns: a bencoded list.
 
595
    """
 
596
    knit_stream = knit.get_data_stream(required_versions)
 
597
    format_signature, data_list, callable = knit_stream
 
598
    data = []
 
599
    data.append(format_signature)
 
600
    for version, options, length, parents in data_list:
 
601
        data.append([version, options, parents, callable(length)])
 
602
    return bencode.bencode(data)