← Back to branch summary

~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/delta.py

  • Committer: Canonical.com Patch Queue Manager
  • Date: 2006-06-16 14:33:42 UTC
  • mfrom: (1770.2.1 config)
  • Revision ID: pqm@pqm.ubuntu.com-20060616143342-8f7f4a4f77c1e4c8
Use create_signature for signing policy, deprecate check_signatures for this

Show diffs side-by-side

added added

removed removed

Lines of Context:
bzrlib/delta.py
1
 
# -*- coding: UTF-8 -*-
 
1
# Copyright (C) 2005, 2006 Canonical
2
2
 
3
3
# This program is free software; you can redistribute it and/or modify
4
4
# it under the terms of the GNU General Public License as published by
14
14
# along with this program; if not, write to the Free Software
15
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
16
16
 
 
17
from bzrlib.inventory import InventoryEntry
17
18
from bzrlib.trace import mutter
18
19
 
 
20
 
19
21
class TreeDelta(object):
20
22
    """Describes changes from one tree to another.
21
23
 
26
28
    removed
27
29
        (path, id, kind)
28
30
    renamed
29
 
        (oldpath, newpath, id, kind, text_modified)
 
31
        (oldpath, newpath, id, kind, text_modified, meta_modified)
30
32
    modified
31
 
        (path, id, kind)
 
33
        (path, id, kind, text_modified, meta_modified)
32
34
    unchanged
33
35
        (path, id, kind)
34
36
 
35
37
    Each id is listed only once.
36
38
 
37
39
    Files that are both modified and renamed are listed only in
38
 
    renamed, with the text_modified flag true.
 
40
    renamed, with the text_modified flag true. The text_modified
 
41
    applies either to the the content of the file or the target of the
 
42
    symbolic link, depending of the kind of file.
39
43
 
40
44
    Files are only considered renamed if their name has changed or
41
45
    their parent directory has changed.  Renaming a directory
68
72
            self.modified, self.unchanged)
69
73
 
70
74
    def has_changed(self):
71
 
        changes = len(self.added) + len(self.removed) + len(self.renamed)
72
 
        changes += len(self.modified) 
73
 
        return (changes != 0)
 
75
        return bool(self.modified
 
76
                    or self.added
 
77
                    or self.removed
 
78
                    or self.renamed)
74
79
 
75
80
    def touches_file_id(self, file_id):
76
81
        """Return True if file_id is modified by this delta."""
86
91
 
87
92
    def show(self, to_file, show_ids=False, show_unchanged=False):
88
93
        def show_list(files):
89
 
            for path, fid, kind in files:
 
94
            for item in files:
 
95
                path, fid, kind = item[:3]
 
96
 
90
97
                if kind == 'directory':
91
98
                    path += '/'
92
99
                elif kind == 'symlink':
93
100
                    path += '@'
94
 
                    
 
101
 
 
102
                if len(item) == 5 and item[4]:
 
103
                    path += '*'
 
104
 
95
105
                if show_ids:
96
106
                    print >>to_file, '  %-30s %s' % (path, fid)
97
107
                else:
105
115
            print >>to_file, 'added:'
106
116
            show_list(self.added)
107
117
 
 
118
        extra_modified = []
 
119
 
108
120
        if self.renamed:
109
121
            print >>to_file, 'renamed:'
110
 
            for oldpath, newpath, fid, kind, text_modified in self.renamed:
 
122
            for (oldpath, newpath, fid, kind,
 
123
                 text_modified, meta_modified) in self.renamed:
 
124
                if text_modified or meta_modified:
 
125
                    extra_modified.append((newpath, fid, kind,
 
126
                                           text_modified, meta_modified))
 
127
                if meta_modified:
 
128
                    newpath += '*'
111
129
                if show_ids:
112
130
                    print >>to_file, '  %s => %s %s' % (oldpath, newpath, fid)
113
131
                else:
114
132
                    print >>to_file, '  %s => %s' % (oldpath, newpath)
115
133
                    
116
 
        if self.modified:
 
134
        if self.modified or extra_modified:
117
135
            print >>to_file, 'modified:'
118
136
            show_list(self.modified)
 
137
            show_list(extra_modified)
119
138
            
120
139
        if show_unchanged and self.unchanged:
121
140
            print >>to_file, 'unchanged:'
139
158
 
140
159
    specific_files
141
160
        If true, only check for changes to specified names or
142
 
        files within them.
 
161
        files within them.  Any unversioned files given have no effect
 
162
        (but this might change in the future).
143
163
    """
 
164
    # NB: show_status depends on being able to pass in non-versioned files and
 
165
    # report them as unknown
 
166
    old_tree.lock_read()
 
167
    try:
 
168
        new_tree.lock_read()
 
169
        try:
 
170
            return _compare_trees(old_tree, new_tree, want_unchanged,
 
171
                                  specific_files)
 
172
        finally:
 
173
            new_tree.unlock()
 
174
    finally:
 
175
        old_tree.unlock()
 
176
 
 
177
 
 
178
def _compare_trees(old_tree, new_tree, want_unchanged, specific_files):
144
179
 
145
180
    from osutils import is_inside_any
146
181
    
149
184
    delta = TreeDelta()
150
185
    mutter('start compare_trees')
151
186
 
152
 
    # TODO: match for specific files can be rather smarter by finding
153
 
    # the IDs of those files up front and then considering only that.
154
 
 
155
 
    for file_id in old_tree:
156
 
        if file_id in new_tree:
157
 
            old_ie = old_inv[file_id]
158
 
            new_ie = new_inv[file_id]
159
 
 
160
 
            kind = old_ie.kind
161
 
            assert kind == new_ie.kind
162
 
            
163
 
            assert kind in ('file', 'directory', 'symlink', 'root_directory'), \
164
 
                   'invalid file kind %r' % kind
165
 
 
166
 
            if kind == 'root_directory':
167
 
                continue
168
 
            
169
 
            if specific_files:
170
 
                if (not is_inside_any(specific_files, old_inv.id2path(file_id)) 
171
 
                    and not is_inside_any(specific_files, new_inv.id2path(file_id))):
172
 
                    continue
173
 
 
174
 
            if kind == 'file':
175
 
                old_sha1 = old_tree.get_file_sha1(file_id)
176
 
                new_sha1 = new_tree.get_file_sha1(file_id)
177
 
                text_modified = (old_sha1 != new_sha1)
 
187
    # TODO: Rather than iterating over the whole tree and then filtering, we
 
188
    # could diff just the specified files (if any) and their subtrees.  
 
189
    # Perhaps should take a list of file-ids instead?   Need to indicate any
 
190
    # ids or names which were not found in the trees.
 
191
 
 
192
    old_files = old_tree.list_files()
 
193
    new_files = new_tree.list_files()
 
194
 
 
195
    more_old = True
 
196
    more_new = True
 
197
 
 
198
    added = {}
 
199
    removed = {}
 
200
 
 
201
    def get_next(iter):
 
202
        try:
 
203
            return iter.next()
 
204
        except StopIteration:
 
205
            return None, None, None, None, None
 
206
    old_path, old_class, old_kind, old_file_id, old_entry = get_next(old_files)
 
207
    new_path, new_class, new_kind, new_file_id, new_entry = get_next(new_files)
 
208
 
 
209
 
 
210
    def check_matching(old_path, old_entry, new_path, new_entry):
 
211
        """We have matched up 2 file_ids, check for changes."""
 
212
        assert old_entry.kind == new_entry.kind
 
213
 
 
214
        if old_entry.kind == 'root_directory':
 
215
            return
 
216
 
 
217
        if specific_files:
 
218
            if (not is_inside_any(specific_files, old_path)
 
219
                and not is_inside_any(specific_files, new_path)):
 
220
                return
 
221
 
 
222
        # temporary hack until all entries are populated before clients 
 
223
        # get them
 
224
        old_entry._read_tree_state(old_path, old_tree)
 
225
        new_entry._read_tree_state(new_path, new_tree)
 
226
        text_modified, meta_modified = new_entry.detect_changes(old_entry)
 
227
        
 
228
        # If the name changes, or the parent_id changes, we have a rename
 
229
        # (if we move a parent, that doesn't count as a rename for the file)
 
230
        if (old_entry.name != new_entry.name 
 
231
            or old_entry.parent_id != new_entry.parent_id):
 
232
            delta.renamed.append((old_path,
 
233
                                  new_path,
 
234
                                  old_entry.file_id, old_entry.kind,
 
235
                                  text_modified, meta_modified))
 
236
        elif text_modified or meta_modified:
 
237
            delta.modified.append((new_path, new_entry.file_id, new_entry.kind,
 
238
                                   text_modified, meta_modified))
 
239
        elif want_unchanged:
 
240
            delta.unchanged.append((new_path, new_entry.file_id, new_entry.kind))
 
241
 
 
242
 
 
243
    def handle_old(path, entry):
 
244
        """old entry without a new entry match
 
245
 
 
246
        Check to see if a matching new entry was already seen as an
 
247
        added file, and switch the pair into being a rename.
 
248
        Otherwise just mark the old entry being removed.
 
249
        """
 
250
        if entry.file_id in added:
 
251
            # Actually this is a rename, we found a new file_id earlier
 
252
            # at a different location, so it is no-longer added
 
253
            x_new_path, x_new_entry = added.pop(entry.file_id)
 
254
            check_matching(path, entry, x_new_path, x_new_entry)
 
255
        else:
 
256
            # We have an old_file_id which doesn't line up with a new_file_id
 
257
            # So this file looks to be removed
 
258
            assert entry.file_id not in removed
 
259
            removed[entry.file_id] = path, entry
 
260
 
 
261
    def handle_new(path, entry):
 
262
        """new entry without an old entry match
 
263
        
 
264
        Check to see if a matching old entry was already seen as a
 
265
        removal, and change the pair into a rename.
 
266
        Otherwise just mark the new entry as an added file.
 
267
        """
 
268
        if entry.file_id in removed:
 
269
            # We saw this file_id earlier at an old different location
 
270
            # it is no longer removed, just renamed
 
271
            x_old_path, x_old_entry = removed.pop(entry.file_id)
 
272
            check_matching(x_old_path, x_old_entry, path, entry)
 
273
        else:
 
274
            # We have a new file which does not match an old file
 
275
            # mark it as added
 
276
            assert entry.file_id not in added
 
277
            added[entry.file_id] = path, entry
 
278
 
 
279
    while old_path or new_path:
 
280
        # list_files() returns files in alphabetical path sorted order
 
281
        if old_path == new_path:
 
282
            if old_file_id == new_file_id:
 
283
                # This is the common case, the files are in the same place
 
284
                # check if there were any content changes
 
285
 
 
286
                if old_file_id is None:
 
287
                    # We have 2 unversioned files, no deltas possible???
 
288
                    pass
 
289
                else:
 
290
                    check_matching(old_path, old_entry, new_path, new_entry)
178
291
            else:
179
 
                ## mutter("no text to check for %r %r" % (file_id, kind))
180
 
                text_modified = False
181
 
 
182
 
            # TODO: Can possibly avoid calculating path strings if the
183
 
            # two files are unchanged and their names and parents are
184
 
            # the same and the parents are unchanged all the way up.
185
 
            # May not be worthwhile.
186
 
            
187
 
            if (old_ie.name != new_ie.name
188
 
                or old_ie.parent_id != new_ie.parent_id):
189
 
                delta.renamed.append((old_inv.id2path(file_id),
190
 
                                      new_inv.id2path(file_id),
191
 
                                      file_id, kind,
192
 
                                      text_modified))
193
 
            elif text_modified:
194
 
                delta.modified.append((new_inv.id2path(file_id), file_id, kind))
195
 
            elif want_unchanged:
196
 
                delta.unchanged.append((new_inv.id2path(file_id), file_id, kind))
197
 
        else:
198
 
            kind = old_inv.get_file_kind(file_id)
199
 
            if kind == 'root_directory':
 
292
                # The ids don't match, so we have to handle them both
 
293
                # separately.
 
294
                if old_file_id is not None:
 
295
                    handle_old(old_path, old_entry)
 
296
 
 
297
                if new_file_id is not None:
 
298
                    handle_new(new_path, new_entry)
 
299
 
 
300
            # The two entries were at the same path, so increment both sides
 
301
            old_path, old_class, old_kind, old_file_id, old_entry = get_next(old_files)
 
302
            new_path, new_class, new_kind, new_file_id, new_entry = get_next(new_files)
 
303
        elif new_path is None or (old_path is not None and old_path < new_path):
 
304
            # Assume we don't match, only process old_path
 
305
            if old_file_id is not None:
 
306
                handle_old(old_path, old_entry)
 
307
            # old_path came first, so increment it, trying to match up
 
308
            old_path, old_class, old_kind, old_file_id, old_entry = get_next(old_files)
 
309
        elif new_path is not None:
 
310
            # new_path came first, so increment it, trying to match up
 
311
            if new_file_id is not None:
 
312
                handle_new(new_path, new_entry)
 
313
            new_path, new_class, new_kind, new_file_id, new_entry = get_next(new_files)
 
314
 
 
315
    # Now we have a set of added and removed files, mark them all
 
316
    for old_path, old_entry in removed.itervalues():
 
317
        if specific_files:
 
318
            if not is_inside_any(specific_files, old_path):
200
319
                continue
201
 
            old_path = old_inv.id2path(file_id)
202
 
            if specific_files:
203
 
                if not is_inside_any(specific_files, old_path):
204
 
                    continue
205
 
            delta.removed.append((old_path, file_id, kind))
206
 
 
207
 
    mutter('start looking for new files')
208
 
    for file_id in new_inv:
209
 
        if file_id in old_inv:
210
 
            continue
211
 
        kind = new_inv.get_file_kind(file_id)
212
 
        if kind == 'root_directory':
213
 
            continue
214
 
        new_path = new_inv.id2path(file_id)
 
320
        delta.removed.append((old_path, old_entry.file_id, old_entry.kind))
 
321
    for new_path, new_entry in added.itervalues():
215
322
        if specific_files:
216
323
            if not is_inside_any(specific_files, new_path):
217
324
                continue
218
 
        delta.added.append((new_path, file_id, kind))
219
 
            
 
325
        delta.added.append((new_path, new_entry.file_id, new_entry.kind))
 
326
 
220
327
    delta.removed.sort()
221
328
    delta.added.sort()
222
329
    delta.renamed.sort()
 
330
    # TODO: jam 20060529 These lists shouldn't need to be sorted
 
331
    #       since we added them in alphabetical order.
223
332
    delta.modified.sort()
224
333
    delta.unchanged.sort()
225
334