/brz/remove-bazaar

To get this branch, use:
bzr branch http://gegoxaren.bato24.eu/bzr/brz/remove-bazaar

« back to all changes in this revision

Viewing changes to bzrlib/delta.py

Merge bzr.dev.

Show diffs side-by-side

added added

removed removed

Lines of Context:
bzrlib/delta.py
1
 
#! /usr/bin/env python
2
 
# -*- coding: UTF-8 -*-
3
 
 
 
1
# Copyright (C) 2005, 2006 Canonical
 
2
#
4
3
# This program is free software; you can redistribute it and/or modify
5
4
# it under the terms of the GNU General Public License as published by
6
5
# the Free Software Foundation; either version 2 of the License, or
7
6
# (at your option) any later version.
8
 
 
 
7
#
9
8
# This program is distributed in the hope that it will be useful,
10
9
# but WITHOUT ANY WARRANTY; without even the implied warranty of
11
10
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12
11
# GNU General Public License for more details.
13
 
 
 
12
#
14
13
# You should have received a copy of the GNU General Public License
15
14
# along with this program; if not, write to the Free Software
16
15
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
17
16
 
 
17
from bzrlib.inventory import InventoryEntry
18
18
from bzrlib.trace import mutter
 
19
from bzrlib import tree
 
20
 
19
21
 
20
22
class TreeDelta(object):
21
23
    """Describes changes from one tree to another.
27
29
    removed
28
30
        (path, id, kind)
29
31
    renamed
30
 
        (oldpath, newpath, id, kind, text_modified)
 
32
        (oldpath, newpath, id, kind, text_modified, meta_modified)
31
33
    modified
32
 
        (path, id, kind)
 
34
        (path, id, kind, text_modified, meta_modified)
33
35
    unchanged
34
36
        (path, id, kind)
35
37
 
36
38
    Each id is listed only once.
37
39
 
38
40
    Files that are both modified and renamed are listed only in
39
 
    renamed, with the text_modified flag true.
 
41
    renamed, with the text_modified flag true. The text_modified
 
42
    applies either to the the content of the file or the target of the
 
43
    symbolic link, depending of the kind of file.
40
44
 
41
45
    Files are only considered renamed if their name has changed or
42
46
    their parent directory has changed.  Renaming a directory
69
73
            self.modified, self.unchanged)
70
74
 
71
75
    def has_changed(self):
72
 
        changes = len(self.added) + len(self.removed) + len(self.renamed)
73
 
        changes += len(self.modified) 
74
 
        return (changes != 0)
 
76
        return bool(self.modified
 
77
                    or self.added
 
78
                    or self.removed
 
79
                    or self.renamed)
75
80
 
76
81
    def touches_file_id(self, file_id):
77
82
        """Return True if file_id is modified by this delta."""
86
91
            
87
92
 
88
93
    def show(self, to_file, show_ids=False, show_unchanged=False):
 
94
        """output this delta in status-like form to to_file."""
89
95
        def show_list(files):
90
 
            for path, fid, kind in files:
 
96
            for item in files:
 
97
                path, fid, kind = item[:3]
 
98
 
91
99
                if kind == 'directory':
92
100
                    path += '/'
93
101
                elif kind == 'symlink':
94
102
                    path += '@'
95
 
                    
 
103
 
 
104
                if len(item) == 5 and item[4]:
 
105
                    path += '*'
 
106
 
96
107
                if show_ids:
97
108
                    print >>to_file, '  %-30s %s' % (path, fid)
98
109
                else:
106
117
            print >>to_file, 'added:'
107
118
            show_list(self.added)
108
119
 
 
120
        extra_modified = []
 
121
 
109
122
        if self.renamed:
110
123
            print >>to_file, 'renamed:'
111
 
            for oldpath, newpath, fid, kind, text_modified in self.renamed:
 
124
            for (oldpath, newpath, fid, kind,
 
125
                 text_modified, meta_modified) in self.renamed:
 
126
                if text_modified or meta_modified:
 
127
                    extra_modified.append((newpath, fid, kind,
 
128
                                           text_modified, meta_modified))
 
129
                if meta_modified:
 
130
                    newpath += '*'
112
131
                if show_ids:
113
132
                    print >>to_file, '  %s => %s %s' % (oldpath, newpath, fid)
114
133
                else:
115
134
                    print >>to_file, '  %s => %s' % (oldpath, newpath)
116
135
                    
117
 
        if self.modified:
 
136
        if self.modified or extra_modified:
118
137
            print >>to_file, 'modified:'
119
138
            show_list(self.modified)
 
139
            show_list(extra_modified)
120
140
            
121
141
        if show_unchanged and self.unchanged:
122
142
            print >>to_file, 'unchanged:'
123
143
            show_list(self.unchanged)
124
144
 
125
145
 
126
 
 
127
 
def compare_trees(old_tree, new_tree, want_unchanged=False, specific_files=None):
 
146
def compare_trees(old_tree, new_tree, want_unchanged=False, 
 
147
                  specific_files=None, extra_trees=None, 
 
148
                  require_versioned=False):
128
149
    """Describe changes from one tree to another.
129
150
 
130
151
    Returns a TreeDelta with details of added, modified, renamed, and
139
160
        the next.
140
161
 
141
162
    specific_files
142
 
        If true, only check for changes to specified names or
143
 
        files within them.
 
163
        If supplied, only check for changes to specified names or
 
164
        files within them.  When mapping filenames to ids, all matches in all
 
165
        trees (including optional extra_trees) are used, and all children of
 
166
        matched directories are included.
 
167
 
 
168
    extra_trees
 
169
        If non-None, a list of more trees to use for looking up file_ids from
 
170
        paths
 
171
 
 
172
    require_versioned
 
173
        If true, an all files are required to be versioned, and
 
174
        PathsNotVersionedError will be thrown if they are not.
144
175
    """
 
176
    # NB: show_status depends on being able to pass in non-versioned files and
 
177
    # report them as unknown
 
178
    old_tree.lock_read()
 
179
    try:
 
180
        new_tree.lock_read()
 
181
        try:
 
182
            trees = (new_tree, old_tree)
 
183
            if extra_trees is not None:
 
184
                trees = trees + tuple(extra_trees)
 
185
            specific_file_ids = tree.find_ids_across_trees(specific_files, 
 
186
                trees, require_versioned=require_versioned)
 
187
            if specific_files and not specific_file_ids:
 
188
                # All files are unversioned, so just return an empty delta
 
189
                # _compare_trees would think we want a complete delta
 
190
                return TreeDelta()
 
191
            return _compare_trees(old_tree, new_tree, want_unchanged,
 
192
                                  specific_file_ids)
 
193
        finally:
 
194
            new_tree.unlock()
 
195
    finally:
 
196
        old_tree.unlock()
 
197
 
 
198
 
 
199
def _compare_trees(old_tree, new_tree, want_unchanged, specific_file_ids):
145
200
 
146
201
    from osutils import is_inside_any
147
202
    
150
205
    delta = TreeDelta()
151
206
    mutter('start compare_trees')
152
207
 
153
 
    # TODO: match for specific files can be rather smarter by finding
154
 
    # the IDs of those files up front and then considering only that.
155
 
 
156
 
    for file_id in old_tree:
157
 
        if file_id in new_tree:
158
 
            old_ie = old_inv[file_id]
159
 
            new_ie = new_inv[file_id]
160
 
 
161
 
            kind = old_ie.kind
162
 
            assert kind == new_ie.kind
163
 
            
164
 
            assert kind in ('file', 'directory', 'symlink', 'root_directory'), \
165
 
                   'invalid file kind %r' % kind
166
 
 
167
 
            if kind == 'root_directory':
168
 
                continue
169
 
            
170
 
            if specific_files:
171
 
                if (not is_inside_any(specific_files, old_inv.id2path(file_id)) 
172
 
                    and not is_inside_any(specific_files, new_inv.id2path(file_id))):
173
 
                    continue
174
 
 
175
 
            if kind == 'file':
176
 
                old_sha1 = old_tree.get_file_sha1(file_id)
177
 
                new_sha1 = new_tree.get_file_sha1(file_id)
178
 
                text_modified = (old_sha1 != new_sha1)
 
208
    # TODO: Rather than iterating over the whole tree and then filtering, we
 
209
    # could diff just the specified files (if any) and their subtrees.  
 
210
 
 
211
    old_files = old_tree.list_files()
 
212
    new_files = new_tree.list_files()
 
213
 
 
214
    more_old = True
 
215
    more_new = True
 
216
 
 
217
    added = {}
 
218
    removed = {}
 
219
 
 
220
    def get_next(iter):
 
221
        try:
 
222
            return iter.next()
 
223
        except StopIteration:
 
224
            return None, None, None, None, None
 
225
    old_path, old_class, old_kind, old_file_id, old_entry = get_next(old_files)
 
226
    new_path, new_class, new_kind, new_file_id, new_entry = get_next(new_files)
 
227
 
 
228
 
 
229
    def check_matching(old_path, old_entry, new_path, new_entry):
 
230
        """We have matched up 2 file_ids, check for changes."""
 
231
        assert old_entry.kind == new_entry.kind
 
232
 
 
233
        if old_entry.kind == 'root_directory':
 
234
            return
 
235
 
 
236
        if specific_file_ids:
 
237
            if (old_entry.file_id not in specific_file_ids and 
 
238
                new_entry.file_id not in specific_file_ids):
 
239
                return
 
240
 
 
241
        # temporary hack until all entries are populated before clients 
 
242
        # get them
 
243
        old_entry._read_tree_state(old_path, old_tree)
 
244
        new_entry._read_tree_state(new_path, new_tree)
 
245
        text_modified, meta_modified = new_entry.detect_changes(old_entry)
 
246
        
 
247
        # If the name changes, or the parent_id changes, we have a rename
 
248
        # (if we move a parent, that doesn't count as a rename for the file)
 
249
        if (old_entry.name != new_entry.name 
 
250
            or old_entry.parent_id != new_entry.parent_id):
 
251
            delta.renamed.append((old_path,
 
252
                                  new_path,
 
253
                                  old_entry.file_id, old_entry.kind,
 
254
                                  text_modified, meta_modified))
 
255
        elif text_modified or meta_modified:
 
256
            delta.modified.append((new_path, new_entry.file_id, new_entry.kind,
 
257
                                   text_modified, meta_modified))
 
258
        elif want_unchanged:
 
259
            delta.unchanged.append((new_path, new_entry.file_id, new_entry.kind))
 
260
 
 
261
 
 
262
    def handle_old(path, entry):
 
263
        """old entry without a new entry match
 
264
 
 
265
        Check to see if a matching new entry was already seen as an
 
266
        added file, and switch the pair into being a rename.
 
267
        Otherwise just mark the old entry being removed.
 
268
        """
 
269
        if entry.file_id in added:
 
270
            # Actually this is a rename, we found a new file_id earlier
 
271
            # at a different location, so it is no-longer added
 
272
            x_new_path, x_new_entry = added.pop(entry.file_id)
 
273
            check_matching(path, entry, x_new_path, x_new_entry)
 
274
        else:
 
275
            # We have an old_file_id which doesn't line up with a new_file_id
 
276
            # So this file looks to be removed
 
277
            assert entry.file_id not in removed
 
278
            removed[entry.file_id] = path, entry
 
279
 
 
280
    def handle_new(path, entry):
 
281
        """new entry without an old entry match
 
282
        
 
283
        Check to see if a matching old entry was already seen as a
 
284
        removal, and change the pair into a rename.
 
285
        Otherwise just mark the new entry as an added file.
 
286
        """
 
287
        if entry.file_id in removed:
 
288
            # We saw this file_id earlier at an old different location
 
289
            # it is no longer removed, just renamed
 
290
            x_old_path, x_old_entry = removed.pop(entry.file_id)
 
291
            check_matching(x_old_path, x_old_entry, path, entry)
 
292
        else:
 
293
            # We have a new file which does not match an old file
 
294
            # mark it as added
 
295
            assert entry.file_id not in added
 
296
            added[entry.file_id] = path, entry
 
297
 
 
298
    while old_path or new_path:
 
299
        # list_files() returns files in alphabetical path sorted order
 
300
        if old_path == new_path:
 
301
            if old_file_id == new_file_id:
 
302
                # This is the common case, the files are in the same place
 
303
                # check if there were any content changes
 
304
 
 
305
                if old_file_id is None:
 
306
                    # We have 2 unversioned files, no deltas possible???
 
307
                    pass
 
308
                else:
 
309
                    check_matching(old_path, old_entry, new_path, new_entry)
179
310
            else:
180
 
                ## mutter("no text to check for %r %r" % (file_id, kind))
181
 
                text_modified = False
182
 
 
183
 
            # TODO: Can possibly avoid calculating path strings if the
184
 
            # two files are unchanged and their names and parents are
185
 
            # the same and the parents are unchanged all the way up.
186
 
            # May not be worthwhile.
187
 
            
188
 
            if (old_ie.name != new_ie.name
189
 
                or old_ie.parent_id != new_ie.parent_id):
190
 
                delta.renamed.append((old_inv.id2path(file_id),
191
 
                                      new_inv.id2path(file_id),
192
 
                                      file_id, kind,
193
 
                                      text_modified))
194
 
            elif text_modified:
195
 
                delta.modified.append((new_inv.id2path(file_id), file_id, kind))
196
 
            elif want_unchanged:
197
 
                delta.unchanged.append((new_inv.id2path(file_id), file_id, kind))
198
 
        else:
199
 
            kind = old_inv.get_file_kind(file_id)
200
 
            if kind == 'root_directory':
201
 
                continue
202
 
            old_path = old_inv.id2path(file_id)
203
 
            if specific_files:
204
 
                if not is_inside_any(specific_files, old_path):
205
 
                    continue
206
 
            delta.removed.append((old_path, file_id, kind))
207
 
 
208
 
    mutter('start looking for new files')
209
 
    for file_id in new_inv:
210
 
        if file_id in old_inv:
211
 
            continue
212
 
        kind = new_inv.get_file_kind(file_id)
213
 
        if kind == 'root_directory':
214
 
            continue
215
 
        new_path = new_inv.id2path(file_id)
216
 
        if specific_files:
217
 
            if not is_inside_any(specific_files, new_path):
218
 
                continue
219
 
        delta.added.append((new_path, file_id, kind))
220
 
            
 
311
                # The ids don't match, so we have to handle them both
 
312
                # separately.
 
313
                if old_file_id is not None:
 
314
                    handle_old(old_path, old_entry)
 
315
 
 
316
                if new_file_id is not None:
 
317
                    handle_new(new_path, new_entry)
 
318
 
 
319
            # The two entries were at the same path, so increment both sides
 
320
            old_path, old_class, old_kind, old_file_id, old_entry = get_next(old_files)
 
321
            new_path, new_class, new_kind, new_file_id, new_entry = get_next(new_files)
 
322
        elif new_path is None or (old_path is not None and old_path < new_path):
 
323
            # Assume we don't match, only process old_path
 
324
            if old_file_id is not None:
 
325
                handle_old(old_path, old_entry)
 
326
            # old_path came first, so increment it, trying to match up
 
327
            old_path, old_class, old_kind, old_file_id, old_entry = get_next(old_files)
 
328
        elif new_path is not None:
 
329
            # new_path came first, so increment it, trying to match up
 
330
            if new_file_id is not None:
 
331
                handle_new(new_path, new_entry)
 
332
            new_path, new_class, new_kind, new_file_id, new_entry = get_next(new_files)
 
333
 
 
334
    # Now we have a set of added and removed files, mark them all
 
335
    for old_path, old_entry in removed.itervalues():
 
336
        if specific_file_ids:
 
337
            if not old_entry.file_id in specific_file_ids:
 
338
                continue
 
339
        delta.removed.append((old_path, old_entry.file_id, old_entry.kind))
 
340
    for new_path, new_entry in added.itervalues():
 
341
        if specific_file_ids:
 
342
            if not new_entry.file_id in specific_file_ids:
 
343
                continue
 
344
        delta.added.append((new_path, new_entry.file_id, new_entry.kind))
 
345
 
221
346
    delta.removed.sort()
222
347
    delta.added.sort()
223
348
    delta.renamed.sort()
 
349
    # TODO: jam 20060529 These lists shouldn't need to be sorted
 
350
    #       since we added them in alphabetical order.
224
351
    delta.modified.sort()
225
352
    delta.unchanged.sort()
226
353