Merge branch 'kn/for-each-tag-branch'
[git] / t / t1450-fsck.sh
1 #!/bin/sh
2
3 test_description='git fsck random collection of tests
4
5 * (HEAD) B
6 * (master) A
7 '
8
9 . ./test-lib.sh
10
11 test_expect_success setup '
12         git config gc.auto 0 &&
13         git config i18n.commitencoding ISO-8859-1 &&
14         test_commit A fileA one &&
15         git config --unset i18n.commitencoding &&
16         git checkout HEAD^0 &&
17         test_commit B fileB two &&
18         git tag -d A B &&
19         git reflog expire --expire=now --all &&
20         >empty
21 '
22
23 test_expect_success 'loose objects borrowed from alternate are not missing' '
24         mkdir another &&
25         (
26                 cd another &&
27                 git init &&
28                 echo ../../../.git/objects >.git/objects/info/alternates &&
29                 test_commit C fileC one &&
30                 git fsck --no-dangling >../actual 2>&1
31         ) &&
32         test_cmp empty actual
33 '
34
35 test_expect_success 'HEAD is part of refs, valid objects appear valid' '
36         git fsck >actual 2>&1 &&
37         test_cmp empty actual
38 '
39
40 # Corruption tests follow.  Make sure to remove all traces of the
41 # specific corruption you test afterwards, lest a later test trip over
42 # it.
43
44 test_expect_success 'setup: helpers for corruption tests' '
45         sha1_file() {
46                 echo "$*" | sed "s#..#.git/objects/&/#"
47         } &&
48
49         remove_object() {
50                 file=$(sha1_file "$*") &&
51                 test -e "$file" &&
52                 rm -f "$file"
53         }
54 '
55
56 test_expect_success 'object with bad sha1' '
57         sha=$(echo blob | git hash-object -w --stdin) &&
58         old=$(echo $sha | sed "s+^..+&/+") &&
59         new=$(dirname $old)/ffffffffffffffffffffffffffffffffffffff &&
60         sha="$(dirname $new)$(basename $new)" &&
61         mv .git/objects/$old .git/objects/$new &&
62         test_when_finished "remove_object $sha" &&
63         git update-index --add --cacheinfo 100644 $sha foo &&
64         test_when_finished "git read-tree -u --reset HEAD" &&
65         tree=$(git write-tree) &&
66         test_when_finished "remove_object $tree" &&
67         cmt=$(echo bogus | git commit-tree $tree) &&
68         test_when_finished "remove_object $cmt" &&
69         git update-ref refs/heads/bogus $cmt &&
70         test_when_finished "git update-ref -d refs/heads/bogus" &&
71
72         test_must_fail git fsck 2>out &&
73         cat out &&
74         grep "$sha.*corrupt" out
75 '
76
77 test_expect_success 'branch pointing to non-commit' '
78         git rev-parse HEAD^{tree} >.git/refs/heads/invalid &&
79         test_when_finished "git update-ref -d refs/heads/invalid" &&
80         git fsck 2>out &&
81         cat out &&
82         grep "not a commit" out
83 '
84
85 test_expect_success 'email without @ is okay' '
86         git cat-file commit HEAD >basis &&
87         sed "s/@/AT/" basis >okay &&
88         new=$(git hash-object -t commit -w --stdin <okay) &&
89         test_when_finished "remove_object $new" &&
90         git update-ref refs/heads/bogus "$new" &&
91         test_when_finished "git update-ref -d refs/heads/bogus" &&
92         git fsck 2>out &&
93         cat out &&
94         ! grep "commit $new" out
95 '
96
97 test_expect_success 'email with embedded > is not okay' '
98         git cat-file commit HEAD >basis &&
99         sed "s/@[a-z]/&>/" basis >bad-email &&
100         new=$(git hash-object -t commit -w --stdin <bad-email) &&
101         test_when_finished "remove_object $new" &&
102         git update-ref refs/heads/bogus "$new" &&
103         test_when_finished "git update-ref -d refs/heads/bogus" &&
104         test_must_fail git fsck 2>out &&
105         cat out &&
106         grep "error in commit $new" out
107 '
108
109 test_expect_success 'missing < email delimiter is reported nicely' '
110         git cat-file commit HEAD >basis &&
111         sed "s/<//" basis >bad-email-2 &&
112         new=$(git hash-object -t commit -w --stdin <bad-email-2) &&
113         test_when_finished "remove_object $new" &&
114         git update-ref refs/heads/bogus "$new" &&
115         test_when_finished "git update-ref -d refs/heads/bogus" &&
116         test_must_fail git fsck 2>out &&
117         cat out &&
118         grep "error in commit $new.* - bad name" out
119 '
120
121 test_expect_success 'missing email is reported nicely' '
122         git cat-file commit HEAD >basis &&
123         sed "s/[a-z]* <[^>]*>//" basis >bad-email-3 &&
124         new=$(git hash-object -t commit -w --stdin <bad-email-3) &&
125         test_when_finished "remove_object $new" &&
126         git update-ref refs/heads/bogus "$new" &&
127         test_when_finished "git update-ref -d refs/heads/bogus" &&
128         test_must_fail git fsck 2>out &&
129         cat out &&
130         grep "error in commit $new.* - missing email" out
131 '
132
133 test_expect_success '> in name is reported' '
134         git cat-file commit HEAD >basis &&
135         sed "s/ </> </" basis >bad-email-4 &&
136         new=$(git hash-object -t commit -w --stdin <bad-email-4) &&
137         test_when_finished "remove_object $new" &&
138         git update-ref refs/heads/bogus "$new" &&
139         test_when_finished "git update-ref -d refs/heads/bogus" &&
140         test_must_fail git fsck 2>out &&
141         cat out &&
142         grep "error in commit $new" out
143 '
144
145 # date is 2^64 + 1
146 test_expect_success 'integer overflow in timestamps is reported' '
147         git cat-file commit HEAD >basis &&
148         sed "s/^\\(author .*>\\) [0-9]*/\\1 18446744073709551617/" \
149                 <basis >bad-timestamp &&
150         new=$(git hash-object -t commit -w --stdin <bad-timestamp) &&
151         test_when_finished "remove_object $new" &&
152         git update-ref refs/heads/bogus "$new" &&
153         test_when_finished "git update-ref -d refs/heads/bogus" &&
154         test_must_fail git fsck 2>out &&
155         cat out &&
156         grep "error in commit $new.*integer overflow" out
157 '
158
159 test_expect_success 'malformatted tree object' '
160         test_when_finished "git update-ref -d refs/tags/wrong" &&
161         test_when_finished "remove_object \$T" &&
162         T=$(
163                 GIT_INDEX_FILE=test-index &&
164                 export GIT_INDEX_FILE &&
165                 rm -f test-index &&
166                 >x &&
167                 git add x &&
168                 T=$(git write-tree) &&
169                 (
170                         git cat-file tree $T &&
171                         git cat-file tree $T
172                 ) |
173                 git hash-object -w -t tree --stdin
174         ) &&
175         test_must_fail git fsck 2>out &&
176         grep "error in tree .*contains duplicate file entries" out
177 '
178
179 test_expect_success 'tag pointing to nonexistent' '
180         cat >invalid-tag <<-\EOF &&
181         object ffffffffffffffffffffffffffffffffffffffff
182         type commit
183         tag invalid
184         tagger T A Gger <tagger@example.com> 1234567890 -0000
185
186         This is an invalid tag.
187         EOF
188
189         tag=$(git hash-object -t tag -w --stdin <invalid-tag) &&
190         test_when_finished "remove_object $tag" &&
191         echo $tag >.git/refs/tags/invalid &&
192         test_when_finished "git update-ref -d refs/tags/invalid" &&
193         test_must_fail git fsck --tags >out &&
194         cat out &&
195         grep "broken link" out
196 '
197
198 test_expect_success 'tag pointing to something else than its type' '
199         sha=$(echo blob | git hash-object -w --stdin) &&
200         test_when_finished "remove_object $sha" &&
201         cat >wrong-tag <<-EOF &&
202         object $sha
203         type commit
204         tag wrong
205         tagger T A Gger <tagger@example.com> 1234567890 -0000
206
207         This is an invalid tag.
208         EOF
209
210         tag=$(git hash-object -t tag -w --stdin <wrong-tag) &&
211         test_when_finished "remove_object $tag" &&
212         echo $tag >.git/refs/tags/wrong &&
213         test_when_finished "git update-ref -d refs/tags/wrong" &&
214         test_must_fail git fsck --tags
215 '
216
217 test_expect_success 'tag with incorrect tag name & missing tagger' '
218         sha=$(git rev-parse HEAD) &&
219         cat >wrong-tag <<-EOF &&
220         object $sha
221         type commit
222         tag wrong name format
223
224         This is an invalid tag.
225         EOF
226
227         tag=$(git hash-object -t tag -w --stdin <wrong-tag) &&
228         test_when_finished "remove_object $tag" &&
229         echo $tag >.git/refs/tags/wrong &&
230         test_when_finished "git update-ref -d refs/tags/wrong" &&
231         git fsck --tags 2>out &&
232
233         cat >expect <<-EOF &&
234         warning in tag $tag: badTagName: invalid '\''tag'\'' name: wrong name format
235         warning in tag $tag: missingTaggerEntry: invalid format - expected '\''tagger'\'' line
236         EOF
237         test_cmp expect out
238 '
239
240 test_expect_success 'tag with bad tagger' '
241         sha=$(git rev-parse HEAD) &&
242         cat >wrong-tag <<-EOF &&
243         object $sha
244         type commit
245         tag not-quite-wrong
246         tagger Bad Tagger Name
247
248         This is an invalid tag.
249         EOF
250
251         tag=$(git hash-object --literally -t tag -w --stdin <wrong-tag) &&
252         test_when_finished "remove_object $tag" &&
253         echo $tag >.git/refs/tags/wrong &&
254         test_when_finished "git update-ref -d refs/tags/wrong" &&
255         test_must_fail git fsck --tags 2>out &&
256         grep "error in tag .*: invalid author/committer" out
257 '
258
259 test_expect_success 'cleaned up' '
260         git fsck >actual 2>&1 &&
261         test_cmp empty actual
262 '
263
264 test_expect_success 'rev-list --verify-objects' '
265         git rev-list --verify-objects --all >/dev/null 2>out &&
266         test_cmp empty out
267 '
268
269 test_expect_success 'rev-list --verify-objects with bad sha1' '
270         sha=$(echo blob | git hash-object -w --stdin) &&
271         old=$(echo $sha | sed "s+^..+&/+") &&
272         new=$(dirname $old)/ffffffffffffffffffffffffffffffffffffff &&
273         sha="$(dirname $new)$(basename $new)" &&
274         mv .git/objects/$old .git/objects/$new &&
275         test_when_finished "remove_object $sha" &&
276         git update-index --add --cacheinfo 100644 $sha foo &&
277         test_when_finished "git read-tree -u --reset HEAD" &&
278         tree=$(git write-tree) &&
279         test_when_finished "remove_object $tree" &&
280         cmt=$(echo bogus | git commit-tree $tree) &&
281         test_when_finished "remove_object $cmt" &&
282         git update-ref refs/heads/bogus $cmt &&
283         test_when_finished "git update-ref -d refs/heads/bogus" &&
284
285         test_might_fail git rev-list --verify-objects refs/heads/bogus >/dev/null 2>out &&
286         cat out &&
287         grep -q "error: sha1 mismatch 63ffffffffffffffffffffffffffffffffffffff" out
288 '
289
290 test_expect_success 'force fsck to ignore double author' '
291         git cat-file commit HEAD >basis &&
292         sed "s/^author .*/&,&/" <basis | tr , \\n >multiple-authors &&
293         new=$(git hash-object -t commit -w --stdin <multiple-authors) &&
294         test_when_finished "remove_object $new" &&
295         git update-ref refs/heads/bogus "$new" &&
296         test_when_finished "git update-ref -d refs/heads/bogus" &&
297         test_must_fail git fsck &&
298         git -c fsck.multipleAuthors=ignore fsck
299 '
300
301 _bz='\0'
302 _bz5="$_bz$_bz$_bz$_bz$_bz"
303 _bz20="$_bz5$_bz5$_bz5$_bz5"
304
305 test_expect_success 'fsck notices blob entry pointing to null sha1' '
306         (git init null-blob &&
307          cd null-blob &&
308          sha=$(printf "100644 file$_bz$_bz20" |
309                git hash-object -w --stdin -t tree) &&
310           git fsck 2>out &&
311           cat out &&
312           grep "warning.*null sha1" out
313         )
314 '
315
316 test_expect_success 'fsck notices submodule entry pointing to null sha1' '
317         (git init null-commit &&
318          cd null-commit &&
319          sha=$(printf "160000 submodule$_bz$_bz20" |
320                git hash-object -w --stdin -t tree) &&
321           git fsck 2>out &&
322           cat out &&
323           grep "warning.*null sha1" out
324         )
325 '
326
327 while read name path pretty; do
328         while read mode type; do
329                 : ${pretty:=$path}
330                 test_expect_success "fsck notices $pretty as $type" '
331                 (
332                         git init $name-$type &&
333                         cd $name-$type &&
334                         echo content >file &&
335                         git add file &&
336                         git commit -m base &&
337                         blob=$(git rev-parse :file) &&
338                         tree=$(git rev-parse HEAD^{tree}) &&
339                         value=$(eval "echo \$$type") &&
340                         printf "$mode $type %s\t%s" "$value" "$path" >bad &&
341                         bad_tree=$(git mktree <bad) &&
342                         git fsck 2>out &&
343                         cat out &&
344                         grep "warning.*tree $bad_tree" out
345                 )'
346         done <<-\EOF
347         100644 blob
348         040000 tree
349         EOF
350 done <<-EOF
351 dot .
352 dotdot ..
353 dotgit .git
354 dotgit-case .GIT
355 dotgit-unicode .gI${u200c}T .gI{u200c}T
356 dotgit-case2 .Git
357 git-tilde1 git~1
358 dotgitdot .git.
359 dot-backslash-case .\\\\.GIT\\\\foobar
360 dotgit-case-backslash .git\\\\foobar
361 EOF
362
363 test_expect_success 'fsck allows .Ňit' '
364         (
365                 git init not-dotgit &&
366                 cd not-dotgit &&
367                 echo content >file &&
368                 git add file &&
369                 git commit -m base &&
370                 blob=$(git rev-parse :file) &&
371                 printf "100644 blob $blob\t.\\305\\207it" >tree &&
372                 tree=$(git mktree <tree) &&
373                 git fsck 2>err &&
374                 test_line_count = 0 err
375         )
376 '
377
378 # create a static test repo which is broken by omitting
379 # one particular object ($1, which is looked up via rev-parse
380 # in the new repository).
381 create_repo_missing () {
382         rm -rf missing &&
383         git init missing &&
384         (
385                 cd missing &&
386                 git commit -m one --allow-empty &&
387                 mkdir subdir &&
388                 echo content >subdir/file &&
389                 git add subdir/file &&
390                 git commit -m two &&
391                 unrelated=$(echo unrelated | git hash-object --stdin -w) &&
392                 git tag -m foo tag $unrelated &&
393                 sha1=$(git rev-parse --verify "$1") &&
394                 path=$(echo $sha1 | sed 's|..|&/|') &&
395                 rm .git/objects/$path
396         )
397 }
398
399 test_expect_success 'fsck notices missing blob' '
400         create_repo_missing HEAD:subdir/file &&
401         test_must_fail git -C missing fsck
402 '
403
404 test_expect_success 'fsck notices missing subtree' '
405         create_repo_missing HEAD:subdir &&
406         test_must_fail git -C missing fsck
407 '
408
409 test_expect_success 'fsck notices missing root tree' '
410         create_repo_missing HEAD^{tree} &&
411         test_must_fail git -C missing fsck
412 '
413
414 test_expect_success 'fsck notices missing parent' '
415         create_repo_missing HEAD^ &&
416         test_must_fail git -C missing fsck
417 '
418
419 test_expect_success 'fsck notices missing tagged object' '
420         create_repo_missing tag^{blob} &&
421         test_must_fail git -C missing fsck
422 '
423
424 test_expect_success 'fsck notices ref pointing to missing commit' '
425         create_repo_missing HEAD &&
426         test_must_fail git -C missing fsck
427 '
428
429 test_expect_success 'fsck notices ref pointing to missing tag' '
430         create_repo_missing tag &&
431         test_must_fail git -C missing fsck
432 '
433
434 test_expect_success 'fsck --connectivity-only' '
435         rm -rf connectivity-only &&
436         git init connectivity-only &&
437         (
438                 cd connectivity-only &&
439                 touch empty &&
440                 git add empty &&
441                 test_commit empty &&
442                 empty=.git/objects/e6/9de29bb2d1d6434b8b29ae775ad8c2e48c5391 &&
443                 rm -f $empty &&
444                 echo invalid >$empty &&
445                 test_must_fail git fsck --strict &&
446                 git fsck --strict --connectivity-only &&
447                 tree=$(git rev-parse HEAD:) &&
448                 suffix=${tree#??} &&
449                 tree=.git/objects/${tree%$suffix}/$suffix &&
450                 rm -f $tree &&
451                 echo invalid >$tree &&
452                 test_must_fail git fsck --strict --connectivity-only
453         )
454 '
455
456 test_done