[PATCH] Document git-fetch options
[git] / apply.c
1 /*
2  * apply.c
3  *
4  * Copyright (C) Linus Torvalds, 2005
5  *
6  * This applies patches on top of some (arbitrary) version of the SCM.
7  *
8  * NOTE! It does all its work in the index file, and only cares about
9  * the files in the working directory if you tell it to "merge" the
10  * patch apply.
11  *
12  * Even when merging it always takes the source from the index, and
13  * uses the working tree as a "branch" for a 3-way merge.
14  */
15 #include <ctype.h>
16 #include <fnmatch.h>
17 #include "cache.h"
18
19 // We default to the merge behaviour, since that's what most people would
20 // expect.
21 //
22 //  --check turns on checking that the working tree matches the
23 //    files that are being modified, but doesn't apply the patch
24 //  --stat does just a diffstat, and doesn't actually apply
25 //  --show-files shows the directory changes
26 //
27 static int merge_patch = 1;
28 static int check_index = 0;
29 static int write_index = 0;
30 static int diffstat = 0;
31 static int summary = 0;
32 static int check = 0;
33 static int apply = 1;
34 static int show_files = 0;
35 static const char apply_usage[] =
36 "git-apply [--no-merge] [--stat] [--summary] [--check] [--index] [--apply] [--show-files] <patch>...";
37
38 /*
39  * For "diff-stat" like behaviour, we keep track of the biggest change
40  * we've seen, and the longest filename. That allows us to do simple
41  * scaling.
42  */
43 static int max_change, max_len;
44
45 /*
46  * Various "current state", notably line numbers and what
47  * file (and how) we're patching right now.. The "is_xxxx"
48  * things are flags, where -1 means "don't know yet".
49  */
50 static int linenr = 1;
51
52 struct fragment {
53         unsigned long oldpos, oldlines;
54         unsigned long newpos, newlines;
55         const char *patch;
56         int size;
57         struct fragment *next;
58 };
59
60 struct patch {
61         char *new_name, *old_name, *def_name;
62         unsigned int old_mode, new_mode;
63         int is_rename, is_copy, is_new, is_delete;
64         int lines_added, lines_deleted;
65         int score;
66         struct fragment *fragments;
67         char *result;
68         unsigned long resultsize;
69         struct patch *next;
70 };
71
72 #define CHUNKSIZE (8192)
73 #define SLOP (16)
74
75 static void *read_patch_file(int fd, unsigned long *sizep)
76 {
77         unsigned long size = 0, alloc = CHUNKSIZE;
78         void *buffer = xmalloc(alloc);
79
80         for (;;) {
81                 int nr = alloc - size;
82                 if (nr < 1024) {
83                         alloc += CHUNKSIZE;
84                         buffer = xrealloc(buffer, alloc);
85                         nr = alloc - size;
86                 }
87                 nr = read(fd, buffer + size, nr);
88                 if (!nr)
89                         break;
90                 if (nr < 0) {
91                         if (errno == EAGAIN)
92                                 continue;
93                         die("git-apply: read returned %s", strerror(errno));
94                 }
95                 size += nr;
96         }
97         *sizep = size;
98
99         /*
100          * Make sure that we have some slop in the buffer
101          * so that we can do speculative "memcmp" etc, and
102          * see to it that it is NUL-filled.
103          */
104         if (alloc < size + SLOP)
105                 buffer = xrealloc(buffer, size + SLOP);
106         memset(buffer + size, 0, SLOP);
107         return buffer;
108 }
109
110 static unsigned long linelen(const char *buffer, unsigned long size)
111 {
112         unsigned long len = 0;
113         while (size--) {
114                 len++;
115                 if (*buffer++ == '\n')
116                         break;
117         }
118         return len;
119 }
120
121 static int is_dev_null(const char *str)
122 {
123         return !memcmp("/dev/null", str, 9) && isspace(str[9]);
124 }
125
126 #define TERM_SPACE      1
127 #define TERM_TAB        2
128
129 static int name_terminate(const char *name, int namelen, int c, int terminate)
130 {
131         if (c == ' ' && !(terminate & TERM_SPACE))
132                 return 0;
133         if (c == '\t' && !(terminate & TERM_TAB))
134                 return 0;
135
136         return 1;
137 }
138
139 static char * find_name(const char *line, char *def, int p_value, int terminate)
140 {
141         int len;
142         const char *start = line;
143         char *name;
144
145         for (;;) {
146                 char c = *line;
147
148                 if (isspace(c)) {
149                         if (c == '\n')
150                                 break;
151                         if (name_terminate(start, line-start, c, terminate))
152                                 break;
153                 }
154                 line++;
155                 if (c == '/' && !--p_value)
156                         start = line;
157         }
158         if (!start)
159                 return def;
160         len = line - start;
161         if (!len)
162                 return def;
163
164         /*
165          * Generally we prefer the shorter name, especially
166          * if the other one is just a variation of that with
167          * something else tacked on to the end (ie "file.orig"
168          * or "file~").
169          */
170         if (def) {
171                 int deflen = strlen(def);
172                 if (deflen < len && !strncmp(start, def, deflen))
173                         return def;
174         }
175
176         name = xmalloc(len + 1);
177         memcpy(name, start, len);
178         name[len] = 0;
179         free(def);
180         return name;
181 }
182
183 /*
184  * Get the name etc info from the --/+++ lines of a traditional patch header
185  *
186  * NOTE! This hardcodes "-p1" behaviour in filename detection.
187  *
188  * FIXME! The end-of-filename heuristics are kind of screwy. For existing
189  * files, we can happily check the index for a match, but for creating a
190  * new file we should try to match whatever "patch" does. I have no idea.
191  */
192 static void parse_traditional_patch(const char *first, const char *second, struct patch *patch)
193 {
194         int p_value = 1;
195         char *name;
196
197         first += 4;     // skip "--- "
198         second += 4;    // skip "+++ "
199         if (is_dev_null(first)) {
200                 patch->is_new = 1;
201                 patch->is_delete = 0;
202                 name = find_name(second, NULL, p_value, TERM_SPACE | TERM_TAB);
203                 patch->new_name = name;
204         } else if (is_dev_null(second)) {
205                 patch->is_new = 0;
206                 patch->is_delete = 1;
207                 name = find_name(first, NULL, p_value, TERM_SPACE | TERM_TAB);
208                 patch->old_name = name;
209         } else {
210                 name = find_name(first, NULL, p_value, TERM_SPACE | TERM_TAB);
211                 name = find_name(second, name, p_value, TERM_SPACE | TERM_TAB);
212                 patch->old_name = patch->new_name = name;
213         }
214         if (!name)
215                 die("unable to find filename in patch at line %d", linenr);
216 }
217
218 static int gitdiff_hdrend(const char *line, struct patch *patch)
219 {
220         return -1;
221 }
222
223 /*
224  * We're anal about diff header consistency, to make
225  * sure that we don't end up having strange ambiguous
226  * patches floating around.
227  *
228  * As a result, gitdiff_{old|new}name() will check
229  * their names against any previous information, just
230  * to make sure..
231  */
232 static char *gitdiff_verify_name(const char *line, int isnull, char *orig_name, const char *oldnew)
233 {
234         int len;
235         const char *name;
236
237         if (!orig_name && !isnull)
238                 return find_name(line, NULL, 1, 0);
239
240         name = "/dev/null";
241         len = 9;
242         if (orig_name) {
243                 name = orig_name;
244                 len = strlen(name);
245                 if (isnull)
246                         die("git-apply: bad git-diff - expected /dev/null, got %s on line %d", name, linenr);
247         }
248
249         if (*name == '/')
250                 goto absolute_path;
251
252         for (;;) {
253                 char c = *line++;
254                 if (c == '\n')
255                         break;
256                 if (c != '/')
257                         continue;
258 absolute_path:
259                 if (memcmp(line, name, len) || line[len] != '\n')
260                         break;
261                 return orig_name;
262         }
263         die("git-apply: bad git-diff - inconsistent %s filename on line %d", oldnew, linenr);
264         return NULL;
265 }
266
267 static int gitdiff_oldname(const char *line, struct patch *patch)
268 {
269         patch->old_name = gitdiff_verify_name(line, patch->is_new, patch->old_name, "old");
270         return 0;
271 }
272
273 static int gitdiff_newname(const char *line, struct patch *patch)
274 {
275         patch->new_name = gitdiff_verify_name(line, patch->is_delete, patch->new_name, "new");
276         return 0;
277 }
278
279 static int gitdiff_oldmode(const char *line, struct patch *patch)
280 {
281         patch->old_mode = strtoul(line, NULL, 8);
282         return 0;
283 }
284
285 static int gitdiff_newmode(const char *line, struct patch *patch)
286 {
287         patch->new_mode = strtoul(line, NULL, 8);
288         return 0;
289 }
290
291 static int gitdiff_delete(const char *line, struct patch *patch)
292 {
293         patch->is_delete = 1;
294         patch->old_name = patch->def_name;
295         return gitdiff_oldmode(line, patch);
296 }
297
298 static int gitdiff_newfile(const char *line, struct patch *patch)
299 {
300         patch->is_new = 1;
301         patch->new_name = patch->def_name;
302         return gitdiff_newmode(line, patch);
303 }
304
305 static int gitdiff_copysrc(const char *line, struct patch *patch)
306 {
307         patch->is_copy = 1;
308         patch->old_name = find_name(line, NULL, 0, 0);
309         return 0;
310 }
311
312 static int gitdiff_copydst(const char *line, struct patch *patch)
313 {
314         patch->is_copy = 1;
315         patch->new_name = find_name(line, NULL, 0, 0);
316         return 0;
317 }
318
319 static int gitdiff_renamesrc(const char *line, struct patch *patch)
320 {
321         patch->is_rename = 1;
322         patch->old_name = find_name(line, NULL, 0, 0);
323         return 0;
324 }
325
326 static int gitdiff_renamedst(const char *line, struct patch *patch)
327 {
328         patch->is_rename = 1;
329         patch->new_name = find_name(line, NULL, 0, 0);
330         return 0;
331 }
332
333 static int gitdiff_similarity(const char *line, struct patch *patch)
334 {
335         if ((patch->score = strtoul(line, NULL, 10)) == ULONG_MAX)
336                 patch->score = 0;
337         return 0;
338 }
339
340 static int gitdiff_dissimilarity(const char *line, struct patch *patch)
341 {
342         if ((patch->score = strtoul(line, NULL, 10)) == ULONG_MAX)
343                 patch->score = 0;
344         return 0;
345 }
346
347 /*
348  * This is normal for a diff that doesn't change anything: we'll fall through
349  * into the next diff. Tell the parser to break out.
350  */
351 static int gitdiff_unrecognized(const char *line, struct patch *patch)
352 {
353         return -1;
354 }
355
356 static char *git_header_name(char *line)
357 {
358         int len;
359         char *name, *second;
360
361         /*
362          * Find the first '/'
363          */
364         name = line;
365         for (;;) {
366                 char c = *name++;
367                 if (c == '\n')
368                         return NULL;
369                 if (c == '/')
370                         break;
371         }
372
373         /*
374          * We don't accept absolute paths (/dev/null) as possibly valid
375          */
376         if (name == line+1)
377                 return NULL;
378
379         /*
380          * Accept a name only if it shows up twice, exactly the same
381          * form.
382          */
383         for (len = 0 ; ; len++) {
384                 char c = name[len];
385
386                 switch (c) {
387                 default:
388                         continue;
389                 case '\n':
390                         return NULL;
391                 case '\t': case ' ':
392                         second = name+len;
393                         for (;;) {
394                                 char c = *second++;
395                                 if (c == '\n')
396                                         return NULL;
397                                 if (c == '/')
398                                         break;
399                         }
400                         if (second[len] == '\n' && !memcmp(name, second, len)) {
401                                 char *ret = xmalloc(len + 1);
402                                 memcpy(ret, name, len);
403                                 ret[len] = 0;
404                                 return ret;
405                         }
406                 }
407         }
408         return NULL;
409 }
410
411 /* Verify that we recognize the lines following a git header */
412 static int parse_git_header(char *line, int len, unsigned int size, struct patch *patch)
413 {
414         unsigned long offset;
415
416         /* A git diff has explicit new/delete information, so we don't guess */
417         patch->is_new = 0;
418         patch->is_delete = 0;
419
420         /*
421          * Some things may not have the old name in the
422          * rest of the headers anywhere (pure mode changes,
423          * or removing or adding empty files), so we get
424          * the default name from the header.
425          */
426         patch->def_name = git_header_name(line + strlen("diff --git "));
427
428         line += len;
429         size -= len;
430         linenr++;
431         for (offset = len ; size > 0 ; offset += len, size -= len, line += len, linenr++) {
432                 static const struct opentry {
433                         const char *str;
434                         int (*fn)(const char *, struct patch *);
435                 } optable[] = {
436                         { "@@ -", gitdiff_hdrend },
437                         { "--- ", gitdiff_oldname },
438                         { "+++ ", gitdiff_newname },
439                         { "old mode ", gitdiff_oldmode },
440                         { "new mode ", gitdiff_newmode },
441                         { "deleted file mode ", gitdiff_delete },
442                         { "new file mode ", gitdiff_newfile },
443                         { "copy from ", gitdiff_copysrc },
444                         { "copy to ", gitdiff_copydst },
445                         { "rename old ", gitdiff_renamesrc },
446                         { "rename new ", gitdiff_renamedst },
447                         { "rename from ", gitdiff_renamesrc },
448                         { "rename to ", gitdiff_renamedst },
449                         { "similarity index ", gitdiff_similarity },
450                         { "dissimilarity index ", gitdiff_dissimilarity },
451                         { "", gitdiff_unrecognized },
452                 };
453                 int i;
454
455                 len = linelen(line, size);
456                 if (!len || line[len-1] != '\n')
457                         break;
458                 for (i = 0; i < sizeof(optable) / sizeof(optable[0]); i++) {
459                         const struct opentry *p = optable + i;
460                         int oplen = strlen(p->str);
461                         if (len < oplen || memcmp(p->str, line, oplen))
462                                 continue;
463                         if (p->fn(line + oplen, patch) < 0)
464                                 return offset;
465                         break;
466                 }
467         }
468
469         return offset;
470 }
471
472 static int parse_num(const char *line, unsigned long *p)
473 {
474         char *ptr;
475
476         if (!isdigit(*line))
477                 return 0;
478         *p = strtoul(line, &ptr, 10);
479         return ptr - line;
480 }
481
482 static int parse_range(const char *line, int len, int offset, const char *expect,
483                         unsigned long *p1, unsigned long *p2)
484 {
485         int digits, ex;
486
487         if (offset < 0 || offset >= len)
488                 return -1;
489         line += offset;
490         len -= offset;
491
492         digits = parse_num(line, p1);
493         if (!digits)
494                 return -1;
495
496         offset += digits;
497         line += digits;
498         len -= digits;
499
500         *p2 = *p1;
501         if (*line == ',') {
502                 digits = parse_num(line+1, p2);
503                 if (!digits)
504                         return -1;
505
506                 offset += digits+1;
507                 line += digits+1;
508                 len -= digits+1;
509         }
510
511         ex = strlen(expect);
512         if (ex > len)
513                 return -1;
514         if (memcmp(line, expect, ex))
515                 return -1;
516
517         return offset + ex;
518 }
519
520 /*
521  * Parse a unified diff fragment header of the
522  * form "@@ -a,b +c,d @@"
523  */
524 static int parse_fragment_header(char *line, int len, struct fragment *fragment)
525 {
526         int offset;
527
528         if (!len || line[len-1] != '\n')
529                 return -1;
530
531         /* Figure out the number of lines in a fragment */
532         offset = parse_range(line, len, 4, " +", &fragment->oldpos, &fragment->oldlines);
533         offset = parse_range(line, len, offset, " @@", &fragment->newpos, &fragment->newlines);
534
535         return offset;
536 }
537
538 static int find_header(char *line, unsigned long size, int *hdrsize, struct patch *patch)
539 {
540         unsigned long offset, len;
541
542         patch->is_rename = patch->is_copy = 0;
543         patch->is_new = patch->is_delete = -1;
544         patch->old_mode = patch->new_mode = 0;
545         patch->old_name = patch->new_name = NULL;
546         for (offset = 0; size > 0; offset += len, size -= len, line += len, linenr++) {
547                 unsigned long nextlen;
548
549                 len = linelen(line, size);
550                 if (!len)
551                         break;
552
553                 /* Testing this early allows us to take a few shortcuts.. */
554                 if (len < 6)
555                         continue;
556
557                 /*
558                  * Make sure we don't find any unconnected patch fragmants.
559                  * That's a sign that we didn't find a header, and that a
560                  * patch has become corrupted/broken up.
561                  */
562                 if (!memcmp("@@ -", line, 4)) {
563                         struct fragment dummy;
564                         if (parse_fragment_header(line, len, &dummy) < 0)
565                                 continue;
566                         error("patch fragment without header at line %d: %.*s", linenr, (int)len-1, line);
567                 }
568
569                 if (size < len + 6)
570                         break;
571
572                 /*
573                  * Git patch? It might not have a real patch, just a rename
574                  * or mode change, so we handle that specially
575                  */
576                 if (!memcmp("diff --git ", line, 11)) {
577                         int git_hdr_len = parse_git_header(line, len, size, patch);
578                         if (git_hdr_len <= len)
579                                 continue;
580                         if (!patch->old_name && !patch->new_name) {
581                                 if (!patch->def_name)
582                                         die("git diff header lacks filename information (line %d)", linenr);
583                                 patch->old_name = patch->new_name = patch->def_name;
584                         }
585                         *hdrsize = git_hdr_len;
586                         return offset;
587                 }
588
589                 /** --- followed by +++ ? */
590                 if (memcmp("--- ", line,  4) || memcmp("+++ ", line + len, 4))
591                         continue;
592
593                 /*
594                  * We only accept unified patches, so we want it to
595                  * at least have "@@ -a,b +c,d @@\n", which is 14 chars
596                  * minimum
597                  */
598                 nextlen = linelen(line + len, size - len);
599                 if (size < nextlen + 14 || memcmp("@@ -", line + len + nextlen, 4))
600                         continue;
601
602                 /* Ok, we'll consider it a patch */
603                 parse_traditional_patch(line, line+len, patch);
604                 *hdrsize = len + nextlen;
605                 linenr += 2;
606                 return offset;
607         }
608         return -1;
609 }
610
611 /*
612  * Parse a unified diff. Note that this really needs
613  * to parse each fragment separately, since the only
614  * way to know the difference between a "---" that is
615  * part of a patch, and a "---" that starts the next
616  * patch is to look at the line counts..
617  */
618 static int parse_fragment(char *line, unsigned long size, struct patch *patch, struct fragment *fragment)
619 {
620         int added, deleted;
621         int len = linelen(line, size), offset;
622         unsigned long oldlines, newlines;
623
624         offset = parse_fragment_header(line, len, fragment);
625         if (offset < 0)
626                 return -1;
627         oldlines = fragment->oldlines;
628         newlines = fragment->newlines;
629
630         if (patch->is_new < 0) {
631                 patch->is_new =  !oldlines;
632                 if (!oldlines)
633                         patch->old_name = NULL;
634         }
635         if (patch->is_delete < 0) {
636                 patch->is_delete = !newlines;
637                 if (!newlines)
638                         patch->new_name = NULL;
639         }
640
641         if (patch->is_new != !oldlines)
642                 return error("new file depends on old contents");
643         if (patch->is_delete != !newlines) {
644                 if (newlines)
645                         return error("deleted file still has contents");
646                 fprintf(stderr, "** warning: file %s becomes empty but is not deleted\n", patch->new_name);
647         }
648
649         /* Parse the thing.. */
650         line += len;
651         size -= len;
652         linenr++;
653         added = deleted = 0;
654         for (offset = len; size > 0; offset += len, size -= len, line += len, linenr++) {
655                 if (!oldlines && !newlines)
656                         break;
657                 len = linelen(line, size);
658                 if (!len || line[len-1] != '\n')
659                         return -1;
660                 switch (*line) {
661                 default:
662                         return -1;
663                 case ' ':
664                         oldlines--;
665                         newlines--;
666                         break;
667                 case '-':
668                         deleted++;
669                         oldlines--;
670                         break;
671                 case '+':
672                         added++;
673                         newlines--;
674                         break;
675
676                 /* We allow "\ No newline at end of file". Depending
677                  * on locale settings when the patch was produced we
678                  * don't know what this line looks like. The only
679                  * thing we do know is that it begins with "\ ". */
680                 case '\\':
681                         if (len < 12 || memcmp(line, "\\ ", 2))
682                                 return -1;
683                         break;
684                 }
685         }
686         /* If a fragment ends with an incomplete line, we failed to include
687          * it in the above loop because we hit oldlines == newlines == 0
688          * before seeing it.
689          */
690         if (12 < size && !memcmp(line, "\\ ", 2))
691                 offset += linelen(line, size);
692
693         patch->lines_added += added;
694         patch->lines_deleted += deleted;
695         return offset;
696 }
697
698 static int parse_single_patch(char *line, unsigned long size, struct patch *patch)
699 {
700         unsigned long offset = 0;
701         struct fragment **fragp = &patch->fragments;
702
703         while (size > 4 && !memcmp(line, "@@ -", 4)) {
704                 struct fragment *fragment;
705                 int len;
706
707                 fragment = xmalloc(sizeof(*fragment));
708                 memset(fragment, 0, sizeof(*fragment));
709                 len = parse_fragment(line, size, patch, fragment);
710                 if (len <= 0)
711                         die("corrupt patch at line %d", linenr);
712
713                 fragment->patch = line;
714                 fragment->size = len;
715
716                 *fragp = fragment;
717                 fragp = &fragment->next;
718
719                 offset += len;
720                 line += len;
721                 size -= len;
722         }
723         return offset;
724 }
725
726 static int parse_chunk(char *buffer, unsigned long size, struct patch *patch)
727 {
728         int hdrsize, patchsize;
729         int offset = find_header(buffer, size, &hdrsize, patch);
730
731         if (offset < 0)
732                 return offset;
733
734         patchsize = parse_single_patch(buffer + offset + hdrsize, size - offset - hdrsize, patch);
735
736         return offset + hdrsize + patchsize;
737 }
738
739 static const char pluses[] = "++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++";
740 static const char minuses[]= "----------------------------------------------------------------------";
741
742 static void show_stats(struct patch *patch)
743 {
744         const char *prefix = "";
745         char *name = patch->new_name;
746         int len, max, add, del, total;
747
748         if (!name)
749                 name = patch->old_name;
750
751         /*
752          * "scale" the filename
753          */
754         len = strlen(name);
755         max = max_len;
756         if (max > 50)
757                 max = 50;
758         if (len > max) {
759                 char *slash;
760                 prefix = "...";
761                 max -= 3;
762                 name += len - max;
763                 slash = strchr(name, '/');
764                 if (slash)
765                         name = slash;
766         }
767         len = max;
768
769         /*
770          * scale the add/delete
771          */
772         max = max_change;
773         if (max + len > 70)
774                 max = 70 - len;
775
776         add = patch->lines_added;
777         del = patch->lines_deleted;
778         total = add + del;
779
780         if (max_change > 0) {
781                 total = (total * max + max_change / 2) / max_change;
782                 add = (add * max + max_change / 2) / max_change;
783                 del = total - add;
784         }
785         printf(" %s%-*s |%5d %.*s%.*s\n", prefix,
786                 len, name, patch->lines_added + patch->lines_deleted,
787                 add, pluses, del, minuses);
788 }
789
790 static int read_old_data(struct stat *st, const char *path, void *buf, unsigned long size)
791 {
792         int fd;
793         unsigned long got;
794
795         switch (st->st_mode & S_IFMT) {
796         case S_IFLNK:
797                 return readlink(path, buf, size);
798         case S_IFREG:
799                 fd = open(path, O_RDONLY);
800                 if (fd < 0)
801                         return error("unable to open %s", path);
802                 got = 0;
803                 for (;;) {
804                         int ret = read(fd, buf + got, size - got);
805                         if (ret < 0) {
806                                 if (errno == EAGAIN)
807                                         continue;
808                                 break;
809                         }
810                         if (!ret)
811                                 break;
812                         got += ret;
813                 }
814                 close(fd);
815                 return got;
816
817         default:
818                 return -1;
819         }
820 }
821
822 static int find_offset(const char *buf, unsigned long size, const char *fragment, unsigned long fragsize, int line)
823 {
824         int i;
825         unsigned long start, backwards, forwards;
826
827         if (fragsize > size)
828                 return -1;
829
830         start = 0;
831         if (line > 1) {
832                 unsigned long offset = 0;
833                 i = line-1;
834                 while (offset + fragsize <= size) {
835                         if (buf[offset++] == '\n') {
836                                 start = offset;
837                                 if (!--i)
838                                         break;
839                         }
840                 }
841         }
842
843         /* Exact line number? */
844         if (!memcmp(buf + start, fragment, fragsize))
845                 return start;
846
847         /*
848          * There's probably some smart way to do this, but I'll leave
849          * that to the smart and beautiful people. I'm simple and stupid.
850          */
851         backwards = start;
852         forwards = start;
853         for (i = 0; ; i++) {
854                 unsigned long try;
855                 int n;
856
857                 /* "backward" */
858                 if (i & 1) {
859                         if (!backwards) {
860                                 if (forwards + fragsize > size)
861                                         break;
862                                 continue;
863                         }
864                         do {
865                                 --backwards;
866                         } while (backwards && buf[backwards-1] != '\n');
867                         try = backwards;
868                 } else {
869                         while (forwards + fragsize <= size) {
870                                 if (buf[forwards++] == '\n')
871                                         break;
872                         }
873                         try = forwards;
874                 }
875
876                 if (try + fragsize > size)
877                         continue;
878                 if (memcmp(buf + try, fragment, fragsize))
879                         continue;
880                 n = (i >> 1)+1;
881                 if (i & 1)
882                         n = -n;
883                 return try;
884         }
885
886         /*
887          * We should start searching forward and backward.
888          */
889         return -1;
890 }
891
892 struct buffer_desc {
893         char *buffer;
894         unsigned long size;
895         unsigned long alloc;
896 };
897
898 static int apply_one_fragment(struct buffer_desc *desc, struct fragment *frag)
899 {
900         char *buf = desc->buffer;
901         const char *patch = frag->patch;
902         int offset, size = frag->size;
903         char *old = xmalloc(size);
904         char *new = xmalloc(size);
905         int oldsize = 0, newsize = 0;
906
907         while (size > 0) {
908                 int len = linelen(patch, size);
909                 int plen;
910
911                 if (!len)
912                         break;
913
914                 /*
915                  * "plen" is how much of the line we should use for
916                  * the actual patch data. Normally we just remove the
917                  * first character on the line, but if the line is
918                  * followed by "\ No newline", then we also remove the
919                  * last one (which is the newline, of course).
920                  */
921                 plen = len-1;
922                 if (len < size && patch[len] == '\\')
923                         plen--;
924                 switch (*patch) {
925                 case ' ':
926                 case '-':
927                         memcpy(old + oldsize, patch + 1, plen);
928                         oldsize += plen;
929                         if (*patch == '-')
930                                 break;
931                 /* Fall-through for ' ' */
932                 case '+':
933                         memcpy(new + newsize, patch + 1, plen);
934                         newsize += plen;
935                         break;
936                 case '@': case '\\':
937                         /* Ignore it, we already handled it */
938                         break;
939                 default:
940                         return -1;
941                 }
942                 patch += len;
943                 size -= len;
944         }
945
946         offset = find_offset(buf, desc->size, old, oldsize, frag->newpos);
947         if (offset >= 0) {
948                 int diff = newsize - oldsize;
949                 unsigned long size = desc->size + diff;
950                 unsigned long alloc = desc->alloc;
951
952                 if (size > alloc) {
953                         alloc = size + 8192;
954                         desc->alloc = alloc;
955                         buf = xrealloc(buf, alloc);
956                         desc->buffer = buf;
957                 }
958                 desc->size = size;
959                 memmove(buf + offset + newsize, buf + offset + oldsize, size - offset - newsize);
960                 memcpy(buf + offset, new, newsize);
961                 offset = 0;
962         }
963
964         free(old);
965         free(new);
966         return offset;
967 }
968
969 static int apply_fragments(struct buffer_desc *desc, struct patch *patch)
970 {
971         struct fragment *frag = patch->fragments;
972
973         while (frag) {
974                 if (apply_one_fragment(desc, frag) < 0)
975                         return error("patch failed: %s:%ld", patch->old_name, frag->oldpos);
976                 frag = frag->next;
977         }
978         return 0;
979 }
980
981 static int apply_data(struct patch *patch, struct stat *st)
982 {
983         char *buf;
984         unsigned long size, alloc;
985         struct buffer_desc desc;
986
987         size = 0;
988         alloc = 0;
989         buf = NULL;
990         if (patch->old_name) {
991                 size = st->st_size;
992                 alloc = size + 8192;
993                 buf = xmalloc(alloc);
994                 if (read_old_data(st, patch->old_name, buf, alloc) != size)
995                         return error("read of %s failed", patch->old_name);
996         }
997
998         desc.size = size;
999         desc.alloc = alloc;
1000         desc.buffer = buf;
1001         if (apply_fragments(&desc, patch) < 0)
1002                 return -1;
1003         patch->result = desc.buffer;
1004         patch->resultsize = desc.size;
1005
1006         if (patch->is_delete && patch->resultsize)
1007                 return error("removal patch leaves file contents");
1008
1009         return 0;
1010 }
1011
1012 static int check_patch(struct patch *patch)
1013 {
1014         struct stat st;
1015         const char *old_name = patch->old_name;
1016         const char *new_name = patch->new_name;
1017
1018         if (old_name) {
1019                 int changed;
1020
1021                 if (lstat(old_name, &st) < 0)
1022                         return error("%s: %s", old_name, strerror(errno));
1023                 if (check_index) {
1024                         int pos = cache_name_pos(old_name, strlen(old_name));
1025                         if (pos < 0)
1026                                 return error("%s: does not exist in index", old_name);
1027                         changed = ce_match_stat(active_cache[pos], &st);
1028                         if (changed)
1029                                 return error("%s: does not match index", old_name);
1030                 }
1031                 if (patch->is_new < 0)
1032                         patch->is_new = 0;
1033                 st.st_mode = ntohl(create_ce_mode(st.st_mode));
1034                 if (!patch->old_mode)
1035                         patch->old_mode = st.st_mode;
1036                 if ((st.st_mode ^ patch->old_mode) & S_IFMT)
1037                         return error("%s: wrong type", old_name);
1038                 if (st.st_mode != patch->old_mode)
1039                         fprintf(stderr, "warning: %s has type %o, expected %o\n",
1040                                 old_name, st.st_mode, patch->old_mode);
1041         }
1042
1043         if (new_name && (patch->is_new | patch->is_rename | patch->is_copy)) {
1044                 if (check_index && cache_name_pos(new_name, strlen(new_name)) >= 0)
1045                         return error("%s: already exists in index", new_name);
1046                 if (!lstat(new_name, &st))
1047                         return error("%s: already exists in working directory", new_name);
1048                 if (errno != ENOENT)
1049                         return error("%s: %s", new_name, strerror(errno));
1050                 if (!patch->new_mode) {
1051                         if (patch->is_new)
1052                                 patch->new_mode = S_IFREG | 0644;
1053                         else
1054                                 patch->new_mode = patch->old_mode;
1055                 }
1056         }
1057
1058         if (new_name && old_name) {
1059                 int same = !strcmp(old_name, new_name);
1060                 if (!patch->new_mode)
1061                         patch->new_mode = patch->old_mode;
1062                 if ((patch->old_mode ^ patch->new_mode) & S_IFMT)
1063                         return error("new mode (%o) of %s does not match old mode (%o)%s%s",
1064                                 patch->new_mode, new_name, patch->old_mode,
1065                                 same ? "" : " of ", same ? "" : old_name);
1066         }       
1067
1068         if (apply_data(patch, &st) < 0)
1069                 return error("%s: patch does not apply", old_name);
1070         return 0;
1071 }
1072
1073 static int check_patch_list(struct patch *patch)
1074 {
1075         int error = 0;
1076
1077         for (;patch ; patch = patch->next)
1078                 error |= check_patch(patch);
1079         return error;
1080 }
1081
1082 static void show_file(int c, unsigned int mode, const char *name)
1083 {
1084         printf("%c %o %s\n", c, mode, name);
1085 }
1086
1087 static void show_file_list(struct patch *patch)
1088 {
1089         for (;patch ; patch = patch->next) {
1090                 if (patch->is_rename) {
1091                         show_file('-', patch->old_mode, patch->old_name);
1092                         show_file('+', patch->new_mode, patch->new_name);
1093                         continue;
1094                 }
1095                 if (patch->is_copy || patch->is_new) {
1096                         show_file('+', patch->new_mode, patch->new_name);
1097                         continue;
1098                 }
1099                 if (patch->is_delete) {
1100                         show_file('-', patch->old_mode, patch->old_name);
1101                         continue;
1102                 }
1103                 if (patch->old_mode && patch->new_mode && patch->old_mode != patch->new_mode) {
1104                         printf("M %o:%o %s\n", patch->old_mode, patch->new_mode, patch->old_name);
1105                         continue;
1106                 }
1107                 printf("M %o %s\n", patch->old_mode, patch->old_name);
1108         }
1109 }
1110
1111 static void stat_patch_list(struct patch *patch)
1112 {
1113         int files, adds, dels;
1114
1115         for (files = adds = dels = 0 ; patch ; patch = patch->next) {
1116                 files++;
1117                 adds += patch->lines_added;
1118                 dels += patch->lines_deleted;
1119                 show_stats(patch);
1120         }
1121
1122         printf(" %d files changed, %d insertions(+), %d deletions(-)\n", files, adds, dels);
1123 }
1124
1125 static void show_file_mode_name(const char *newdelete, unsigned int mode, const char *name)
1126 {
1127         if (mode)
1128                 printf(" %s mode %06o %s\n", newdelete, mode, name);
1129         else
1130                 printf(" %s %s\n", newdelete, name);
1131 }
1132
1133 static void show_mode_change(struct patch *p, int show_name)
1134 {
1135         if (p->old_mode && p->new_mode && p->old_mode != p->new_mode) {
1136                 if (show_name)
1137                         printf(" mode change %06o => %06o %s\n",
1138                                p->old_mode, p->new_mode, p->new_name);
1139                 else
1140                         printf(" mode change %06o => %06o\n",
1141                                p->old_mode, p->new_mode);
1142         }
1143 }
1144
1145 static void show_rename_copy(struct patch *p)
1146 {
1147         const char *renamecopy = p->is_rename ? "rename" : "copy";
1148         const char *old, *new;
1149
1150         /* Find common prefix */
1151         old = p->old_name;
1152         new = p->new_name;
1153         while (1) {
1154                 const char *slash_old, *slash_new;
1155                 slash_old = strchr(old, '/');
1156                 slash_new = strchr(new, '/');
1157                 if (!slash_old ||
1158                     !slash_new ||
1159                     slash_old - old != slash_new - new ||
1160                     memcmp(old, new, slash_new - new))
1161                         break;
1162                 old = slash_old + 1;
1163                 new = slash_new + 1;
1164         }
1165         /* p->old_name thru old is the common prefix, and old and new
1166          * through the end of names are renames
1167          */
1168         if (old != p->old_name)
1169                 printf(" %s %.*s{%s => %s} (%d%%)\n", renamecopy,
1170                        (int)(old - p->old_name), p->old_name,
1171                        old, new, p->score);
1172         else
1173                 printf(" %s %s => %s (%d%%)\n", renamecopy,
1174                        p->old_name, p->new_name, p->score);
1175         show_mode_change(p, 0);
1176 }
1177
1178 static void summary_patch_list(struct patch *patch)
1179 {
1180         struct patch *p;
1181
1182         for (p = patch; p; p = p->next) {
1183                 if (p->is_new)
1184                         show_file_mode_name("create", p->new_mode, p->new_name);
1185                 else if (p->is_delete)
1186                         show_file_mode_name("delete", p->old_mode, p->old_name);
1187                 else {
1188                         if (p->is_rename || p->is_copy)
1189                                 show_rename_copy(p);
1190                         else {
1191                                 if (p->score) {
1192                                         printf(" rewrite %s (%d%%)\n",
1193                                                p->new_name, p->score);
1194                                         show_mode_change(p, 0);
1195                                 }
1196                                 else
1197                                         show_mode_change(p, 1);
1198                         }
1199                 }
1200         }
1201 }
1202
1203 static void patch_stats(struct patch *patch)
1204 {
1205         int lines = patch->lines_added + patch->lines_deleted;
1206
1207         if (lines > max_change)
1208                 max_change = lines;
1209         if (patch->old_name) {
1210                 int len = strlen(patch->old_name);
1211                 if (len > max_len)
1212                         max_len = len;
1213         }
1214         if (patch->new_name) {
1215                 int len = strlen(patch->new_name);
1216                 if (len > max_len)
1217                         max_len = len;
1218         }
1219 }
1220
1221 static void remove_file(struct patch *patch)
1222 {
1223         if (write_index) {
1224                 if (remove_file_from_cache(patch->old_name) < 0)
1225                         die("unable to remove %s from index", patch->old_name);
1226         }
1227         unlink(patch->old_name);
1228 }
1229
1230 static void add_index_file(const char *path, unsigned mode, void *buf, unsigned long size)
1231 {
1232         struct stat st;
1233         struct cache_entry *ce;
1234         int namelen = strlen(path);
1235         unsigned ce_size = cache_entry_size(namelen);
1236
1237         if (!write_index)
1238                 return;
1239
1240         ce = xmalloc(ce_size);
1241         memset(ce, 0, ce_size);
1242         memcpy(ce->name, path, namelen);
1243         ce->ce_mode = create_ce_mode(mode);
1244         ce->ce_flags = htons(namelen);
1245         if (lstat(path, &st) < 0)
1246                 die("unable to stat newly created file %s", path);
1247         fill_stat_cache_info(ce, &st);
1248         if (write_sha1_file(buf, size, "blob", ce->sha1) < 0)
1249                 die("unable to create backing store for newly created file %s", path);
1250         if (add_cache_entry(ce, ADD_CACHE_OK_TO_ADD) < 0)
1251                 die("unable to add cache entry for %s", path);
1252 }
1253
1254 static void create_subdirectories(const char *path)
1255 {
1256         int len = strlen(path);
1257         char *buf = xmalloc(len + 1);
1258         const char *slash = path;
1259
1260         while ((slash = strchr(slash+1, '/')) != NULL) {
1261                 len = slash - path;
1262                 memcpy(buf, path, len);
1263                 buf[len] = 0;
1264                 if (mkdir(buf, 0777) < 0) {
1265                         if (errno != EEXIST)
1266                                 break;
1267                 }
1268         }
1269         free(buf);
1270 }
1271
1272 static int try_create_file(const char *path, unsigned int mode, const char *buf, unsigned long size)
1273 {
1274         int fd;
1275
1276         if (S_ISLNK(mode))
1277                 return symlink(buf, path);
1278         fd = open(path, O_CREAT | O_EXCL | O_WRONLY | O_TRUNC, (mode & 0100) ? 0777 : 0666);
1279         if (fd < 0)
1280                 return -1;
1281         while (size) {
1282                 int written = write(fd, buf, size);
1283                 if (written < 0) {
1284                         if (errno == EINTR || errno == EAGAIN)
1285                                 continue;
1286                         die("writing file %s: %s", path, strerror(errno));
1287                 }
1288                 if (!written)
1289                         die("out of space writing file %s", path);
1290                 buf += written;
1291                 size -= written;
1292         }
1293         if (close(fd) < 0)
1294                 die("closing file %s: %s", path, strerror(errno));
1295         return 0;
1296 }
1297
1298 /*
1299  * We optimistically assume that the directories exist,
1300  * which is true 99% of the time anyway. If they don't,
1301  * we create them and try again.
1302  */
1303 static void create_one_file(const char *path, unsigned mode, const char *buf, unsigned long size)
1304 {
1305         if (!try_create_file(path, mode, buf, size))
1306                 return;
1307
1308         if (errno == ENOENT) {
1309                 create_subdirectories(path);
1310                 if (!try_create_file(path, mode, buf, size))
1311                         return;
1312         }
1313
1314         if (errno == EEXIST) {
1315                 unsigned int nr = getpid();
1316
1317                 for (;;) {
1318                         const char *newpath;
1319                         newpath = mkpath("%s~%u", path, nr);
1320                         if (!try_create_file(newpath, mode, buf, size)) {
1321                                 if (!rename(newpath, path))
1322                                         return;
1323                                 unlink(newpath);
1324                                 break;
1325                         }
1326                         if (errno != EEXIST)
1327                                 break;
1328                 }                       
1329         }
1330         die("unable to write file %s mode %o", path, mode);
1331 }
1332
1333 static void create_file(struct patch *patch)
1334 {
1335         const char *path = patch->new_name;
1336         unsigned mode = patch->new_mode;
1337         unsigned long size = patch->resultsize;
1338         char *buf = patch->result;
1339
1340         if (!mode)
1341                 mode = S_IFREG | 0644;
1342         create_one_file(path, mode, buf, size); 
1343         add_index_file(path, mode, buf, size);
1344 }
1345
1346 static void write_out_one_result(struct patch *patch)
1347 {
1348         if (patch->is_delete > 0) {
1349                 remove_file(patch);
1350                 return;
1351         }
1352         if (patch->is_new > 0 || patch->is_copy) {
1353                 create_file(patch);
1354                 return;
1355         }
1356         /*
1357          * Rename or modification boils down to the same
1358          * thing: remove the old, write the new
1359          */
1360         remove_file(patch);
1361         create_file(patch);
1362 }
1363
1364 static void write_out_results(struct patch *list, int skipped_patch)
1365 {
1366         if (!list && !skipped_patch)
1367                 die("No changes");
1368
1369         while (list) {
1370                 write_out_one_result(list);
1371                 list = list->next;
1372         }
1373 }
1374
1375 static struct cache_file cache_file;
1376
1377 static struct excludes {
1378         struct excludes *next;
1379         const char *path;
1380 } *excludes;
1381
1382 static int use_patch(struct patch *p)
1383 {
1384         const char *pathname = p->new_name ? p->new_name : p->old_name;
1385         struct excludes *x = excludes;
1386         while (x) {
1387                 if (fnmatch(x->path, pathname, 0) == 0)
1388                         return 0;
1389                 x = x->next;
1390         }
1391         return 1;
1392 }
1393
1394 static int apply_patch(int fd)
1395 {
1396         int newfd;
1397         unsigned long offset, size;
1398         char *buffer = read_patch_file(fd, &size);
1399         struct patch *list = NULL, **listp = &list;
1400         int skipped_patch = 0;
1401
1402         if (!buffer)
1403                 return -1;
1404         offset = 0;
1405         while (size > 0) {
1406                 struct patch *patch;
1407                 int nr;
1408
1409                 patch = xmalloc(sizeof(*patch));
1410                 memset(patch, 0, sizeof(*patch));
1411                 nr = parse_chunk(buffer + offset, size, patch);
1412                 if (nr < 0)
1413                         break;
1414                 if (use_patch(patch)) {
1415                         patch_stats(patch);
1416                         *listp = patch;
1417                         listp = &patch->next;
1418                 } else {
1419                         /* perhaps free it a bit better? */
1420                         free(patch);
1421                         skipped_patch++;
1422                 }
1423                 offset += nr;
1424                 size -= nr;
1425         }
1426
1427         newfd = -1;
1428         write_index = check_index && apply;
1429         if (write_index)
1430                 newfd = hold_index_file_for_update(&cache_file, get_index_file());
1431         if (check_index) {
1432                 if (read_cache() < 0)
1433                         die("unable to read index file");
1434         }
1435
1436         if ((check || apply) && check_patch_list(list) < 0)
1437                 exit(1);
1438
1439         if (apply)
1440                 write_out_results(list, skipped_patch);
1441
1442         if (write_index) {
1443                 if (write_cache(newfd, active_cache, active_nr) ||
1444                     commit_index_file(&cache_file))
1445                         die("Unable to write new cachefile");
1446         }
1447
1448         if (show_files)
1449                 show_file_list(list);
1450
1451         if (diffstat)
1452                 stat_patch_list(list);
1453
1454         if (summary)
1455                 summary_patch_list(list);
1456
1457         free(buffer);
1458         return 0;
1459 }
1460
1461 int main(int argc, char **argv)
1462 {
1463         int i;
1464         int read_stdin = 1;
1465
1466         for (i = 1; i < argc; i++) {
1467                 const char *arg = argv[i];
1468                 int fd;
1469
1470                 if (!strcmp(arg, "-")) {
1471                         apply_patch(0);
1472                         read_stdin = 0;
1473                         continue;
1474                 }
1475                 if (!strncmp(arg, "--exclude=", 10)) {
1476                         struct excludes *x = xmalloc(sizeof(*x));
1477                         x->path = arg + 10;
1478                         x->next = excludes;
1479                         excludes = x;
1480                         continue;
1481                 }
1482                 /* NEEDSWORK: this does not do anything at this moment. */
1483                 if (!strcmp(arg, "--no-merge")) {
1484                         merge_patch = 0;
1485                         continue;
1486                 }
1487                 if (!strcmp(arg, "--stat")) {
1488                         apply = 0;
1489                         diffstat = 1;
1490                         continue;
1491                 }
1492                 if (!strcmp(arg, "--summary")) {
1493                         apply = 0;
1494                         summary = 1;
1495                         continue;
1496                 }
1497                 if (!strcmp(arg, "--check")) {
1498                         apply = 0;
1499                         check = 1;
1500                         continue;
1501                 }
1502                 if (!strcmp(arg, "--index")) {
1503                         check_index = 1;
1504                         continue;
1505                 }
1506                 if (!strcmp(arg, "--apply")) {
1507                         apply = 1;
1508                         continue;
1509                 }
1510                 if (!strcmp(arg, "--show-files")) {
1511                         show_files = 1;
1512                         continue;
1513                 }
1514                 fd = open(arg, O_RDONLY);
1515                 if (fd < 0)
1516                         usage(apply_usage);
1517                 read_stdin = 0;
1518                 apply_patch(fd);
1519                 close(fd);
1520         }
1521         if (read_stdin)
1522                 apply_patch(0);
1523         return 0;
1524 }